蓋世汽車訊 隨著車載攝像頭數量和復雜性的增加，以及機器和人類視覺對輸出的要求不盡相同，高效且安全地轉換圖像數據需要更高的計算能力。為了在ADAS和自動駕駛中啟用新功能，汽車行業將需要一種新的圖像處理方法。

據外媒報道，Arm宣布推出全新車用影像訊號處理器Arm? Mali?-C78AE ISP，以進一步補充其專為滿足車用效能與安全需求開發的IP產品。新增的Mali-C78AE搭配Cortex?-A78AE與Mali-G78AE，可提供先進駕駛輔助系統（ADAS）完整的視覺信息處理管線，以優化效能、降低功耗，并提供一致的方法達成功能性安全的要求，從而推動ADAS功能在市場的應用。

（圖片來源：Arm）

Arm車用與物聯網事業部副總裁Chet Babla表示：“Mali-C78AE滿足業界對于全新圖像處理方式的需求，并可助力實現ADAS與自動駕駛的全新功能。”

安全是人類與機器視覺最關鍵的部分

ADAS功能使用多個攝像頭來支持各種人類和機器視覺應用。例如，環視系統使用來自車輛周圍攝像頭的數據，并以視覺方式向駕駛員顯示信息，以幫助他們在停車時做出決策。另一方面，自適應巡航控制直接使用攝像頭數據來解釋環境，并做出獨立于駕駛員的車輛控制決策，例如踩油門或剎車。Mali-C78AE專為各種人類和機器視覺安全應用設計，最高可處理來自實時4臺攝像頭或16臺虛擬攝像頭的數據。

開發初期，Mali-C78AE就具備硬件安全機制與軟件診斷功能，因此系統設計人員可使產品設計滿足ISO 26262 ASIL B功能性安全的要求。Mali-C78AE旨在預防或檢測單個相機幀中可能導致幀數據處理不正確的故障。為此，該ISP具備380多個故障檢測線路，持續內建自我檢測，并可檢測連接攝影頭中的傳感器及硬件的故障。

視覺需要大量數據，工作負載量極高

對安全和用戶體驗同樣重要的是處理速度，這是Mali-C78AE的關鍵要素。在傳感器處獲取圖像、通過ISP然后通過GPU處理，并將其顯示在屏幕上供駕駛員使用，共需要150毫秒；例如，在使用停車輔助系統時，駕駛員會很容易發現影像延遲現象。在機器視覺應用中，車輛在獲取攝像頭圖像和將其呈現給決策處理過程中，車輛得移動距應不超過250毫米；若超過該距離，代表機器視覺系統反應速度過慢，無法滿足駕駛環境所需的精確與實時的決定要求。

為了使駕駛員和機器能夠做出最佳決策，ADAS攝像頭必須從每一幀中收集最相關的信息。Mali-C78AE采用先進的降噪技術和動態范圍管理，通過調整畫面過暗或過亮的區域，確保每一幀畫面清晰且曝光適當。Mali-C78A可實時處理多達四臺高分辨率、高幀率攝像頭的數據，從而顯著降低內存、通信和處理要求，從而提高系統效率。

如今，要實現多個ADAS功能，需要單獨的攝像頭設置，因為用于機器視覺應用的攝像頭（例如車道偏離警告）不會產生適合人類視覺的圖像（如環景影像）。為了降低實現多個ADAS功能的成本，Mali-C78AE通過縮小和顏色轉換為機器視覺優化的傳感器輸出，以創建適合肉眼的圖像，從而使攝像頭傳感器具有雙重用途。通過避免攝像頭及其相關電子設備和布線的重復，OEM可以節省成本并降低復雜性，因此可以在各種車型中更廣泛地部署基于攝像頭的ADAS功能，從而為駕駛員提供更安全、更好的用戶體驗。

為ADAS提供強大的視覺處理管線，并獲業界先驅采用

Mali-C78AE是ADAS系統所需專業處理的重要元素。結合Cortex-A78AE和Mali-G78AE，Mali-C78AE的加入可提供完整的ADAS視覺管道，以優化性能、最小化功耗并提供一致的功能安全方法。

汽車視覺安全技術先驅Mobileye，率先在其下一代EyeQ技術中采用全新的Mali-C78AE ISP。當Mobileye開始著手開發Mobileye EyeQ Ultra與EyeQ6H時，便選擇采用Mali-C78AE高效處理影像數據，并藉由搭配Mali-G78AE GPU，實現兼具安全性、流暢性、實時性與直覺性的圖形渲染功能，從而滿足嚴苛的車用要求。

Mobileye工程執行副總裁Elchanan Rushinek表示：“針對環景可視化功能，我們結合并使用Arm的ISP與GPU技術，可提供集中式的運算解決方案，藉由單顆系統單芯片，以提供最先進的ADAS與停車輔助系統。”

返回第一電動網首頁 >