隨著車載攝像頭數(shù)量和復(fù)雜性的增加，以及機(jī)器和人類視覺對輸出的要求不盡相同，高效且安全地轉(zhuǎn)換圖像數(shù)據(jù)需要更高的計(jì)算能力。為了在ADAS和自動駕駛中啟用新功能，汽車行業(yè)將需要一種新的圖像處理方法。
       據(jù)外媒報道，Arm宣布推出全新車用影像訊號處理器Arm? Mali?-C78AE ISP，以進(jìn)一步補(bǔ)充其專為滿足車用效能與安全需求開發(fā)的IP產(chǎn)品。新增的Mali-C78AE搭配Cortex?-A78AE與Mali-G78AE，可提供先進(jìn)駕駛輔助系統(tǒng)（ADAS）完整的視覺信息處理管線，以優(yōu)化效能、降低功耗，并提供一致的方法達(dá)成功能性安全的要求，從而推動ADAS功能在市場的應(yīng)用。

（圖片來源：Arm）

       Arm車用與物聯(lián)網(wǎng)事業(yè)部副總裁Chet Babla表示：“Mali-C78AE滿足業(yè)界對于全新圖像處理方式的需求，并可助力實(shí)現(xiàn)ADAS與自動駕駛的全新功能?！?/P>

安全是人類與機(jī)器視覺最關(guān)鍵的部分
       ADAS功能使用多個攝像頭來支持各種人類和機(jī)器視覺應(yīng)用。例如，環(huán)視系統(tǒng)使用來自車輛周圍攝像頭的數(shù)據(jù)，并以視覺方式向駕駛員顯示信息，以幫助他們在停車時做出決策。另一方面，自適應(yīng)巡航控制直接使用攝像頭數(shù)據(jù)來解釋環(huán)境，并做出獨(dú)立于駕駛員的車輛控制決策，例如踩油門或剎車。Mali-C78AE專為各種人類和機(jī)器視覺安全應(yīng)用設(shè)計(jì)，最高可處理來自實(shí)時4臺攝像頭或16臺虛擬攝像頭的數(shù)據(jù)。
       開發(fā)初期，Mali-C78AE就具備硬件安全機(jī)制與軟件診斷功能，因此系統(tǒng)設(shè)計(jì)人員可使產(chǎn)品設(shè)計(jì)滿足ISO 26262 ASIL B功能性安全的要求。Mali-C78AE旨在預(yù)防或檢測單個相機(jī)幀中可能導(dǎo)致幀數(shù)據(jù)處理不正確的故障。為此，該ISP具備380多個故障檢測線路，持續(xù)內(nèi)建自我檢測，并可檢測連接攝影頭中的傳感器及硬件的故障。

視覺需要大量數(shù)據(jù)，工作負(fù)載量極高
       對安全和用戶體驗(yàn)同樣重要的是處理速度，這是Mali-C78AE的關(guān)鍵要素。在傳感器處獲取圖像、通過ISP然后通過GPU處理，并將其顯示在屏幕上供駕駛員使用，共需要150毫秒；例如，在使用停車輔助系統(tǒng)時，駕駛員會很容易發(fā)現(xiàn)影像延遲現(xiàn)象。在機(jī)器視覺應(yīng)用中，車輛在獲取攝像頭圖像和將其呈現(xiàn)給決策處理過程中，車輛得移動距應(yīng)不超過250毫米；若超過該距離，代表機(jī)器視覺系統(tǒng)反應(yīng)速度過慢，無法滿足駕駛環(huán)境所需的精確與實(shí)時的決定要求。
       為了使駕駛員和機(jī)器能夠做出最佳決策，ADAS攝像頭必須從每一幀中收集最相關(guān)的信息。Mali-C78AE采用先進(jìn)的降噪技術(shù)和動態(tài)范圍管理，通過調(diào)整畫面過暗或過亮的區(qū)域，確保每一幀畫面清晰且曝光適當(dāng)。Mali-C78A可實(shí)時處理多達(dá)四臺高分辨率、高幀率攝像頭的數(shù)據(jù)，從而顯著降低內(nèi)存、通信和處理要求，從而提高系統(tǒng)效率。
       如今，要實(shí)現(xiàn)多個ADAS功能，需要單獨(dú)的攝像頭設(shè)置，因?yàn)橛糜跈C(jī)器視覺應(yīng)用的攝像頭（例如車道偏離警告）不會產(chǎn)生適合人類視覺的圖像（如環(huán)景影像）。為了降低實(shí)現(xiàn)多個ADAS功能的成本，Mali-C78AE通過縮小和顏色轉(zhuǎn)換為機(jī)器視覺優(yōu)化的傳感器輸出，以創(chuàng)建適合肉眼的圖像，從而使攝像頭傳感器具有雙重用途。通過避免攝像頭及其相關(guān)電子設(shè)備和布線的重復(fù)，OEM可以節(jié)省成本并降低復(fù)雜性，因此可以在各種車型中更廣泛地部署基于攝像頭的ADAS功能，從而為駕駛員提供更安全、更好的用戶體驗(yàn)。

為ADAS提供強(qiáng)大的視覺處理管線，并獲業(yè)界先驅(qū)采用
       Mali-C78AE是ADAS系統(tǒng)所需專業(yè)處理的重要元素。結(jié)合Cortex-A78AE和Mali-G78AE，Mali-C78AE的加入可提供完整的ADAS視覺管道，以優(yōu)化性能、最小化功耗并提供一致的功能安全方法。
       汽車視覺安全技術(shù)先驅(qū)Mobileye，率先在其下一代EyeQ技術(shù)中采用全新的Mali-C78AE ISP。當(dāng)Mobileye開始著手開發(fā)Mobileye EyeQ Ultra與EyeQ6H時，便選擇采用Mali-C78AE高效處理影像數(shù)據(jù)，并藉由搭配Mali-G78AE GPU，實(shí)現(xiàn)兼具安全性、流暢性、實(shí)時性與直覺性的圖形渲染功能，從而滿足嚴(yán)苛的車用要求。
       Mobileye工程執(zhí)行副總裁Elchanan Rushinek表示：“針對環(huán)景可視化功能，我們結(jié)合并使用Arm的ISP與GPU技術(shù)，可提供集中式的運(yùn)算解決方案，藉由單顆系統(tǒng)單芯片，以提供最先進(jìn)的ADAS與停車輔助系統(tǒng)?！?/P>

（轉(zhuǎn)載）