產(chǎn)品中心 應(yīng)用方案 技術(shù)文摘質(zhì)量保證產(chǎn)品選型 下載中心業(yè)內(nèi)動(dòng)態(tài) 選型幫助 品牌介紹 產(chǎn)品一覽 聯(lián)系我們
- Arm 的 Mali 圖像信號(hào)處理器為 ADAS 帶來(lái)曙光
- 來(lái)源：賽斯維傳感器網(wǎng) 發(fā)表于 2022/2/24
環(huán)視系統(tǒng)
駕駛員監(jiān)控系統(tǒng)
物體檢測(cè)/碰撞避免系統(tǒng)
色度降噪
紫邊校正
空間降噪
局部色調(diào)映射函數(shù)
圖像處理仍然是高級(jí)駕駛員監(jiān)控系統(tǒng)的主要障礙。為了應(yīng)對(duì)這一挑戰(zhàn)，Arm 最新的圖像信號(hào)處理器簡(jiǎn)化了 ADAS 和自動(dòng)化技術(shù)的采用。
今天的車(chē)輛與十年前的車(chē)輛之間最顯著的區(qū)別之一是ADAS的突然普及。
不同 ADAS 技術(shù)的概述。圖片由大陸工程服務(wù)公司提供
今天幾乎所有的新車(chē)都配備了傳感器和攝像頭，以確保駕駛對(duì)用戶來(lái)說(shuō)盡可能簡(jiǎn)單和安全。
為了支持這些 ADAS 系統(tǒng)，需要大量的計(jì)算資源。ADAS 系統(tǒng)中最流行的計(jì)算資源之一是ISP。
今天，Arm 宣布了一款專(zhuān)為 ADAS 和自動(dòng)化應(yīng)用設(shè)計(jì)的新 ISP，我們將對(duì)此進(jìn)行討論，以及 ISP 在 ADAS 系統(tǒng)中的作用。
ADAS 中對(duì) ISP 的需求
駕駛是一項(xiàng)視覺(jué)任務(wù)，因此，攝像頭可以說(shuō)是啟用 ADAS 的最關(guān)鍵的傳感器。
在當(dāng)今的 ADAS 系統(tǒng)中，可以找到用于各種用途的攝像頭，例如：
在這個(gè)硬件的背后，ADAS 依靠一系列圖像處理和機(jī)器學(xué)習(xí)技術(shù)，例如計(jì)算機(jī)視覺(jué)和物體檢測(cè)來(lái)解釋這些圖像中發(fā)生了什么以及如何做出響應(yīng)。
ADAS 概述，通常依賴于視覺(jué)輸入。圖片由Synopsys提供
在硬件中實(shí)現(xiàn)這一點(diǎn)并非易事。ADAS 系統(tǒng)需要極低的延遲計(jì)算，特別是因?yàn)轳{駛需要實(shí)時(shí)決策，而且通常是生死攸關(guān)的場(chǎng)景。
這一要求意味著 ADAS 系統(tǒng)必須在幾毫秒內(nèi)根據(jù)攝像頭輸入進(jìn)行獲取、預(yù)處理、處理并做出決策。實(shí)現(xiàn)這一目標(biāo)是一項(xiàng)具有挑戰(zhàn)性的任務(wù)，因?yàn)橄鄼C(jī)具有非常高的吞吐量，會(huì)產(chǎn)生大量數(shù)據(jù)。
為了解決這個(gè)問(wèn)題，設(shè)計(jì)人員必須使用專(zhuān)門(mén)的計(jì)算硬件，例如 ISP。
一般來(lái)說(shuō)，ISP 旨在加速基于圖像的系統(tǒng)所需的數(shù)據(jù)處理和計(jì)算，從而實(shí)現(xiàn)低功耗和更快的性能處理。
為了應(yīng)對(duì)這些 ADAS 設(shè)計(jì)挑戰(zhàn)，Arm 推出了用于 ADAS 的最新 ISP：Mali-C78AE。
新的 ISP 采用與 Mali-C71AE 相同的技術(shù)，專(zhuān)為數(shù)據(jù)處理而設(shè)計(jì)。
Arm 聲稱它可以同時(shí)接受來(lái)自 16 個(gè)虛擬攝像頭的多達(dá)四個(gè)實(shí)時(shí)攝像頭的輸入，該設(shè)備支持高達(dá) 1.2 千兆像素/秒的吞吐量。它希望這種高吞吐量、多輸入能力將顯著降低系統(tǒng)設(shè)計(jì)的復(fù)雜性，從而使系統(tǒng)整體更高效。
在內(nèi)部，ISP 集成了多個(gè)圖像處理模塊，包括降噪和缺陷像素校正，其中包括：
ISP 還提供動(dòng)態(tài)范圍管理，具有 24 位動(dòng)態(tài)范圍處理單元。
Arm 表示，新的 ISP 總共內(nèi)置了 280 多個(gè)故障檢測(cè)電路。
Mali-C78AE 的功能圖。圖片由 Arm提供
從系統(tǒng)層面來(lái)看，該設(shè)備旨在與其他 Arm 產(chǎn)品相結(jié)合，例如 Cortex-A78AE 和 Mali-G78AE。
據(jù) Arm 稱，這三個(gè)單元的組合可以提供針對(duì)性能和安全性進(jìn)行優(yōu)化的完整 ADAS 視覺(jué)管道。到目前為止，該設(shè)備本身已獲得 ASIL-B 汽車(chē)安全等級(jí)。
總而言之，Arm 希望為其 ADAS 產(chǎn)品創(chuàng)造進(jìn)化的下一步。
ADAS 的下一步
隨著 ADAS 繼續(xù)集成到當(dāng)今幾乎所有的新車(chē)中，ISP 將繼續(xù)成為必需品。
借助 Mali-C78AE，Arm 希望為行業(yè)提供改進(jìn)的解決方案，提高整體系統(tǒng)的安全性和性能。
- 如果本文收錄的圖片文字侵犯了您的權(quán)益，請(qǐng)及時(shí)與我們聯(lián)系，我們將在24內(nèi)核實(shí)刪除，謝謝！
