車載攝像頭的技術趨勢 — 智能攝像頭（十）

一束光線 2021-06-23

展開全文

片上系統(tǒng)（SoC）在單個芯片上集成了計算平臺的大多數(shù)組件。攝像頭SoC或視覺SoC將高分辨率成像、圖像信號處理和神經網(wǎng)絡處理集成到一個低功耗嵌入式平臺中。攝像頭SoC不僅能夠捕獲圖像，而且能夠根據(jù)加載到SoC中的算法進行實時處理。這使得攝像頭模塊具有快速的感知和決策能力。

由于緊湊的集成、更快的處理速度和圖像通信帶寬低，攝像頭SoC越來越多地用于汽車應用中，尤其是在前置立體和單目攝像頭中。這是因為僅需要將處理后的元數(shù)據(jù)傳輸?shù)街醒隕CU。攝像頭SoC提供的并行和多層圖像處理功能可以融合來自多個攝像頭的數(shù)據(jù)流，執(zhí)行復雜的圖像處理任務。由于低延遲、計算性能和低功耗，攝像頭SoC使得汽車攝像頭模塊具有邊緣處理能力。

Mobileye（EyeQ系列）、OV（OX01E10）、賽靈思（Zynq和Zynq UltraScale +）和安霸（CV22AQ，CV2FS和CV22FS）提供車規(guī)級攝像頭SoC。

智能攝像頭

智能化程度更高的攝像頭模塊是車載攝像頭生態(tài)系統(tǒng)的新興趨勢之一。攝像頭供應商正在將更多邊緣計算功能集成到攝像頭模塊中，從而使他們能夠檢測并了解環(huán)境。智能攝像頭是一個獨立的視覺系統(tǒng)，它不僅可以捕獲圖像，還可以從中提取特定應用的信息。

通過融合多個傳感數(shù)據(jù)流（例如RGB攝像頭+NIR），在傳感節(jié)點處添加智能。RGB攝像頭+SWIR，RGB攝像頭+激光雷達，RGB攝像頭+雷達。半導體技術的進步，例如緊湊封裝的多核處理芯片，圖像加速器的開發(fā)以及集成ISP的攝像頭傳感器，都為攝像頭模塊的智能化提供了動力。

由于Euro-NCAP 2020的強制要求，DMS越來越多地部署在車輛中，使其成為5星評級所必需的主要安全功能。提供L2自動駕駛功能的量產車型或在開發(fā)L2.5/3的OEM，也依靠DMS來檢測自動駕駛。智能攝像頭模塊將在此類系統(tǒng)的部署中發(fā)揮關鍵作用。攝像頭模塊中集成的圖像處理和AI功能用于駕駛員注意力分散檢測，車載算法可精確讀取面部表情、頭部運動和眼瞼運動以確定駕駛員的注意力分散程度。

Eyeris、Affectiva、Compound Eye和Nauto等汽車初創(chuàng)公司正在開發(fā)智能攝像頭模塊或在邊緣進行處理的智能攝像頭。

索尼于2020年5月推出了其集成了AI的圖像傳感器（據(jù)稱是全球第一個）。IMX500和IMX501圖像傳感器兼具處理能力和存儲器，使其能夠執(zhí)行基于計算機視覺任務的機器學習算法。索尼提到，這項技術可以用于自動駕駛汽車和自動監(jiān)控系統(tǒng)。