據(jù)麥姆斯咨詢(xún)報(bào)道，2020年11月，豪威科技——全球排名前列的數(shù)字圖像解決方案開(kāi)發(fā)商， 安霸（納斯達(dá)克股票代碼：AMBA）——人工智能視覺(jué)芯片公司，以及Smart Eye——人工智能驅(qū)動(dòng)的眼部、口和頭部跟蹤技術(shù)開(kāi)發(fā)領(lǐng)域的全球領(lǐng)軍者，今天在底特律AutoSens大會(huì)舉行之前宣布推出汽車(chē)行業(yè)首個(gè)針對(duì)雙模攝像頭應(yīng)用的完整解決方案。



這一聯(lián)合解決方案能夠在監(jiān)控駕駛員的同時(shí)捕捉乘員圖像，以進(jìn)行單向視頻會(huì)議。它采用了豪威科技為汽車(chē)行業(yè)研發(fā)的首款OV2312圖像傳感器，其雙模全局快門(mén)可在弱光條件下同時(shí)捕捉RGB彩色圖像和紅外（IR）圖像。安霸的CV22AQ CVflow®計(jì)算機(jī)視覺(jué)處理器能同時(shí)處理雙路捕捉，然后運(yùn)行Smart Eye的算法來(lái)分析駕駛員的狀態(tài)并提醒車(chē)輛注意任何不安全的指示，例如駕駛員困倦。三家公司共同對(duì)解決方案進(jìn)行了整合和微調(diào)，使其可以作為完整的參考設(shè)計(jì)使用，這有助于汽車(chē)設(shè)計(jì)人員專(zhuān)注于最終應(yīng)用的差異化，同時(shí)簡(jiǎn)化總體設(shè)計(jì)工作。



這三家公司目前正在與汽車(chē)OEM廠商討論在即將推出的車(chē)型中實(shí)施這一參考設(shè)計(jì)。這一聯(lián)合解決方案支持駕駛員和駕駛室監(jiān)控的全方位實(shí)施，包括安全應(yīng)用、增強(qiáng)現(xiàn)實(shí)顯示以及具有深度神經(jīng)網(wǎng)絡(luò)和人工智能的內(nèi)部傳感。這一解決方案的單向視頻會(huì)議功能使遠(yuǎn)程會(huì)議人員可以看到車(chē)內(nèi)人員，而汽車(chē)僅接收會(huì)議音頻，以免分散駕駛員的注意力。

“我們的CV22AQ能夠以低功耗（通常低于2.5瓦）提供優(yōu)異的圖像處理和高性能人工智能計(jì)算，”安霸總裁兼首席執(zhí)行官Fermi Wang說(shuō)道。“雖然我們已經(jīng)共同對(duì)這一聯(lián)合解決方案進(jìn)行了預(yù)調(diào)，但是設(shè)計(jì)人員仍然可以進(jìn)一步根據(jù)其特定的實(shí)施需求進(jìn)行靈活定制。”

“我們的人工智能軟件使汽車(chē)OEM廠商和一級(jí)供應(yīng)商能夠部署具有高級(jí)人工智能功能的新一代駕駛員和駕駛室內(nèi)監(jiān)控系統(tǒng)，從而提高駕乘人員的安全性和便利性，” Smart Eye首席執(zhí)行官M(fèi)artin Krantz說(shuō)道。“這一雙模聯(lián)合解決方案具有獨(dú)特的能力，在任何照明條件下都能監(jiān)控駕駛員，同時(shí)捕捉圖像以進(jìn)行視頻會(huì)議。”

“我們的OV2312是唯一將雙模RGB-IR捕捉和全局快門(mén)結(jié)合在一起的汽車(chē)圖像傳感器，”豪威科技?xì)W洲副總裁Mario Heid說(shuō)道。“若沒(méi)有這種組合功能，攝像頭系統(tǒng)設(shè)計(jì)人員就必須使用兩個(gè)單獨(dú)的圖像傳感器，這對(duì)于大多數(shù)汽車(chē)來(lái)說(shuō)價(jià)格過(guò)于昂貴。同時(shí)，歐盟（通過(guò)Euro NCAP）要求到2022年，在歐洲銷(xiāo)售的所有新車(chē)都必須安裝駕駛員監(jiān)控系統(tǒng)（DMS）攝像頭，我們的聯(lián)合解決方案使OEM廠商可以在滿(mǎn)足此要求的同時(shí)讓自己的汽車(chē)具有差異化的功能。”

豪威科技的OV2312是一款雙模汽車(chē)圖像傳感器，只需單攝像頭就能實(shí)現(xiàn)駕駛員狀態(tài)監(jiān)控和查看應(yīng)用，例如參考設(shè)計(jì)中的視頻會(huì)議功能。OV2312目前仍是汽車(chē)行業(yè)唯一一款RGB-IR全局快門(mén)圖像傳感器，在所有200萬(wàn)像素傳感器中尺寸最小。OV2312提供先進(jìn)的ASIL功能安全性，在940納米波長(zhǎng)下和具有業(yè)界領(lǐng)先的近紅外（NIR）光性能，量子效率達(dá)14％，此外還具有優(yōu)異的調(diào)制傳遞功能（MTF）。其功耗也處于行業(yè)領(lǐng)先地位，典型情況下僅為190毫瓦。最終結(jié)果是，OV2312減少了系統(tǒng)所需圖像傳感器的數(shù)量，無(wú)需安裝多個(gè)滾動(dòng)快門(mén)傳感器，從而減小了功耗和占用空間。

OV2312是豪威科技汽車(chē)全局快門(mén)圖像傳感器系列中的最新產(chǎn)品。它與OV2310和OV2311的引腳兼容，有助于設(shè)計(jì)人員靈活選擇合適的功能組合，滿(mǎn)足設(shè)計(jì)需求。

安霸的可擴(kuò)展CVflow處理器系列提供了性能和價(jià)格各異的全系列片上系統(tǒng)（SoC）。公司強(qiáng)大的圖像信號(hào)管道（ISP）支持豪威科技的雙模RGB-IR彩色濾光片陣列，即使在光線較暗的車(chē)內(nèi)也能實(shí)現(xiàn)高精度的檢測(cè)和監(jiān)控。其高動(dòng)態(tài)范圍（HDR）處理可在高對(duì)比度場(chǎng)景中提取大量圖像細(xì)節(jié)，從而進(jìn)一步增強(qiáng)芯片的計(jì)算機(jī)視覺(jué)能力和Smart Eye算法的潛在性能。

Smart Eye的DMS解決方案提供了眼動(dòng)追蹤軟件，可集成到乘用車(chē)和其他車(chē)輛中，以提高安全性和其他功能，改善用戶(hù)體驗(yàn)。通過(guò)仔細(xì)研究眼部、面部和頭部動(dòng)作，Smart Eye的車(chē)內(nèi)算法可以得出有關(guān)駕乘人員警覺(jué)性、注意力和專(zhuān)注度的結(jié)論。