本文選自《Smart Eye座艙監(jiān)測系統(tǒng)白皮書》，文末附下載方下一代前沿技術(shù)

改善道路駕駛安全和提升出行體驗

1.不僅只關(guān)注駕駛員

多年來，汽車廠家采用各種各樣的傳感器來更好地探測道路狀況，早期傳感器可以幫助在碰撞危險發(fā)生時車輛及時響應(yīng)，到如今具備半自動駕駛能力的汽車可以實現(xiàn)自主泊車。但是絕大部分傳感器都是集中在車外世界的探測。

如果僅關(guān)注外部道路的話，這些傳感器就忽略了汽車環(huán)境的另一個重要組成部分：駕駛員、車艙和里面的乘客。只要汽車無法理解車內(nèi)人員的行為，其對駕駛行為的理解都是不完整的。只有借助于艙內(nèi)傳感器，我們才能完整的理解艙內(nèi)場景。

/ DMS駕駛員監(jiān)測系統(tǒng)如何定義了安全新標準

利用傳感器和AI軟件來實現(xiàn)座艙監(jiān)測不是一個新概念，最近幾年，DMS駕駛員監(jiān)控系統(tǒng)逐步變成了汽車行業(yè)的標準配置。受法規(guī)驅(qū)動，偵測駕駛員狀態(tài)和適時干預(yù)的安全系統(tǒng)逐漸被各大汽車廠家所采用。除了法規(guī)之外，Euro NCAP的最新新車評價方案更是加速了DMS系統(tǒng)的普及。

結(jié)合傳感器如車內(nèi)攝像頭，再加上基于計算機視覺和機器學(xué)習(xí)的算法軟件，現(xiàn)今的駕駛員監(jiān)測系統(tǒng)能夠獲取駕駛員的狀態(tài)及行為。由于具備偵測駕駛員分心和疲勞的能力，DMS駕駛員監(jiān)測系統(tǒng)已經(jīng)成為避免事故和改善道路駕駛安全的一項關(guān)鍵技術(shù)。

/ 新一代汽車安全系統(tǒng)

早在上世紀90年代末期，Smart Eye已經(jīng)開始通過視線追蹤來偵測危險駕駛行為的應(yīng)用。由于視線活動是理解駕駛員狀態(tài)的一項關(guān)鍵指標，最近十年該項技術(shù)快速發(fā)展，已經(jīng)不僅僅是對視線的分析，除了視線追蹤以外，新一代DMS駕駛員監(jiān)測系統(tǒng)基于一系列關(guān)鍵技術(shù)、如面部特征分析、頭部姿態(tài)追蹤、面部表情和情緒識別、身體姿勢追蹤和物體偵測等。

這些新技術(shù)能夠分辨各種類型的乘員、他們的行為和他們所使用的的物品。能夠賦能個性化的智能駕艙系統(tǒng)，從注冊用戶的座椅自動調(diào)節(jié)到基于實時駕駛員情緒狀態(tài)的娛樂信息內(nèi)容的定制推薦。

基于這些新技術(shù)和算法的加持，汽車行業(yè)深刻意識到這項技術(shù)能夠延伸到駕駛員之外的群體。如果車內(nèi)傳感器能夠探測到整個座艙，我們可以獲取座艙狀態(tài)和車內(nèi)乘員狀態(tài)等有價值的信息，這也是我們所稱的座艙監(jiān)測，由于DMS系統(tǒng)的自身進化，座艙監(jiān)測系統(tǒng)被認為未來改善駕駛安全和提高出行體驗的一項關(guān)鍵技術(shù)，能夠帶來全新的舒適性和娛樂性體驗。

2.改善道路駕駛安全

為什么汽車需要了解車內(nèi)人員的狀態(tài)呢？

最重要的原因是探知車內(nèi)人員的行為和精神狀態(tài)可以挽救生命。基于駕駛員監(jiān)控功能，座艙監(jiān)測系統(tǒng)可以通過偵測危險駕駛行為來預(yù)防事故，如分心、疲勞駕駛或駕駛員突發(fā)疾病。

通過將駕駛員監(jiān)控和座艙及乘員監(jiān)控結(jié)合起來，系統(tǒng)能夠深度獲取座艙狀態(tài)，如車內(nèi)其它乘員的行為，例如嬰兒哭泣或者后排乘客的爭吵，能夠成為駕駛員分心的重要起因。通過獲取影響駕駛員注意力的根本原因，座艙監(jiān)測系統(tǒng)能夠在第一時間獲取信息并且?guī)椭珊线m的干預(yù)指導(dǎo)，大大提升避免事故發(fā)生的能力。

甚至在事故發(fā)生后，座艙監(jiān)測系統(tǒng)還能夠為車內(nèi)乘員獲救提供幫助。

/ 針對各種場景的安全功能

乘員監(jiān)測功能，可以探測車內(nèi)有幾名乘客以及他們的實時位置，有助于調(diào)整傳統(tǒng)安全設(shè)施，如安全帶使用，防碰撞系統(tǒng)或者安全氣囊激活。如果一個乘客從他們座位上向前探出身體或者將他的腳放在儀表板上的話，對應(yīng)的安全氣囊發(fā)生工作時，造成的實際傷害將超過設(shè)計定義的保護。但是通過探測所有乘員的實時狀態(tài)，駕艙監(jiān)控系統(tǒng)就可以調(diào)節(jié)安全措施，將有價值的座艙數(shù)據(jù)實時傳輸給整車安全控制系統(tǒng)。

避免車內(nèi)乘客中暑

即使車輛處于停車狀態(tài)，座艙監(jiān)測系統(tǒng)同樣能夠挽救生命。在美國每年平均有38名兒童由于被遺留在車內(nèi)而遭受到致命的中暑，每年因為寵物被遺留在車內(nèi)而造成的慘劇預(yù)計也有數(shù)百起。

借助于座艙監(jiān)測系統(tǒng)，兒童或?qū)櫸锉贿z留在車內(nèi)會被第一時間發(fā)現(xiàn)，對應(yīng)的一系列安全措施會及時響應(yīng)。

首先車輛會自動向已離開汽車的駕駛員發(fā)送報警信息，如果該報警沒有及時響應(yīng)，座艙系統(tǒng)會自動啟動車輛通風(fēng)或空調(diào)系統(tǒng)以降低車內(nèi)溫度，同時系統(tǒng)會繼續(xù)發(fā)送報警信息給車主，必要情況下將直接報警。

座艙監(jiān)測系統(tǒng)的最重要的影響就是提升了道路駕駛安全，同時能夠提升未來汽車的IQ和EQ特性，借助于傳感器及機器學(xué)習(xí)算法，一輛具備情感和智能屬性的車輛不僅能夠?qū)⑽覀儼踩厮偷侥康牡?，而且能夠給我們帶來更舒心和愉悅的行程體驗。

3. 提升出行體驗

如果車輛能夠理解駕駛員和乘客的情緒和認知狀態(tài)，整個出行體驗就可以實現(xiàn)定制，隨著對乘客理解的深入，系統(tǒng)能夠更好的根據(jù)乘客實時的需求進行功能設(shè)定。

/ 車內(nèi)環(huán)境的定制

我們可以設(shè)想這樣一個畫面，一位乘客進入車內(nèi)，車輛自動識別乘客信息并將座椅自動調(diào)節(jié)到乘客設(shè)定的最佳位置，車內(nèi)燈光和溫度也按照車外溫度和乘客生理和精神狀態(tài)自動設(shè)定。同時系統(tǒng)能夠基于探測的乘員情緒結(jié)果來推薦不同的播放歌曲。

在旅途中系統(tǒng)還會實時提供優(yōu)化的提醒信息，這些提醒都是基于艙內(nèi)乘員的生理情緒等因素的實時變化而產(chǎn)生的。這樣車輛不僅僅是將乘客送到目的地，它還提供了適應(yīng)乘員狀態(tài)情緒和提升其舒適性的出行環(huán)境。

通過使用面部情緒識別技術(shù)，如Affectiva公司的情緒識別算法，你可以讓系統(tǒng)自動保存旅程中的快樂瞬間，當(dāng)系統(tǒng)檢測到歡笑和愉悅的面部表情時，艙內(nèi)相機可以保存瞬間照片，讓乘客保留一個美好的回憶。

/ 以人為本的出行體驗不僅局限于駕駛員和乘客

對座艙狀態(tài)的監(jiān)測能夠?qū)⒎秶由斓今{乘人員之外，例如座艙監(jiān)測對于運行大型車隊的公司來說也是非常有意義的。

通過自動分析艙內(nèi)狀態(tài)，系統(tǒng)可以判斷改車是否需要清潔或者其它形式的維護。如果你在出租車下車時遺落了手機或鑰匙，座艙監(jiān)測系統(tǒng)的物體檢測功能可以在瞬間發(fā)出提示，這些功能在未來的無人駕駛出租車或巴士上會變得非常實用，因為未來的這些車輛都不會配置專門的駕駛員。

長期以來，駕駛的主要目的就是將人們安全的送到目的地。不過隨著技術(shù)的發(fā)展，智能出行的內(nèi)涵也在擴展，隨著車輛具備更多以人為本的功能，在安全抵達目的的前提下出行體驗也越來越受到關(guān)注。

4.座艙監(jiān)測系統(tǒng)軟件背后的技術(shù)

和DMS駕駛員監(jiān)控系統(tǒng)一樣，座艙監(jiān)測系統(tǒng)同樣主要由傳感器和算法構(gòu)成。DMS駕駛員監(jiān)控系統(tǒng)重點關(guān)注于駕駛員，座艙監(jiān)測系統(tǒng)則獲取整個座艙的信息，通過采用不同的算法，系統(tǒng)分析場景下的不同對象以獲取整個艙內(nèi)環(huán)境及乘員的狀態(tài)信息。

視線和頭部追蹤算法
分析駕駛員和乘客的視線和頭部動作姿態(tài)來判斷他們的精神狀態(tài)，以及他們和座艙的交互行為。來偵測潛在的疲勞、分心或醉駕跡象。

動作識別算法
識別車內(nèi)乘員的行為，如飲食、吸煙、化妝或睡覺。

面部識別算法
識別車內(nèi)乘客，創(chuàng)建乘客輪廓信息，幫助系統(tǒng)理解乘員喜好。

手勢識別算法
識別分析有意識的手勢動作（HMI交互手勢）和駕駛員及乘客的無意識的身體語言。

物體偵測算法
分辨識別不同類型的物體并且標注其在車內(nèi)的具體位置。

情緒識別算法
通過分析面部情緒來偵測車內(nèi)乘員的細微情緒狀態(tài)。

人員姿態(tài)評估算法
實時分辨車內(nèi)乘員的姿態(tài)和位置。

座艙監(jiān)測系統(tǒng)相比較常規(guī)的DMS駕駛員監(jiān)控系統(tǒng)而言，集成了更多類型的算法，提供更廣的監(jiān)測范圍及功能。

乘員
車內(nèi)有多少位乘員？他們的位置在哪兒？他們都系好安全帶了嗎？安全氣囊是否處于合適的工況下？

面部識別
車內(nèi)的乘客是誰？他們有駕照嗎？

駕駛員狀態(tài)
駕駛員是否處于疲勞駕駛、分心或者表現(xiàn)出其它類型的危險駕駛行為？他們是否處于可能影響安全駕駛的生病狀態(tài)？

行為偵測
車內(nèi)的乘員在做什么？他們在使用手機嗎？飲食？喝水或抽煙？乘員之間是否有交流？

兒童安全座椅和兒童遺留偵測
車內(nèi)是否有兒童？泊車以后是否有兒童被遺留在車內(nèi)？

寵物偵測
車內(nèi)是否有寵物？泊車以后是否有寵物被遺留在車內(nèi)？

面部情緒識別分析
車內(nèi)人員情緒如何？他們對車內(nèi)環(huán)境的反應(yīng)如何？對外界內(nèi)容的反應(yīng)如何？如音樂或視頻內(nèi)容。

物品分類和遺留物品偵測
車內(nèi)有哪些物品？是否有物品遺留在車內(nèi)（如手機、錢包）？是否有一些大件物品誤觸了安全帶報警。

/ 嚴肅對待開發(fā)和部署中的倫理隱私問題

當(dāng)我們展望未來的汽車，我們希望這些高度智能駕駛的車輛可以理解和預(yù)測車內(nèi)所有乘員的行為和需求，但是在將這遠景變成現(xiàn)實的過程中，我們需要實現(xiàn)技術(shù)的開發(fā)和落地。

座艙監(jiān)測系統(tǒng)的核心是AI算法，機器學(xué)習(xí)為基礎(chǔ)的算法需要海量數(shù)據(jù)來訓(xùn)練和驗證。座艙監(jiān)測系統(tǒng)需要偵測復(fù)雜的人員行為、動作、情緒和狀態(tài)。需要不同人種在不同場景下的海量數(shù)據(jù)進行訓(xùn)練。

一個重要的因素是保證不同人群數(shù)據(jù)的收集，不僅僅包括年齡、性別和膚色的差異，同時還要包括外觀特征的差異，如身材尺寸、發(fā)型、眼鏡和面罩等。座艙監(jiān)測系統(tǒng)需要對眾多變量因子識別并確保高度準確性，盡量避免數(shù)據(jù)和算法之間的偏差。

數(shù)據(jù)收集費時而且成本高昂。最近幾年虛擬數(shù)據(jù)成了一個游戲規(guī)則改變者。使用一張單一的資源圖像，虛擬合成工具可以快速和低成本的生成不同類型的海量圖像，如改變頭部姿態(tài)方向或光照。數(shù)據(jù)虛擬生成工具可以讓開發(fā)者快速生成訓(xùn)練用數(shù)據(jù)，加速算法開發(fā)進程。

汽車業(yè)界需要嚴肅地對待技術(shù)的落地部署，特別系統(tǒng)中的攝像頭傳感器會采集人員數(shù)據(jù)。所有涉及到道德和隱私的問題必須認真對待：哪些數(shù)據(jù)會被采集？是否保存？這些數(shù)據(jù)的用途是什么？誰能看到這些數(shù)據(jù)？這些數(shù)據(jù)怎么使用？現(xiàn)如今許多基于攝像頭傳感器的座艙監(jiān)測算法可以通過邊緣計算或者嵌入式系統(tǒng)實時運行，采集的只是測量數(shù)值數(shù)據(jù)而不是個人識別信息，不需要將影像資料上傳到云端服務(wù)器。

未來的應(yīng)用場景不可避免的會持續(xù)增加，讀取乘員的個人信息能夠提供更好的出行體驗。汽車廠家需要全面的評估用戶個人隱私保護以及贏得用戶的信任，需要對外界公開透明的說明系統(tǒng)是如何工作，以及系統(tǒng)對用戶會帶來哪些益處。

5.未來的座艙監(jiān)測系統(tǒng)

10年前DMS駕駛員監(jiān)控系統(tǒng)僅僅出現(xiàn)在少數(shù)汽車上，今天法規(guī)已經(jīng)要求即將上市的新車都要配置具備監(jiān)測駕駛員分心和疲勞駕駛的DMS系統(tǒng)。我們也可以想象未來座艙監(jiān)測系統(tǒng)的普及也是可以預(yù)計的。

/ 基于現(xiàn)有技術(shù)以及低成本部署

對于汽車廠家而言，部署座艙監(jiān)測系統(tǒng)的門檻比部署DMS駕駛員監(jiān)控系統(tǒng)要低很多。可以在現(xiàn)有DMS系統(tǒng)基礎(chǔ)上擴展傳感器硬件和算法，周期和成本能夠得到有效的控制。

同時座艙監(jiān)測系統(tǒng)還允許汽車廠家進行差異化定制功能的開發(fā)，當(dāng)今汽車行業(yè)競爭激烈，功能的差異化也是汽車廠家關(guān)注的重點之一。在滿足法規(guī)評價要求的基礎(chǔ)上額外的特色功能有助于幫助企業(yè)在市場上贏得更多的用戶關(guān)注。

/ 未來的數(shù)據(jù)是多模態(tài)

人類行為是復(fù)雜具備多面屬性的，我們一般只能通過對象行為和生理狀態(tài)中的獨立參數(shù)去洞悉用戶狀態(tài)。座艙監(jiān)測系統(tǒng)需要基于多模態(tài)的方式進行開發(fā)。

當(dāng)乘員之間互相交流時，我們在不同類型的多模態(tài)數(shù)據(jù)之間建立聯(lián)系，如面部情緒、語調(diào)或身體姿勢，以判斷用戶的情緒和行為。同時未來基于多模態(tài)數(shù)據(jù)的座艙監(jiān)測系統(tǒng)還可以和車內(nèi)其它傳感器進行交互，更好的理解車內(nèi)乘員的行為和需求。

/ 通過座艙監(jiān)測系統(tǒng)監(jiān)測酒駕

每年全球約130萬人死于交通事故

超過20%的悲劇都是和酒駕相關(guān)，自從汽車出現(xiàn)之日起，酒后駕駛就是嚴重的事故安全隱患。100多年來人們采用了多種手段來避免酒后駕駛的發(fā)生，但是每年還是有很多人由于酒后駕駛而失去生命。

酒駕檢測是汽車安全系統(tǒng)的一項重要而且緊迫的功能。當(dāng)下各國政府、汽車行業(yè)、科研院校和技術(shù)公司如Smart Eye都在尋找車內(nèi)偵測酒后駕駛的有效手段。

通過整合多傳感器采集的數(shù)據(jù)進行數(shù)據(jù)融合，座艙監(jiān)測系統(tǒng)可以提供駕駛員是否適合駕駛的綜合評價。雖然酒駕檢測的技術(shù)還在開發(fā)中，但是基于車內(nèi)多傳感器數(shù)據(jù)及機器學(xué)習(xí)算法，座艙監(jiān)測系統(tǒng)的酒駕檢測功能終究會實現(xiàn)。

/ 突發(fā)疾病

未來基于多模態(tài)數(shù)據(jù)的座艙監(jiān)測系統(tǒng)不僅可以檢測酒后駕駛，還可以用于駕駛員突發(fā)疾病的檢測，雖然發(fā)生概率不如酒后駕駛，但是確實會出現(xiàn)在現(xiàn)實世界中。

實際上根據(jù)權(quán)威部門統(tǒng)計，在瑞典約10%的致命交通事故都和駕駛過程中駕駛員突發(fā)疾病相關(guān)。

通過技術(shù)手段在第一時間有效偵測駕駛員身體不適的跡象，車輛可以在事故發(fā)生之前及時進行干預(yù)。例如今天的座艙監(jiān)測系統(tǒng)已經(jīng)可以監(jiān)測心率異常，車輛可以在其可能影響安全駕駛之前提前進行有效干預(yù)。

隨著技術(shù)的發(fā)展和改進，未來的座艙監(jiān)測系統(tǒng)可以有效預(yù)防突發(fā)疾病對安全駕駛潛在的風(fēng)險。

/ 座艙監(jiān)控系統(tǒng)如何促進自動駕駛技術(shù)更安全

隨著自動駕駛技術(shù)的發(fā)展，座艙監(jiān)控系統(tǒng)的重要性也愈發(fā)凸顯。當(dāng)自動駕駛技術(shù)允許駕駛員雙手可以離開方向盤時，座艙監(jiān)控系統(tǒng)對于車輛來說就從一項重要配置變成必需配置了。

目前看來還需要很長一段時間才能讓駕駛員的視線和注意力從前方道路中解放出來，只要汽車還歸于自動駕駛輔助車輛，人類駕駛員仍然是駕駛安全的主要責(zé)任人。

對于自動駕駛輔助車輛來說，存在人機共駕的場景，在某些場景下系統(tǒng)需要人類駕駛員接管車輛，這往往被稱為“Hand-off”挑戰(zhàn)，為了確保車輛控制權(quán)的順利轉(zhuǎn)換，車輛需要能夠有效的識別駕駛員狀態(tài)。

如果車輛偵測到駕駛員處于分心或者不適合駕駛，系統(tǒng)會判斷繼續(xù)由系統(tǒng)來控制車輛行駛。反之如果車輛偵測到駕駛員處于適合駕駛的狀態(tài)，系統(tǒng)則可以將控制權(quán)安全的轉(zhuǎn)移給人類駕駛員。即使在未來的汽車中，準確識別駕駛員的行為和精神狀態(tài)對于行車安全來說也是非常重要的。

自動駕駛能力的提高也為駕駛員提供了更多的自由度來參與到智能座艙娛樂活動中。

隨著自動駕駛技術(shù)的發(fā)展，座艙監(jiān)控系統(tǒng)的重要性也愈發(fā)凸顯。當(dāng)自動駕駛技術(shù)允許駕駛員雙手可以離開方向盤時，座艙監(jiān)控系統(tǒng)對于車輛來說就從一項重要配置變成必需配置。

6.座艙監(jiān)測系統(tǒng)應(yīng)用場景

當(dāng)下已經(jīng)有一些汽車廠家在要求為他們的新車配置座艙監(jiān)測系統(tǒng)了，在今后幾年內(nèi)我們預(yù)計配置座艙監(jiān)測系統(tǒng)的新車將上市銷售。在提升駕駛安全性的同時還提供更舒適的出行體驗，未來座艙監(jiān)測系統(tǒng)將成為我們汽車生活的一部分。

下面是幾個典型的應(yīng)用場景將受益于座艙監(jiān)測技術(shù)。

道路安全

駕駛疲勞

用戶結(jié)束了一天緊張的工作開車回家，在路途中他越來越疲勞，座艙監(jiān)測系統(tǒng)偵測到了他的疲勞狀態(tài)，立即根據(jù)疲勞指數(shù)采取了相應(yīng)的應(yīng)對策略。

• 語音溫馨提示駕駛員下一個出口/服務(wù)區(qū)休息一會。

• 觸發(fā)觸覺、聽覺和視覺警報

• 娛樂系統(tǒng)播放活潑歡快的音樂

• 調(diào)低艙內(nèi)溫度和氛圍燈調(diào)節(jié)

• 車輛自動靠邊停車休息

駕駛分心

座艙監(jiān)測系統(tǒng)偵測到駕駛員手里拿著手機，同時通過計算其視線偏離前方道路的頻率和時長來判斷分心指數(shù)。同時基于其面部表情和語音識別其精神狀態(tài)，系統(tǒng)經(jīng)過綜合判斷認定駕駛員沒有對駕駛行為保持足夠的注意力，自動觸發(fā)下述一項或多項安全措施：

• 語音提示駕駛員關(guān)注前方道路，不要繼續(xù)操作手機

• 觸發(fā)觸覺、聽覺和視覺警報

• 降低音樂音量

• 增加自適應(yīng)續(xù)航功能的警覺程度

• 切換到自動駕駛模式

駕駛分心 – 乘客

父親正載著女兒去托兒所，交通很擁堵他上班預(yù)計將遲到，女兒也開始哭鬧，父親想辦法讓她平靜下來，他沒有完全集中注意力在前方道路上。座艙監(jiān)測系統(tǒng)首先識別到車內(nèi)有多名乘員，而且其中一位是兒童。根據(jù)兒童面部表情和語音可以判斷其在哭泣，同時識別到另一位成年人情緒比較焦慮，而且未集中注意力在前方道路上，系統(tǒng)立即采取以下措施：

• 娛樂信息同播放其喜歡的兒歌或者電視節(jié)目以舒緩兒童的情緒。

• 語音提示駕駛員靠邊停車或者建議變更行駛路線。

L3 Hand-off挑戰(zhàn)

駕駛員為了接一個工作電話，在行駛過程中激活了自動駕駛功能，電話中駕駛員與對方發(fā)生了激烈的爭吵，情緒激動。自動駕駛邏輯根據(jù)前方路況判斷需要將車輛控制權(quán)轉(zhuǎn)移給駕駛員，但是座艙監(jiān)測系統(tǒng)通過面部情緒識別和語音分析出駕駛員的當(dāng)前狀態(tài)不適合駕駛，座艙監(jiān)測系統(tǒng)立即采取以下措施：

基于駕駛員的狀態(tài)級別，系統(tǒng)未將操縱權(quán)轉(zhuǎn)移給駕駛員，而是直接控制車輛靠邊停車。

路怒癥

擁堵的交通令駕駛員心煩氣躁，他不能準時參加一個重要的會議，而且他不停的在看手機，側(cè)方一輛車還強行插隊，差點發(fā)生碰撞，這令駕駛員更加生氣。座艙監(jiān)測系統(tǒng)及時識別到駕駛員的情緒變化以及通過分析其視線在前方路面的時長和頻率來判定其屬于分心狀態(tài)，系統(tǒng)判斷當(dāng)下為非安全駕駛條件，為了行車安全，系統(tǒng)及時采取措施進行干預(yù)：

• ADAS自動駕駛輔助系統(tǒng)降低車速，提高制動敏感度。

• 系統(tǒng)提醒駕駛員在下一個服務(wù)器休息一下。

• 語音提示駕駛員嘗試深呼吸平復(fù)情緒。

• 播放用戶喜歡的舒緩音樂。

用戶出行體驗

智能語音助手

駕駛員想通過語音助手設(shè)定一個導(dǎo)航目的地，嘗試多次語音助手仍不能準確識別地址，駕駛員感到非常沮喪。通過面部情緒和語音識別，座艙檢測系統(tǒng)識別到了憤怒和激動的情緒。為了緩解智能語音助手的錯誤，系統(tǒng)進行如下的操作：

• 嘗試調(diào)整智能語音助手的語調(diào)。

• 嘗試重啟智能語音助手以解決識別錯誤。

內(nèi)容推薦

朋友一起駕車出行，娛樂系統(tǒng)成功識別了車內(nèi)乘員，包括他們的年齡區(qū)間、性別和情緒?；谏鲜鲂畔?，系統(tǒng)做出如下決策：

• 推薦適合個人畫像、喜好和情緒狀態(tài)的娛樂內(nèi)容。

• 創(chuàng)建推薦音樂播放列表。

• 行程中基于乘員面部情緒反饋持續(xù)改善優(yōu)化內(nèi)容推薦。

網(wǎng)約車用戶體驗

網(wǎng)約車司機在整個行程中與乘客互動良好，乘客對司機也非常滿意，全程遵守交通規(guī)則且駕駛平順。座艙監(jiān)測系統(tǒng)識別到了乘客和駕駛員的愉悅情緒和笑容。

• 數(shù)據(jù)被上傳到云端平臺，管理平臺分析司機行為和用戶體驗。

• 每個季度管理平臺對司機進行打分評比，獲得最高評分的司機將獲得獎勵。

• 用戶的評價顯示在網(wǎng)約車出行APP用戶評價中。

緊張情緒識別

司機正駕駛一輛半自動駕駛車輛，他看到前方信號燈即將變紅，他不相信自動駕駛系統(tǒng)，正在焦慮要不要人工踩下剎車踏板。座艙監(jiān)測系統(tǒng)第一時間識別到司機的情緒變化，系統(tǒng)立即采取措施建立司機和車輛之間的信任。

• 車輛發(fā)出預(yù)警，前方信號燈即將變成紅色。

• 及時采取平穩(wěn)制動措施。

暈車癥

乘客在自動駕駛車輛上由于暈車逐漸感到不適和惡心，座艙監(jiān)測系統(tǒng)識別到了乘客的面部情緒、語音、眼瞼開合度和視線方判定乘客處于不適狀態(tài)，系統(tǒng)立刻采取如下措施：

• 駕駛風(fēng)格調(diào)整為平順

• 調(diào)節(jié)車內(nèi)空氣流通速度

• 系統(tǒng)選擇切換另一條更適合的路線

Smart Eye為用戶提供業(yè)界性能領(lǐng)先的視線追蹤系統(tǒng)，在復(fù)雜應(yīng)用場景下提供一流的性能表現(xiàn)。我們的方案在汽車、航天航空、殘疾人設(shè)施、廣告媒體、行為科學(xué)等眾多領(lǐng)域的人類行為和人機交互研究領(lǐng)域得到了廣泛的應(yīng)用。今天我們的客戶包括NASA、空客、波音、豐田汽車、戴姆勒、奧迪、通用汽車、哈佛大學(xué)等數(shù)百個研究機構(gòu)和高校。

我們的子公司Affectiva是業(yè)界領(lǐng)先的情緒識別AI算法供應(yīng)商，幫助企業(yè)更好的理解他們的用戶對其產(chǎn)品（內(nèi)容、產(chǎn)品和服務(wù)）的感受，客戶涵蓋汽車、媒體娛樂、市場研究等行業(yè)。28%的世界500強企業(yè)和70%的世界大型廣告公司都在使用Affectiva的解決方案。

我們的子公司iMotions提供業(yè)界領(lǐng)先的人因多模態(tài)分析軟件平臺，能夠?qū)崿F(xiàn)跨傳感器平臺的實時數(shù)據(jù)同步。

SmartEye的汽車行業(yè)量產(chǎn)解決方案目標是賦能主流汽車OEM的下一代車型，提供更安全、更人性化的出行體驗。

Smart Eye作為專業(yè)的人因分析AI技術(shù)供應(yīng)商，在復(fù)雜應(yīng)用場景下解析和預(yù)判對象行為，在人類和機器之間架設(shè)一個溝通的橋梁，努力創(chuàng)造更加安全和可持續(xù)的未來。Smart Eye成立于1999年，總部位于瑞典，在美國、英國、德國、丹麥、埃及、日本、新加坡和中國擁有分支機構(gòu)。

如果你希望了解更多或申請Smart Eye眼動儀現(xiàn)場Demo演示，歡迎聯(lián)系我們。

東揚精測系統(tǒng)（上海）有限公司（Smart Eye授權(quán)代理商）

汽車電子測量部

上海市靜安區(qū)梅園路228號企業(yè)廣場901室

021-6380 9633

car@toyochina.com.cn

smarteye.ai

識別二維碼或點擊閱讀原文下載：

《Smart Eye座艙監(jiān)測系統(tǒng)白皮書》