sponsored links

汽車多模態互動:互動方式日漸多元化,多模態融合有待進一步加強

佐思汽研發布《2021年中國汽車多模態交互發展研究報告》,對主流汽車品牌互動方式進行了梳理總結。

目前在汽車人機互動方面,呈現兩大特點:

1、在互動方式上,除了觸控、按鍵、旋鈕等傳統互動外,語音、手機已成為汽車人機互動的必選項。除此之外,人臉、手勢、車燈也成為互動方式擴充套件的熱門選項,更有部分品牌開始嘗試眼部追蹤、聲紋、指紋等新型互動方式。

2、在品牌佈局上,合資品牌在互動方式上相對保守,除語音、手機互動外,新型互動方式搭載較少,但豪華品牌成為多模態互動先鋒。例如賓士在其最新一代MBUX系統上,配備了人臉、手勢、眼部、指紋多種新型互動。相比之下,自主頭部品牌在新型互動方式的應用上更為積極,如長安汽車的視線喚醒、長城汽車的聲紋識別等。

國內外主流汽車品牌部分人機互動方式如下:

汽車多模態互動:互動方式日漸多元化,多模態融合有待進一步加強

來源:佐思汽研《2021年中國汽車多模態交互發展研究報告》

語音作為常規互動方式之一,功能正在不斷完善

語音互動在原有效能之外,連續對話、音區鎖定、音色切換、語音自定義等特性已成為主流品牌的下一發展方向。

1、連續對話、音區鎖定已有多個品牌搭載。

具備連續對話的語音互動系統能夠在一次喚醒後,一定時間內無需再進行喚醒,提高指令響應的連貫性;音區鎖定則可以定位語音指令的發出者,在執行“開窗”、“調節空調溫度”等指令時更加精準。搭載這兩項功能的品牌主要有吉利、長安、長城、奇瑞、上汽榮威、廣汽傳祺、小鵬、蔚來、理想等。

吉利星越L--銀河OS的“主駕極客模式”支援主駕24小時免喚醒,具備四音區鎖定

小鵬汽車--語音助手小P,具備全場景語音功能,支援30秒連續對話、雙音區鎖定

汽車多模態互動:互動方式日漸多元化,多模態融合有待進一步加強

2、音色切換指語音系統除了預設語音聲音外,可提供其他聲音供使用者選擇,如明星、遊戲人物的聲音等。搭載品牌有吉利、長安、長城、比亞迪、榮威以及新勢力品牌蔚來、小鵬、理想等。如,上汽榮威RX5搭載的斑馬智行維納斯系統可提供親和女聲、知性女聲、磁性男聲、稚嫩童聲、熱情女聲五種音色供選擇。

吉利星越L--銀河OS支援至多10種音色切換

汽車多模態互動:互動方式日漸多元化,多模態融合有待進一步加強

3、語音自定義包括語音音色自定義和語音功能自定義。

“語音音色自定義”指使用者上傳自己或家人的聲音後,系統將該聲音應用於語音響應、導航播報等場景。搭載品牌有吉利、長城、上汽榮威、廣汽傳祺以及R汽車等。

“語音功能自定義”指使用者可自定義語音指令及該指令對應的操作,可極大地提高語音系統的可玩性,滿足使用者的個性化需求。搭載的品牌有小鵬汽車。

吉利星越L--銀河OS 支援使用者定製個性語音,自定義的真人聲音可以全場景應用,包括導航、應答等。

汽車多模態互動:互動方式日漸多元化,多模態融合有待進一步加強

小鵬汽車--小P私人定製,小鵬汽車的車主可透過手機APP自定義語音指令及對應的操作

汽車多模態互動:互動方式日漸多元化,多模態融合有待進一步加強

手勢繼語音、人臉之後,成為第三種新型互動方式

手勢互動主要透過車內攝像頭來判斷手勢動作,並將資料傳遞給車載系統控制單元,由控制單元調出與識別出的手勢相對應的功能。相較於語音控制,手勢控制操作更加精準、快速,且更容易學習掌握。

搭載手勢互動的品牌有寶馬、賓士、長安、長城、上汽榮威、廣汽傳祺、嵐圖、R汽車、北汽極狐、小鵬。其中長城、小鵬支援車外手勢識別。

WEY摩卡--支援在車外透過手勢控制車輛點火、前進、後退、暫停、熄火。

長安福特EVOS--全新一代SYNC+2.0支援手勢控制靜音、音樂播放、介面分屏以及返回主介面等操作。

汽車多模態互動:互動方式日漸多元化,多模態融合有待進一步加強

車燈互動上車賓士、高合、智己等品牌

車燈互動透過車燈閃爍動作、車燈投影、燈組顯示屏等方式向外界傳達資訊,車燈互動為駕駛員與車外交通參與者的互動提供了渠道,在自動駕駛落地之際,車燈互動使自動駕駛汽車能夠與周圍環境進行通訊。目前賓士、奧迪、大眾、長城、比亞迪、高合、智己、小鵬等品牌搭載了該互動方式。

賓士--投影大燈將警告標識、標記輔助等與駕駛輔助系統相關的資訊投射在前方道路上。

智己L7--投影大燈可投射車語、導航、警示等互動資訊,並且可結合高精地圖提供車道級的導航引導;燈組顯示屏可提供多種圖案樣式,展示座艙內使用者的狀態;互動尾燈支援顯示文字、表情,如感謝、行人提醒、充電狀態等資訊。

汽車多模態互動:互動方式日漸多元化,多模態融合有待進一步加強

除了車燈燈組外,部分品牌嘗試在車身前後增加顯示屏來向行人傳遞資訊,如北汽、三星等。

北汽Lite 300--在車輛前後配有LED顯示屏,可顯示文字、表情、動畫以及充電資訊等內容

汽車多模態互動:互動方式日漸多元化,多模態融合有待進一步加強

多模態融合是下一發展方向

單一模態下的互動,對互動體驗的提升有上限。未來在提高互動體驗上,多模態融合是明顯可行且高效的選擇。目前在研的品牌有賓士、寶馬、華為、長安等。

1、語音+視線

語音互動對包含“這個、那個”等模糊指代詞的識別能力幾乎為零,這種情況下若加入視線追蹤,由視線鎖定的方向,再透過語音發出指令,可極大提高指令的響應率。

賓士“MBUX Travel Knowledge”--駕駛員可透過視線鎖定一棟建築物,並說:“我想知道這棟樓的用途”,即可獲取相關資訊。該功能由Cerence Look提供技術支撐。

汽車多模態互動:互動方式日漸多元化,多模態融合有待進一步加強

2、語音+唇動識別

在語音互動的過程中,對指令的準確獲取是最關鍵的一步,而座艙複雜的環境、噪音和密集的人員增加了語音識別難度,近年新增的音區鎖定在一定程度上緩解了該難題。但受限於語音單模技術瓶頸,採用單一語音技術的互動對體驗的提升有限。

與唇動識別融合下的語音互動將極大提高語音識別效能,不同語言下的唇部動作不同,在嘈雜的座艙環境下,即使系統接收到聲音很小,結合唇部動作也可以保障較高的語音識別率。

北汽極狐搭載的華為鴻蒙OS唇動識別(在研階段)

汽車多模態互動:互動方式日漸多元化,多模態融合有待進一步加強

《2021年中國汽車多模態交互發展研究報告》目錄

本報告共110頁

01

多模態互動概述

1.1 多模態互動定義

1.2 車載場景下的多模態交互發展歷程

1.3 主流品牌互動方式應用現狀

1.4 觸控互動

1.5 語音互動

1.6 語音交互發展趨勢

1.7 人臉互動

1.8 手勢互動

1.9 車燈互動

1.10 生物體徵檢測

1.11 其他互動

1.12 發展趨勢

02

合資品牌多模態互動

2.1 寶馬

2.1.1 寶馬交互發展歷程

2.1.2 寶馬-iDrive7.0系統車型舉例

2.1.3 寶馬-iDrive8.0系統車型舉例

2.1.4 寶馬數字鑰匙

2.2 賓士

2.2.1 賓士交互發展歷程

2.2.2 賓士MY MBUX系統車型舉例

2.2.3 賓士EQS

2.2.4 MBUX Hyperscreen亮點

2.2.5 賓士Vision AVTR概念車互動亮點

2.3 奧迪

2.3.1 奧迪交互發展歷程

2.3.2 MMI系統車型舉例

2.4 大眾

2.4.1 大眾交互發展歷程

2.4.2 智慧車聯 4.0車型舉例

2.5 福特

2.5.1 福特交互發展歷程

2.5.2 SYNC +車型舉例

2.6 別克

2.6.1 別克交互發展歷程

2.6.2 eConnect 3.0車型舉例

2.7 豐田

2.7.1 豐田交互發展歷程

2.7.2 智行互聯絡統車型舉例

2.8 日產

2.8.1 日產交互發展歷程

2.8.2 Nissan Connect超智聯絡統車型舉例

2.9 本田

2.9.1 本田交互發展歷程

2.9.2 Honda CONNECT車型舉例

2.10 沃爾沃

2.10.1 沃爾沃交互發展歷程

2.10.2 新一代智慧車載互動系統車型舉例

03

自主品牌多模態互動

3.1 吉利

3.1.1 吉利交互發展歷程

3.1.2 銀河OS代表車型-星越L

3.1.3 吉利銀河OS互動亮點

3.1.4 GKUI 19代表車型-星越

3.1.5 吉利品牌其他互動方式

3.2 長安

3.2.1 長安交互發展歷程

3.2.2 IMS智慧互動系統代表車型

3.2.3 IMS智慧互動系統互動亮點

3.2.4 長安品牌其他互動方式

3.3 長城

3.3.1 長城交互發展歷程

3.3.2 Fun-Life2.0系統代表車型

3.3.3 長城品牌其他互動方式

3.4 比亞迪

3.4.1 比亞迪交互發展歷程

3.4.2 Dlink4.0系統代表車型

3.5 奇瑞

3.5.1 奇瑞交互發展歷程

3.5.2 雄獅智雲4.1系統代表車型

3.6 上汽

3.6.1 上汽交互發展歷程

3.6.2 斑馬智行4.0代表車型

3.7 廣汽

3.7.1 廣汽交互發展歷程

3.7.2 ADiGO4.0代表車型

3.8 嵐圖FREE互動亮點

3.9 智己L7互動亮點

3.10 R汽車互動亮點

3.11 北汽極狐

3.11.1 北汽極狐互動亮點

3.11.2 鴻蒙OS車機系統代表車型

04

新勢力品牌多模態互動

4.1 蔚來

4.1.1 蔚來交互發展歷程

4.1.2 蔚來 NIO OS系統:按鍵、旋鈕、觸控為主,語音、機器人為輔

4.1.3 蔚來ET7

4.1.4 蔚來智慧鑰匙互動方式

4.2 小鵬

4.2.1 小鵬汽車交互發展歷程

4.2.2 小鵬汽車Xmart OS互動亮點

4.2.3 小鵬汽車Xmart OS代表車型

4.2.4 小鵬汽車互動細節介紹

4.3 理想

4.3.1 理想汽車交互發展歷程

4.3.2 理想ONE互動亮點

4.3.3 理想品牌其他互動方式

4.4 威馬W6互動亮點

4.5 高合HiPhi X 互動亮點

4.6 哪吒U Pro互動亮點

更多佐思報告

佐思 2021年研究報告撰寫計劃

智慧網聯汽車產業鏈全景圖(2021年9月版)


主機廠自動駕駛


汽車視覺(上)


高精度地圖


商用車自動駕駛


汽車視覺(下)


高精度定位


低速自動駕駛


汽車模擬(上)


OEM資訊保安


ADAS與自動駕駛Tier1


汽車模擬(下)


汽車閘道器


汽車與域控制器


毫米波雷達


APA與AVP


域控制器排名分析


車用鐳射雷達


駕駛員監測


鐳射和毫米波雷達排名


車用超聲波雷達


紅外夜視


E/E架構


Radar拆解


車載語音


汽車分時租賃


充電基礎設施


人機互動


共享出行及自動駕駛


汽車電機控制器


L4自動駕駛


EV熱管理系統


混合動力報告


L2自動駕駛


汽車功率電子


汽車PCB研究


燃料電池


無線通訊模組


汽車IGBT


汽車作業系統


汽車5G


汽車線束


線控底盤


合資品牌車聯網


V2X和車路協同


轉向系統


自主品牌車聯網


路側智慧感知


模組化報告


商用車車聯網


汽車智慧座艙


車載顯示


商用車ADAS


座艙多屏與聯屏


智慧後視鏡


Tier1智慧座艙(上)


智慧座艙設計


汽車照明


Tier1智慧座艙(下)


座艙SOC


汽車座椅


汽車數字鑰匙


TSP廠商及產品


HUD行業研究


汽車雲服務平臺


OTA研究


汽車MCU研究


AUTOSAR軟體


智慧停車研究


感測器晶片


軟體定義汽車


Waymo智慧網聯佈局


ADAS/AD主控晶片


T-Box市場研究


自動駕駛法規


ADAS資料年報


T-Box排名分析


智慧網聯和自動駕駛基地


汽車鎂合金壓鑄


乘用車攝像頭季報


智慧汽車個性化


飛行汽車


專用車自動駕駛


農機自動駕駛


礦山自動駕駛


港口自動駕駛


自動駕駛重卡


無人接駁車


汽車VCU研究

「佐思研究月報」

ADAS/智慧汽車月報 | 汽車座艙電子月報 | 汽車視覺和汽車雷達月報 | 電池、電機、電控月報 | 車載資訊系統月報 | 乘用車ACC資料月報 | 前視資料月報 | HUD月報 | AEB月報 | APA資料月報 | LKS資料月報 | 前雷達資料月報

分類: 國際
時間: 2021-10-21

相關文章

高校老師的神操作,寫下了“神仙板書”,學生:猶如行走的印表機

高校老師的神操作,寫下了“神仙板書”,學生:猶如行走的印表機
當老師不但有很強的專業技能,還得有一手寫得不錯的字,雖然現在老師能用多媒體來教學,不一定要天天寫板書,但能寫出好看的字型,證明這位老師下足了一番功夫.每個老師寫出來的板書不一樣,風格也不一樣. 今天和 ...

流體動力學顯示即便在戶外也要戴口罩來防止感染新冠病毒的原因

流體動力學顯示即便在戶外也要戴口罩來防止感染新冠病毒的原因
據外媒報道,隨著傳染性極強的新冠病毒德爾塔變種繼續在美國蔓延,美國疾病控制和預防中心(CDC)的指導方針建議,即使是接種了疫苗的人在室內也要戴口罩以防止暴露和傳播.然而人們在室外時應該做什麼就不太清楚 ...

父母組織提出訴訟 挑戰紐約州戴口罩強制令

父母組織提出訴訟 挑戰紐約州戴口罩強制令
[僑報網報道]週五(9月17日),一個父母組織向紐約州政府提出訴訟,對紐約州政府要求所有學生.教師和學校僱員戴口罩的強制規定發起法律挑戰. 據PIX11報道,週五(9月17日),紐約州參議員博雷洛(G ...

美國學校恢復線上教學 戴口罩問題爭執不休

美國學校恢復線上教學 戴口罩問題爭執不休
來源:央視新聞客戶端 美國的新冠肺炎疫情仍然在不斷惡化,新增確診病例數居高不下.在這樣的條件下,部分美國學校在新學期開學後沒多久後便不得不放棄線下授課,恢復線上教學. 美國南卡羅來納州自6月7日結束緊 ...

紐約市增大公校檢測 未接種疫苗的密接生不必隔離改為戴口罩

紐約市增大公校檢測 未接種疫苗的密接生不必隔離改為戴口罩
[僑報網報道]由於哈林區一所學校在開學一週後關閉,紐約市府將增加公立學校的新冠病毒檢測,但也將減少學生隔離的必要性. 根據ny1報道,市府將從9月27日開始在所有小學.初中和高中進行每週檢測,同一天, ...

網民怒批艾美獎明星無人戴口罩,洛杉磯官方:這些人例外

網民怒批艾美獎明星無人戴口罩,洛杉磯官方:這些人例外
[文/觀察者網 張照棟] "電影.電視和音樂製作例外." 艾美獎頒獎典禮現場的一眾明星既沒有戴口罩,也沒有保持安全防疫距離.此事已招致美國社交媒體上眾多網民聲討,直言明星是特權階層 ...

電子科大到成都大學,成都理工到川大錦城?轉學“神操作”太意外

電子科大到成都大學,成都理工到川大錦城?轉學“神操作”太意外
最近四川省教育廳公佈了兩名轉學的同學,一個從電子科技大學轉學到成都大學,一個從成都理工大學轉學到四川大學錦城學院.人們常說水往低處流,人往高處走,但是對於大學生轉學來說,人往低處走可能才是常態. 兩個 ...

老師通知:下雨天禁止學生帶傘到校!學校如此“神操作”為哪般?

老師通知:下雨天禁止學生帶傘到校!學校如此“神操作”為哪般?
文|教而育之 最近天氣不好,一直有雨. 孩子這學期上小學四年級,他的班主任老師在群裡發信息說"這幾天天氣不好,家長可以接送孩子上.下學,也可以給孩子買雨衣,但是禁止學生打傘到校". ...

緬甸新增1943例!南帕嘎確診母女相繼死亡!仍有人不戴口罩

緬甸新增1943例!南帕嘎確診母女相繼死亡!仍有人不戴口罩
9月17日晚8點至9月18日晚8點,衛生部門對緬甸全國21036人進行了檢測,發現新增新冠確診患者1943人,累計確診已達444871人:新增出院2396人,累計出院395855人:新增死亡72人,累 ...

疫情減緩,有多少宗不戴口罩坐車被罰個案?9月25日措施繼續

疫情減緩,有多少宗不戴口罩坐車被罰個案?9月25日措施繼續
荷蘭病毒感染數字減少,今天新增1694例. 醫院中有551名新冠患者,其中195人接受重症監護. 自從在荷蘭公共交通中引入口罩義務以來,因為不戴口罩而被罰款的個案有11600 宗.該措施於去年 6 月 ...

給孩子戴口罩,這些要點你關注到了嗎?

給孩子戴口罩,這些要點你關注到了嗎?
給孩子戴口罩,這些要點你關注到了嗎? 來源: 武漢釋出

澳洲確診男子不戴口罩逛超市:直接入獄21天,罰款1000刀

澳洲確診男子不戴口罩逛超市:直接入獄21天,罰款1000刀
據<每日電訊報>9月20日報道,澳洲一名男子在明知自己新冠檢測呈陽性的情況下,不戴口罩逛超市而被判入獄.法官在庭審過程中批評了該男子"自私"且"輕率" ...

潘南奎整容失敗不敢露面,整天戴口罩出門,卻被七鶴粉絲抵制

潘南奎整容失敗不敢露面,整天戴口罩出門,卻被七鶴粉絲抵制
說起潘南奎,相信大家應該都很熟悉.她可是最近這段時間,熱度很高的一個網紅.主要是因為她的顏值非常高,還有點像是大明星Angelababy,因此很多人都是她的顏粉.不過潘南奎更難能可貴的是,她的事業也發 ...

普林斯頓研究人員發現鼓勵人們接種COVID-19疫苗和戴口罩的新方法

普林斯頓研究人員發現鼓勵人們接種COVID-19疫苗和戴口罩的新方法
據外媒報道,全球已有超過2億人感染COVID-19,超400萬人死亡,儘管公共衛生官員.名人和有影響力的人做出了前所未有的努力,說服大家戴上口罩並儘快接種疫苗,但結果是好壞參半.現在,普林斯頓大學的兩 ...

戴口罩成為習慣,促進了“香水經濟”的發展

戴口罩成為習慣,促進了“香水經濟”的發展
自從疫情以來,大眾都習慣外出戴上口罩,並且已經形成了一種常規的生活習慣,當然口罩也帶動了"香水經濟"的發展,同時"口紅經濟"也呈現出低迷的現象,同時根據觀察,現 ...

令人髮指!德國一男子提醒顧客戴口罩反遭槍殺
來源:新華國際 原標題:提醒顧客戴口罩遭槍殺 德國小城哀悼逝者 德國西部小城伊達爾-奧伯施泰因市一名加油站員工上月因提醒顧客戴口罩,遭槍擊身亡.當地政府本月7日為他舉行悼念活動,大約400人參加. 據 ...

英國出生證公證認證3分鐘掌握辦理神操作↓↓↓
英國出生證公證認證3分鐘掌握辦理神操作↓↓↓ 當我們領到英國出生證後在中國使用為何也要要做英國出生證公正,我們要如何在中國做英國出生證公證及使館認證呢? 首先我們來看一下出生紙是什麼?英國寶寶在英國出 ...

健康小科普 | @家長和兒童 跟著動畫一起學:幼托防疫—戴口罩

健康小科普 | @家長和兒童 跟著動畫一起學:幼托防疫—戴口罩
公眾號封面首圖系原創設計,未經允許禁止使用 我們看不見病毒,雖然勤洗手.不摸臉可以讓病毒沒有機會傷害我們,但是別人打了個大噴嚏,病毒還是可以趁機鑽進我們的鼻子和嘴巴,所以我們要用口罩保護鼻子和嘴巴. ...

大理旅拍價格一般多少錢?避開五個旅拍神操作,就能價格效果雙贏
大理旅拍價格一般多少錢,應該是不少即將要去大理旅拍的新人們最關心的問題了.關乎錢包的事情,總是不能馬虎的.不過關於婚紗照效果同樣也不能馬虎,畢竟也是婚禮的敲門磚,如何都要拍得好看又能拍得實惠才是眾多新 ...

意外走紅的8位大網紅,一個比一個神奇,有人因戴口罩採訪而爆紅

意外走紅的8位大網紅,一個比一個神奇,有人因戴口罩採訪而爆紅
在這個全民娛樂的時代裡,走紅的門檻已越來越低. 當前的娛樂圈正是如此,這個圈子每隔一段時間就會冒出新的頂流. 這當中有很多人沒有拿得出手的作品,但熱度卻居高不下. 這折射出行業的病態,只要能帶動流量話 ...