博泰車聯網攜擎AI平臺確認申報2021年金輯獎汽車新供應鏈百強評選活動。

申請技術丨擎AI平臺

應用領域丨軟件

創新點及優勢：

技術描述：

擎AI平臺是一個全場景智能語音平臺。

平臺實現離在線語音融合，既能完全發揮在線語音的強大能力，又可結合離線能力實現不同網絡狀態下不間斷的語音交互；

平臺支持連續對話：一次喚醒、持續交互，結合上下文繼承策略、拒識策略、退出策略，滿足用戶持續自然的語音交互，同時確保不會干擾用戶與其他人的交流。在連續對話過程中，用戶可隨時打斷語音播報，語音識別與語義處理并行，大大提高交互效率；

平臺支持可見即可說，大部分界面（不管是系統界面還是app應用界面）上可以操作的地方都支持語音操作，還支持一定的泛化；

平臺支持自定義指令，用戶可以將常用的指令組合定義成一個個性化的指令，后續用戶只需要通過一個簡單的指令就能執行相應的指令組合，大大簡化用戶與平臺的交互，可組合的指令涉及車控、系統控制、導航、娛樂等常用指令；

平臺支持多意圖車控理解，用戶可以一次性下達多個車控指令，車控指令的個數與組合理論上沒有限制；

平臺具有豐富的語音技能，覆蓋車控、系統控制、娛樂、出行、生活服務等各方面；

平臺支持多音區，車輛中不同方位的用戶可同時獨立地與平臺進行語音交互，互不干擾。

平臺接入并融合多家ASR、NLU/NLP、TTS的優勢，在不同場景下可采用不同供應商提供的能力，為用戶提供最佳的語音交互體驗，并可根據項目靈活配置。

擎AI平臺外在表現是一個AI助手，每個用戶都可以定義符合自己要求的個性化AI助手。

AI助手可以設置形象（外貌、表情、動作等），選擇不同的tts發音人，甚至可以為其選擇方言；再結合個性化NLG，為每個AI助手配置一套回復話術，讓每個AI助手都有自己獨特的風格和內涵。

平臺還支持聲音復刻和形象復刻，用戶可以將AI助手的外貌和tts發音人設置成復刻出來的形象和聲音，讓其成為最獨特的AI助手。

平臺將語音與AI助手緊密地融合在一起，讓用戶感受到更情感化的語音交互，每次語義處理都會附帶上相應場景下的AI助手控制指令（動作、表情、情緒），在展示語義處理結果的同時控制AI助手表現指定的表情、做指定的動作，使用指定的情緒進行TTS播報。

AI助手還會主動與用戶交互。平臺基于場景來觸發主動交互，通過一個智能場景引擎，根據車輛狀態、系統狀態、用戶日程、用戶情緒、用戶狀態及環境信息等數據，在特定場景條件滿足時觸發，將場景配置的指令推送到車機端，主動與用戶交互。

平臺根據場景的優先級、緊急程度、用戶是否進行語音交互、駕駛員是否集中駕駛等，制定了多種沖突處理策略，用于解決AI助手主動交互與用戶主動交互之間的沖突，避免對用戶造成干擾。

獨特優勢：

擎AI平臺接入多家業內領先的AI基礎能力，并做到基礎能力的可替換與熱插拔，分場景使用語音識別模塊，搭建中控平臺融合多家語義;

擎AI平臺針對車載使用場景，定制開發了端到端的語音功能。包括語音產品定義、對話模塊設計，技能服務開發，全雙工連續對話，全場景可見即可說。平臺定制化能力豐富，滿足項目差異了的需求，并成功在多個項目中進行了交付。支持酒店、美食、景點等生態的語音多輪閉環，口語化表達，語音全流程交互；

產品具有情感化, 能識別用戶情緒，做出相應的回復和有情感的播報。支持多模交互，將視覺AI和語音AI在應用層做融合，有效解決誤喚醒問題。

支持熱修復能力，擎AI平臺針對識別、語義、合成分別實現了熱修復功能，能夠針對部分識別錯誤、合成發音不準，以及語義提取異常的情況進行在線處理；

應對不同類型用戶的個性化需求，擎AI平臺開發了個性化NLG平臺，可以針對不同用戶類型進行TTS話術配置，做到獨有的交互體驗；

針對平臺整體穩定性，我們開發了全流程檢測平臺，實現主動和被動的穩定性檢測；主動方式通過對連接、識別、語義理解、全鏈路追蹤等維度的不間斷撥測，來評估平臺可用性和穩定性，能夠在第一時間發現異常并進行處理；被動方式通過分析實時日志提取各類異常信息，反饋給開發迭代完善，提升平臺魯棒性；

應用場景：

（1）車輛具備精細化的感知能力，擎AI能力開始從語音發展為融合語音、手勢、圖像、聲紋等多模態感知融合語義的能力。如視線看向車窗說“透氣”，車窗開透氣模式。

（2）擎AI打通更多的服務場景和生態，結合座艙數據、用戶個性化信息，生態服務主動“流”向用戶，服務找人的方式探索增值服務變現。如兒童呵護場景可以按需付費，購買后提供兒童哄睡、兒童安全檢測服務。

（3）同時基于感知能力，擎AI 開始作為人機交互的核心，具備人格化的屬性，交互更擬人化。擎AI 的形象是3D卡通人或3D卡通形象，融合了口型、肢體語言、面部表達交互。

（4）擎AI更趨近人人交互，會結合當前場景、用戶情感狀態，Avatar具備自己的情感表達。例如你罵她或批評她，Avatar會表情難過，聲音低落的回復你。

未來前景：

隨著座艙的更多感知通道、更強算力、更高性能，結合語音、視覺、用戶行為、情感狀態擎AI將逐漸實現人與人的自然交互方式；同時車身數據、環境數據、生態數據、用戶偏好數據，實現個性化的智能場景找人。

基于SOA架構，座艙軟硬件一體化的升級，擎AI 將可以調用自動駕駛含輔助駕駛域、車身域、動力地盤域的能力，各個域的能力可以拆分、組合應用，使得人車交互更智能、更完整。可以設想AI識別到司機有點疲倦了，路況較好，行程輕松，可以主動詢問是否開啟自動駕駛進入小憩狀態。

“金輯獎”由蓋世汽車發起創立，旨在鼓勵針對中國汽車產業由大做強，促進中國汽車產業轉型升級、打造更具競爭力的整零協同創新關系，助力實現汽車強國目標并做出積極貢獻的企業和個人。歡迎點擊報名參選！

返回第一電動網首頁 >