商湯絕影一直是智能座艙領域的頭部供應商,座艙AI軟件的市場份額連續5年位列行業第一。作為加速智能汽車駛入AGI時代的核心技術伙伴,商湯絕影著力打造了以敏銳洞察、深度思考、高效執行的多模態場景大腦為核心的AI大模型座艙產品矩陣,為用戶提供深度個性化、有人文關懷的全新出行體驗。
行業領先的一站式智能座艙產品解決方案
基于商湯積累深厚的人臉識別、視線追蹤、頭部姿態、動作識別、物體識別等底層技術能力,商湯絕影提供多層次、全方位的一站式智能座艙產品解決方案,包括駕駛員感知系統(DMS)、車艙感知系統(OMS)、車外近場感知系統和AI大模型座艙產品體系。
作為國內座艙AI軟件的領頭羊,商湯絕影已經打造超過15個行業首發的智能座艙產品與功能,展現出強大的持續創新能力和量產上車實力。
2020年,商湯絕影發布行業首個量產3D刷臉開車門技術,并在美國某高端品牌車型上實現全球首發,后續以FaceID為核心的刷臉解鎖車門的產品量產落地合資車企和國內造車新勢力企業。2021創交會上,商湯絕影的座艙乘員健康檢測功能行業首發,實現艙內健康檢測從0到1的量產突破。
2024年1月,蔚來正式發布Banyan·榕2.4.0 智能系統,其中商湯絕影與蔚來緊密合作,持續打磨優化全艙人臉識別技術能力,助力蔚來發布行業首創的NOMI全艙記憶功能。
憑借全艙感知能力和本地賬戶的畫像信息,NOMI全艙記憶功能最多可以記住19位用戶信息,以更親切的稱呼來替代“主駕”、“副駕”等生硬詞匯,人機交互更加有溫度。同時,NOMI還能同步全艙每個駕乘人員的數據,如座椅位置、音樂賬號等,從而滿足每個記憶用戶的個性化需求,自然拉近與用戶的情感距離,讓每一次出行體驗更加溫馨、舒適。
到2023年底,商湯絕影智能座艙產品解決方案已經上車30家國內外主機廠,覆蓋80多個車型。
敏銳洞察、深度思考、高效執行的多模態場景大腦,引領智艙新體驗
傳統的智能座艙設計往往以單點功能為主,不同功能之間相互獨立,用戶體驗不夠流暢,孤立、離散的功能組合稱不上是真正的智能座艙。以多模態大模型和語言大模型為基礎,商湯絕影正在打造的敏銳洞察、深度思考、高效執行的多模態場景大腦,重塑座艙體驗。
通過應用場景和用戶需求驅動,多模態場景大腦讓智能汽車可以高效準確地全景感知和深度理解用戶需求和周圍環境,并以場景大腦為核心打通不同應用,可以全局調用車上開放的軟硬件服務,將離散的單點功能聚合在一起,從而為用戶提供更多深度個性化的主動關懷和服務。
(多模態大模型可以準確感知并識別車外信息)
基于地理位置推薦符合用戶喜好的餐廳、介紹用戶感興趣的外部自然景物,并進行優質景點推薦是絕影AI大模型座艙產品的基礎功能。憑借強大的多模態感知能力,搭載商湯絕影方案的車輛能準確感知車外信息,包括周圍車輛的車型、標志性建筑物等,以語音、圖片或視頻等方式為艙內人員提供更為準確和全面的內容,幫助用戶了解和掌握外部環境信息。
大模型上車的能力不止于此。根據對于用戶行程安排和實時交通數據的精準分析,結合用戶的表情和語氣,商湯絕影“場景大腦”能夠及時發現駕駛員可能面臨的遲到風險,并提供兩條可選路線與預計抵達時間,用戶可通過手勢或語音命令進行確認。同時,在得到確認后,系統還可以根據用戶的表達習慣向相關會議參與者發送通知,告知相關情況,為用戶提供專業高效、溫暖貼心的智能出行體驗。
加速AI大模型座艙產品量產落地
當前很多座艙大模型僅僅是將PC端或手機端的大模型APP簡單地搬運到車內,而非針對座艙場景專項定制。由于手機和座艙在交互邏輯、顯示方式等都存在顯著差異,這樣的機械式搬運難以提供良好的人機交互體驗。
基于多模態大模型、語言大模型、文生圖大模型、“大醫”大模型等能力組合,商湯絕影以多模態場景大腦為核心,打造了豐富的AI大模型座艙產品矩陣。
“車典”把汽車說明書裝進了車內的語言大模型中,“千語”可以讓車載語音助手進行角色扮演,“神筆”讓用戶秒變“車內大畫家”,“童伴”讓車內的兒童跟有趣的故事、古詩和成語游戲為伴,寓教于樂,而“旅醫”就像是一個移動的私人健康管家,為駕乘人員提供專業且個性化的健康管理服務。
(“神筆”讓用戶秒變“車內大畫家”)
尤其是“旅醫”這個健康管理的大模型產品,它是以“大醫”醫療健康大模型為橋梁,聯結健康檢測及醫療生態服務,首次在座艙內對用戶進行專業及個性化健康管理服務,實現健康咨詢、在線掛號、檢測、報告解讀、用藥咨詢、健康科普等一系列服務。
這個功能對于懷孕的用戶來說特別友好,當感知車內有孕婦時,“旅醫”會主動感知和詢問孕婦健康狀態,當判斷需要產檢或者其他醫療援助時,會主動推薦相應的醫療機構,征得用戶同意后,協助完成掛號等一系列操作。
(“旅醫”首次在座艙內對用戶進行專業及個性化健康管理服務)
同時,商湯絕影也在推進AI大模型座艙產品的量產落地,目前已上車多家主流車企的量產車型。
近期小米SU7的上市與交付倍受關注,商湯“日日新”大模型體系全面助力小愛語音助手車載場景應用,為用戶提供智能座艙的升維體驗。
此外,絕影已經和一家國內領先的新勢力車企深度合作,多模態大模型部署上車,將讓智能汽車全方位感知并理解車外路況、天氣等環境數據和艙內所有駕乘人員的對話、表情及用戶畫像等各類信息,針對性地提供更多主動關懷、深度個性化的產品和服務。
面向通用人工智能的未來,商湯絕影還在進一步探索艙駕融合,以實現智能駕駛和智能座艙在硬件、軟件及應用層面的全面融合,提升用戶體驗、降低系統成本,進一步打破艙內外的界限和束縛,涌現更多創新功能,讓智能汽車向著超級智能體進化。
來源:第一電動網
作者:蓋世汽車
本文地址:http://www.155ck.com/news/shichang/228787
以上內容轉載自蓋世汽車,目的在于傳播更多信息,如有侵僅請聯系admin#d1ev.com(#替換成@)刪除,轉載內容并不代表第一電動網(www.155ck.com)立場。
文中圖片源自互聯網,如有侵權請聯系admin#d1ev.com(#替換成@)刪除。