博覽會上,商湯絕影基于以座艙大腦為核心的全新智能座艙架構,首次全方位展示了智能座艙大模型產品體系,將安全舒適、極簡交互以及個性懂你的智能座艙體驗帶到全球消費者面前。IAA MOBILITY 2023商湯絕影展臺(展位號:A2館D30)商湯科技聯合創始人、首席科學家、絕影智能汽車事業群總裁王曉剛作為中國汽車供應鏈杰出代表,受邀參加IAA首次舉辦的中國媒體溝通會,同時還在車展期間帶來《通用人工智能時代下的智能汽車》的主題演講。
王曉剛表示:“商湯絕影自誕生起就蘊含著國際化的基因,在多年的創新與實踐中逐步發展成為駕、艙、云三位一體的架構體系,如今走向全球恰逢其時。此次車展可以說是AGI時代一個令人興奮的新起點,我們期待將長期沉淀的大模型技術能力和量產經驗帶給全球客戶,讓智能座艙變成暖心懂你的好管家,讓智能駕駛變成安全可靠的老司機,共同開啟人機共駕的新體驗。”
自2016年與本田合作以來,7年來商湯絕影已與超過30家國內外新勢力車企、傳統車企和合資車企強強聯合,累計前裝定點數量已超3600萬臺。
▎大模型加持座艙大腦,打造“懂你”的管家式體驗
傳統智能座艙大多只能提供預設功能,決策和控制均基于規則,難以進行差異化的服務,也無法隨著用戶的使用而進化。
大模型強大的認知理解、邏輯思維能力配合絕影團隊打造的專屬記憶模塊,可以將離散的單點功能串聯在一起,把“懂你”的管家式體驗帶進現實。
在今年4月上海車展期間,商湯絕影首次展示了“大模型上車”的人性化體驗。不到半年,商湯絕影完成了以座艙大腦為核心的架構升級,并將智能座艙大模型產品體系帶到博覽會現場。
商湯絕影智能座艙大模型產品體系以車端多模態感知和云端大模型服務作為基礎,以車艙大腦作為核心,結合安全、娛樂、教育、效率等用戶可感知場景設計,并通過數字人作為用戶交互窗口,打造“更懂你、有思想、有邏輯”的車載管家。
比如:
-
健康問診:利用車內的視覺健康檢測技術,結合醫療垂域模型,快速處理車上應急情況;
-
旅游攻略:通過自然語言準確理解用戶意圖,進行旅游推薦和規劃,并完成地圖、酒店等服務的生態打通,讓旅游更省心;
-
兒童模式:可為不同年齡段的孩子們提供有趣的故事伴讀和互動問答,還能和孩子們共讀古詩詞、共創故事,引導和開發兒童想象力,讓全家出游充滿溫馨氛圍;
-
AI說明書:“AI說明書”可借助大模型的長文本理解等能力,讓用戶只需通過自然語言與系統交流,就能方便獲取車輛使用說明;
-
疲勞緩解:DMS系統感知到用戶疲勞以后,大模型可以根據用戶的使用習慣和當前環境推薦不同的系統操作來緩解,比如推薦音樂或者聊些用戶感興趣的話題;
-
新聞概要:系統可以自動搜索和總結用戶感興趣的新聞,在用戶上車場景做快速的介紹;
-
角色切換:大模型可以模擬不同的用戶角色與車內用戶進行交流,或嚴肅或活潑,非常適合兒童的童趣對話;
-
隔空作畫:結合座艙視覺感知系統捕捉手部位置,生成繪畫草圖,利用大模型能力根據草圖直接生成符合用戶意圖的畫作。
-
與國內車企緊密合作,將各種遮擋、眼睛反光、頭姿視線不一致、不同坐姿、小眼睛大角度等長尾問題的誤報率降至萬分之一,到達行業領先水平。
-
通過歐盟DDAW(駕駛員嗜睡和注意力警告)認證,且測試結果遠高于DDAW的法規要求,并達到Euro NCAP(歐洲新車安全評鑒協會)法規標準,為合作車型在歐洲上市保駕護航。
▎全球之旅率先啟程,助力蔚來、高合等車企進軍國際市場作為具有國際化基因的智能汽車時代通用人工智能核心供應商,商湯絕影的歐洲之旅已先于本次博覽會啟程。
目前,商湯絕影的定點車型中有近20款海外車型,已助力蔚來、高合等國內知名汽車品牌進軍國際市場。
蔚來在歐洲售賣的全系5款車型已全部搭載商湯絕影的多項AI技術。比如,商湯絕影Face ID技術可以在用戶落座后,一步到位將各項個性化設置調整為用戶的個人偏好。當感知到艙內乘員時,系統還會自動調節空調風向,營造更智能舒適的艙內環境。兒童關懷&兒童遺忘檢測系統還可在感知到兒童意外留置車內時,及時反饋給NOMI語音助手,暖心守護家人安全。
高合HiPhi X豪華超跑SUV可通過B柱驗證駕駛員身份,讓用戶無感上車,解放雙手。 高合HiPhi Z豪華純電超跑GT則同時搭載了DMS駕駛員感知系統與OMS乘員感知系統,不僅可及時預警駕駛員疲勞分心狀態,還可智能感知乘員手勢進行美顏拍照,一路守護駕乘安全的同時豐富車載娛樂體驗。除了智能座艙,商湯絕影作為國內第一批率先激活L2++級別自動駕駛量產的服務商,也在大模型的加持下,實現了核心技術的再度突破。商湯聯合團隊提出的UniAD(Unified Autonomous Driving)自動駕駛通用算法框架獲得2023年度CVPR最佳論文,首次將檢測、跟蹤、建圖、預測及規劃整合到一個基于 Transformer 的端到端網絡框架下,實現多目標追蹤準確率提升20%、車道線預測準確率提升30%、目標軌跡預測誤差下降38%、規劃誤差下降28%。新算法的量產預計將于2023年四季度準備就緒,進一步提高絕影自動駕駛產品的行業競爭力。
今年上半年,商湯絕影成績亮眼,量產業務同比增長5.7倍,量產交付數量達到39萬臺車,新增定點數量達500多萬臺,累計定點車型160多款。
德國是現代汽車的發祥地,商湯絕影將以IAA MOBILITY為舞臺,推動大模型“脫虛向實”,與全球車企一同打開智能汽車的無盡想象空間,推動駕乘體驗躍遷升級。
相關閱讀,戳這里
《商湯絕影智能汽車事業群總裁王曉剛:通用人工智能下的智能汽車》
《商湯絕影與深圳前海管理局、巴士集團達成戰略合作》
原文標題:商湯絕影“亮劍”慕尼黑車展,首秀智能座艙大模型產品體系
文章出處:【微信公眾號:商湯科技SenseTime】歡迎添加關注!文章轉載請注明出處。
-
商湯科技
+關注
關注
8文章
508瀏覽量
36084
原文標題:商湯絕影“亮劍”慕尼黑車展,首秀智能座艙大模型產品體系
文章出處:【微信號:SenseTime2017,微信公眾號:商湯科技SenseTime】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論