德國國際汽車及智慧出行博覽會(IAA MOBILITY)於 9 月 5 日至 10 日在德國慕尼黑盛大舉行。作爲智能汽車時代的通用人工智能核心供應商,商湯絕影首次亮相此次博覽會,並正式進軍歐洲市場。基於以車艙大腦為核心的全新智能車艙架構,商湯絕影首次全面展示其智能車艙大模型產品體系,將安全舒適、極簡互 動以及個人化的智能車艙體驗帶給全球消費者,突顯商湯絕影在通用人工智能(AGI)時 代,於大模型技術創新、精確用戶洞察和量產實力方面的領先地位。
自 2016 年與本田展開合作以來,商湯絕影已與全球超過 30 家車廠合作,累計前裝定點 數量已超過 3,600 萬輛。此次借助 IAA MOBILITY 這個歐洲其中規模最大的國際車展,商湯絕影將進一步擴展國際業務版圖,不僅是其核心技術領域不斷前進、持續推動行業創 新和實現量產的最新成果,也是汽車工業全球化發展的重要體現。
商湯科技聯合創始人、首席科學家、絕影智能汽車事業群總裁王曉剛,在車展期間發表了題為「通用人工智能時代下的智能汽車」的主題演講。王曉剛表示:「商湯絕影自誕生以來,就注入了國際化的基因,在多年的創新實踐中逐步發展成為一個結合駕、艙、雲 三位一體的架構體系。此次車展是我們國際化進程的重要一步,也是 AGI 時代一個令人興奮的新起點,我們期待能夠把長期積累的大模型技術能力和量產經驗帶給全球客戶,打造更加貼心、安全、可靠的駕乘體驗,共同開啟人機共駕的新體驗。」
車艙是汽車智能化的重要組成部分,但目前大多數智能車艙僅能提供單一功能,且體驗 相對繁瑣。大模型擁有強大的環境理解、邏輯思維和內容生成能力,能夠將分散的單一功能結合,實現「真正懂你」的管家式體驗。在今年 4 月上海車展期間,商湯絕影首次將商湯「商量 SenseChat」大語言模型和「秒畫 SenseMirage」文生圖模型應用於車艙場景,展示了「大模型上車」的魅力。不到半年,商湯絕影以高效的創新速度進一步完成 了以車艙大腦為核心的架構升級,並成功地將完整的智能車艙大模型產品體系帶到博覽會現場。
商湯絕影的智能車艙大模型產品體系以商湯「日日新 SenseNova」大模型體系為基礎,並結合先進的多感應器融合感知能力,透過智能決策系統車載大腦,從安全、娛樂、教育、效率四大場景出發,打造了一系列用戶可感知且可體驗的產品。這些產品包括旅遊攻略、兒童模式、AI 說明書、駕乘守護、健康問診、多元 SenseChat、隔空作畫等等。透過數字人作為用戶感知的窗口,商湯絕影真正實現了「更懂你、有思想、有邏輯」的車載管家,為用戶提供全方位的智能化體驗。
例如,在用戶駕駛途中,「旅遊規劃」不僅能够透過主動多輪對話了解用戶需求,還能利用地圖應用程式為用戶提供個人化的旅遊計劃。同時,它可以根據用戶回應調整住宿、交通等攻略細節,讓旅遊變得更加輕鬆和貼心。當全家一起出遊時,「兒童伴讀」可以為 小朋友提供有趣的故事伴讀和互動問答,並與他們共同閱讀古詩詞及創作故事,引導並培養兒童的想像力,為家庭旅遊增添樂趣。當用戶遇到車輛問題時,可以查詢「AI 說明書」。與傳統呆板的單一問答式查詢不一樣的地方,是「AI 說明書」利用大模型的長文 本理解等能力,讓用戶只需通過自然語言與系統交流,即可隨時獲取各類車輛資料,輕鬆解決各種問題,提供更便利的服務。
除了不斷擴展智能化場景,商湯絕影還在大模型的支持下積極推進前沿技術的更新,成功克服了多種長尾場景和工程化難題。例如,商湯絕影與多家車企緊密合作,大 幅降低了像遮擋、眼睛反光、頭部姿勢不一致、不同坐姿等長尾問題的誤報率,達到了 行業領先水平。商湯絕影還通過了歐盟 DDAW(駕駛員嗜睡和注意力警告)認證,測試結果遠高於 DDAW 的法規要求,並達到 Euro NCAP(歐洲新車安全評鑒協會)高分評價標準,為合作車型在歐洲上市保駕護航。
憑藉領先的多模態高精度融合感知技術和多年的智能車艙工程實踐經驗,商湯絕影智能 車艙大模型產品體系致力於透過車艙大腦實現對用戶需求的全方位理解。其核心目標是駕乘安全,同時致力於打造極簡的人機交互體驗,以及提供個人化的乘員關懷服務。這 一體系不斷擴展車載 AI 應用的生態系統,並持續針對各類需求場景進行日日更新,為用戶帶來安全、便利和具娛樂性的「第三生活空間」。
目前,商湯絕影的定點車型中有近 20 款海外車型,已成功助蔚來、高合等品牌進軍國際市場,共同將極致的智能車艙體驗帶給海外用戶。
蔚來在歐洲售賣的全系 5 款車型全部搭載了商湯絕影的多項 AI 技術,為用戶提供人性化、智能化和場景化的智能車艙體驗。例如,商湯絕影 Face ID 技術能夠在用戶落座後,自動將各項個人化設置根據用戶的個人偏好調整。當系統感知到艙內的司機和乘客時,系統還會自動調節空調風向,營造更智能舒適的艙內環境。兒童關懷和兒童遺忘檢測系 統還能夠在感知到兒童意外滯留車內時,及時透過 NOMI 語音助手通知司機,為家人提供保護。
商湯絕影與高合汽車的深度合作同樣為廣大歐洲用戶帶來了智能而舒適的體驗。例如,高合 HiPhi X 豪華超跑 SUV 通過 B 柱的身份驗證技術,讓用戶無感上車。高合 HiPhi Z 豪 華純電超跑 GT 則同時搭載了 DMS(駕駛員感知系統)與 OMS(乘員感知系統),不僅 能及時預警司機疲勞分心狀態,還可通過乘客手勢感知啟動美顏拍照功能,一路守護駕 乘安全的同時豐富車載娛樂體驗。
除了在智能車艙領域的卓越成就,商湯絕影的量產 L2++級別自動駕駛服務也在大模型的支持下實現了核心技術的重大突破。商湯聯合團隊提出的 UniAD(統一自動駕駛感知決策一體化)通用大模型框架榮獲 2023 年度 CVPR 最佳論文。這一框架首次將檢測、追蹤、建圖、預測及規劃整合到一個基於 Transformer 的端到端網絡框架下,實現多目標 追蹤準確率提升 20%、車道線預測準確率提升 30%、目標軌跡預測誤差下降 38%、規劃 誤差下降 28%。新算法的量產預計將於 2023 年第四季度準備就緒,進一步提高絕影自動駕駛產品的行業競爭力。
隨著汽車智能化需求不斷增加及更普及,商湯絕影以高品質的交付,穩步推動智能車艙和智能駕駛技術的規模化應用,為國際化拓展奠定了堅實的基礎。今年上半年,商湯絕影量產業務實現 5.7 倍同比增長,量產交付數量達到 39 萬台車,新增定點數量達 500 多萬台,累計定點車型超過 160 款。根據國內知名調研機構最新發布的 2023 年第一季度中國市場乘用車智能車艙軟體供應商前裝市場份額榜單,絕影名列榜首。