2026年11月5日,索尼(中國)有限公司在第九屆中國國際進口博覽會上全球首發兩項移動出行技術:“融合雙路視覺信息的車載乘客眩暈檢測”與“基於視覺語言模型的駕駛接管危險預警”。兩項技術分別聚焦車內娛樂舒適性與智能駕駛人機交互,均涉及AI模型與視覺分析,相關技術已申請專利或進入實際道路測試階段。
眩暈檢測:雙路視覺融合,復用ADAS攝像頭
據IT之家報道,索尼的乘客眩暈檢測方案同時分析兩路視頻:一路來自車前道路畫面,用於反映車輛加減速、轉彎和顛簸等狀態;另一路來自後排屏幕正在播放的內容,用於識別整體運動、旋轉、閃爍等可能引發眩暈的視覺因素。基於公開醫學數據訓練的AI模型綜合兩路信息,預測乘客可能出現的眩暈程度,也可結合個人敏感度進行評估。
該方案復用車輛原有的ADAS前視攝像頭,無需新增後排攝像頭,相關技術已申請專利。索尼中國研究院研發了該方案,並與北京交通大學合作,進一步關注車內娛樂的乘坐舒適性。評估結果可用於提示駕駛員減少急剎、急轉,也可為內容平台推薦視覺變化較緩和的內容提供參考。
從駕駛員到乘客,索尼對移動出行的探索也延伸至車內娛樂的實際感受。
背景方面,第八屆進博會上,索尼曾展示融合“靈感之窗”、車載音頻與PS5遊戲等資源的車載娛樂體驗。針對觀眾對行駛中觀看屏幕時眩暈問題的反饋,索尼今年推出了上述檢測方案。
接管預警:視覺語言模型判斷ODD邊界,分級提示
另一項全球首發技術“基於視覺語言模型的駕駛接管危險預警”利用視覺語言模型(VLM)分析車輛前方的道路畫面,判斷路況是否接近或超出智能駕駛系統的設計運行範圍(ODD),為駕駛員提供分級提示。接管提示分為三個層級:接近邊界時,提醒駕駛員準備接管;超出範圍但尚不緊急時,引導駕駛員主動接管;遇到突發障礙或感知失效等高風險情況時,提示緊急接管。
研發過程中,團隊利用數字孿生仿真環境,生成日間、夜間、大雨及高速行駛等工況下的數據,用於模型訓練與驗證。目前,該技術已同清華汽車工程學院在蘇州市相城區開展實際道路測試,可為車企及智能駕駛解決方案廠商的接管時機判斷與人機交互設計提供支持。
後續關注
索尼兩項技術均處於首發或測試階段,尚未公佈量產時間表。眩暈檢測方案的專利佈局與車企合作進展、接管預警系統在蘇州路測的數據表現,以及兩項技術能否被主流車企或智能駕駛方案商採納,將是後續關注重點。
