2026年11月5日,索尼(中国)有限公司在第九届中国国际进口博览会上全球首发两项移动出行技术:“融合双路视觉信息的车载乘客眩晕检测”与“基于视觉语言模型的驾驶接管危险预警”。两项技术分别聚焦车内娱乐舒适性与智能驾驶人机交互,均涉及AI模型与视觉分析,相关技术已申请专利或进入实际道路测试阶段。

眩晕检测:双路视觉融合,复用ADAS摄像头

据IT之家报道,索尼的乘客眩晕检测方案同时分析两路视频:一路来自车前道路画面,用于反映车辆加减速、转弯和颠簸等状态;另一路来自后排屏幕正在播放的内容,用于识别整体运动、旋转、闪烁等可能引发眩晕的视觉因素。基于公开医学数据训练的AI模型综合两路信息,预测乘客可能出现的眩晕程度,也可结合个人敏感度进行评估。

该方案复用车辆原有的ADAS前视摄像头,无需新增后排摄像头,相关技术已申请专利。索尼中国研究院研发了该方案,并与北京交通大学合作,进一步关注车内娱乐的乘坐舒适性。评估结果可用于提示驾驶员减少急刹、急转,也可为内容平台推荐视觉变化较缓和的内容提供参考。

从驾驶员到乘客,索尼对移动出行的探索也延伸至车内娱乐的实际感受。

背景方面,第八届进博会上,索尼曾展示融合“灵感之窗”、车载音频与PS5游戏等资源的车载娱乐体验。针对观众对行驶中观看屏幕时眩晕问题的反馈,索尼今年推出了上述检测方案。

接管预警:视觉语言模型判断ODD边界,分级提示

另一项全球首发技术“基于视觉语言模型的驾驶接管危险预警”利用视觉语言模型(VLM)分析车辆前方的道路画面,判断路况是否接近或超出智能驾驶系统的设计运行范围(ODD),为驾驶员提供分级提示。接管提示分为三个层级:接近边界时,提醒驾驶员准备接管;超出范围但尚不紧急时,引导驾驶员主动接管;遇到突发障碍或感知失效等高风险情况时,提示紧急接管。

研发过程中,团队利用数字孪生仿真环境,生成日间、夜间、大雨及高速行驶等工况下的数据,用于模型训练与验证。目前,该技术已同清华汽车工程学院在苏州市相城区开展实际道路测试,可为车企及智能驾驶解决方案厂商的接管时机判断与人机交互设计提供支持。

后续关注

索尼两项技术均处于首发或测试阶段,尚未公布量产时间表。眩晕检测方案的专利布局与车企合作进展、接管预警系统在苏州路测的数据表现,以及两项技术能否被主流车企或智能驾驶方案商采纳,将是后续关注重点。