Murata×Smart Eye:60GHz雷达+AI视觉座舱融合方案——InCabin 2026前瞻
来源:Murata Manufacturing × Smart Eye 联合发布 (2026-09-15) 展示:InCabin/AutoSens 2026, Barcelona, 9月22-24日 频段:60GHz radar + AI摄像头
核心摘要 Murata与Smart Eye联合演示摄像头-雷达传感器融合 座舱感知方案:60GHz雷达提供穿透性深度感知,AI视觉提供精细姿态/行为识别,两者互补降低对重量垫/电容传感器依赖,简化系统集成并降低BOM成本。
核心观点(Smart Eye CRO Henrik Lind): “多模态传感器融合的价值不是简单增加传感器,而是将现有传感器转化为对座舱环境的连贯理解。”
融合架构
graph LR
subgraph "摄像头(Smart Eye AI)"
A1[乘员位置/姿态]
A2[行为识别]
A3[注视估计]
end
subgraph "60GHz雷达(Murata)"
B1[存在/呼吸检测]
B2[深度信息]
B3[穿透遮挡检测]
end
A1 --> C[融合决策]
A2 --> C
B1 --> C
B2 --> C
C --> D[OMS/DMS/CPD输出]
C --> E[自适应约束系统]
C --> F[手势识别/生命体征]
各模态互补分析
感知场景
摄像头能力
雷达能力
融合优势
白天乘员姿态
✅ 精确
⚠️ 粗略
视觉主导
夜间存在检测
❌ 需IR补光
✅ 不受光照影响
雷达主导
穿透毯子检测
❌ 被遮挡
✅ 穿透
雷达主导
儿童座椅检测
✅ 视觉分类
⚠️ 存在但难分类
视觉+雷达
呼吸监测
❌ 不可见
✅ 胸腔微动
雷达主导
注视方向
✅ 精确
❌ 无法检测
视觉主导
深度距离
⚠️ 单目估计
✅ 精确测距
雷达补充
关键优势 1. 减少专用传感器依赖
传统方案
融合方案
成本节省
重量垫(乘员分类)
摄像头+雷达替代
$15-30/车
电容传感器(占用检测)
雷达替代
$5-10/车
多个IR摄像头
单摄像头+雷达补充
$10-20/车
2. 软件定义座舱基础 1 2 3 4 5 6 7 8 当前功能: DMS(驾驶员监控)+ OMS(乘员监控)+ CPD(儿童检测) 未来软件升级: + 手势识别 + 生命体征监测 + 情绪识别 + 座舱交互
同一硬件平台通过软件升级扩展功能,无需新增传感器。
3. Euro NCAP对应
Euro NCAP要求
摄像头贡献
雷达贡献
融合效果
CPD儿童检测
视觉确认儿童座椅
穿透检测呼吸/存在
✅ 全场景覆盖
OOP异常姿态
精确姿态估计
深度位置
✅ 精确+可靠
乘员分类
体型/视觉特征
重量/反射特征
✅ 多维分类
DSM分心
注视/行为
-
✅ 视觉主导
与IMS开发直接关联 1. IMS传感器配置建议
位置
摄像头
雷达
用途
顶控台(后视镜处)
1×IR摄像头
1×60GHz雷达
DMS+前排OMS
顶棚后方
1×IR摄像头
1×60GHz雷达
后排OMS+CPD
B柱左右
可选
1×60GHz雷达
侧方CPD
2. 融合算法管道 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 class CameraRadarFusion : """ Murata-Smart Eye方案的IMS融合管道 摄像头:视觉姿态/注视/行为 雷达:存在/呼吸/深度 融合:互补决策 """ def __init__ (self ): self .camera_pipeline = "Smart Eye AI视觉" self .radar_pipeline = "Murata 60GHz雷达" self .fusion_rules = { 'cpd' : self ._cpd_fusion, 'occupant' : self ._occupant_fusion, 'oop' : self ._oop_fusion, 'vital' : self ._vital_fusion } def _cpd_fusion (self, camera_data, radar_data ): """ CPD儿童检测融合 摄像头:识别儿童座椅/儿童体型 雷达:检测呼吸/微动(穿透毯子) """ camera_child_seat = camera_data.get('child_seat' , False ) camera_child = camera_data.get('child' , False ) radar_breath = radar_data.get('breathing' , False ) radar_presence = radar_data.get('presence' , False ) if radar_presence and radar_breath: if camera_child_seat or camera_child: return {'cpd_alert' : True , 'confidence' : 0.95 } else : return {'cpd_alert' : True , 'confidence' : 0.80 } elif radar_presence and not radar_breath: return {'cpd_alert' : False , 'confidence' : 0.70 } else : return {'cpd_alert' : False , 'confidence' : 0.95 } def _oop_fusion (self, camera_data, radar_data ): """ OOP异常姿态融合 摄像头:精确3D姿态 雷达:深度/位置 """ camera_pose = camera_data.get('pose_3d' , None ) radar_depth = radar_data.get('depth' , None ) if camera_pose and radar_depth: if camera_pose['distance' ] - radar_depth < 0.1 : return {'oop' : camera_pose['is_oop' ], 'confidence' : 0.95 } else : return {'oop' : camera_pose['is_oop' ], 'confidence' : 0.75 } elif camera_pose: return {'oop' : camera_pose['is_oop' ], 'confidence' : 0.80 } elif radar_depth: return {'oop' : radar_depth < 0.3 , 'confidence' : 0.60 } else : return {'oop' : None , 'confidence' : 0 }
3. 成本对比
方案
传感器BOM
开发复杂度
功能覆盖
纯摄像头
~$40
中
DMS+OMS(夜间弱)
摄像头+重量垫+电容
~$70
高
DMS+OMS+CPD
摄像头+60GHz雷达
~$50
中
DMS+OMS+CPD+生命体征
InCabin 2026关注要点
展示内容
IMS团队行动
摄像头-雷达融合Demo
现场体验/技术交流
60GHz雷达性能指标
对比TI/Calterah方案
软件定义座舱路线
确认未来功能扩展性
BOM成本优化
评估替代重量垫可行性
竞品对比
方案
雷达
视觉
融合
量产
Murata+Smart Eye
60GHz
AI视觉
✅ 演示
接近量产
Calterah
60-81GHz
❌
⚠️ 仅雷达
量产
TI
60GHz
❌
⚠️ 仅雷达
量产
NXP
UWB
❌
⚠️ 仅UWB
研发
Vayyar
60GHz
❌
⚠️ 仅雷达
量产
Murata+Smart Eye独特优势: 唯一演示摄像头+60GHz雷达融合方案。
参考链接
本文为行业前沿分析类博客,包含架构图、对比表格、代码示例、落地建议。