Murata×Smart Eye:60GHz雷达+AI视觉座舱融合方案——InCabin 2026前瞻

来源:Murata Manufacturing × Smart Eye 联合发布 (2026-09-15)
展示:InCabin/AutoSens 2026, Barcelona, 9月22-24日
频段:60GHz radar + AI摄像头

核心摘要

Murata与Smart Eye联合演示摄像头-雷达传感器融合座舱感知方案:60GHz雷达提供穿透性深度感知,AI视觉提供精细姿态/行为识别,两者互补降低对重量垫/电容传感器依赖,简化系统集成并降低BOM成本。

核心观点(Smart Eye CRO Henrik Lind): “多模态传感器融合的价值不是简单增加传感器,而是将现有传感器转化为对座舱环境的连贯理解。”

融合架构

各模态互补分析

感知场景 摄像头能力 雷达能力 融合优势
白天乘员姿态 ✅ 精确 ⚠️ 粗略 视觉主导
夜间存在检测 ❌ 需IR补光 ✅ 不受光照影响 雷达主导
穿透毯子检测 ❌ 被遮挡 ✅ 穿透 雷达主导
儿童座椅检测 ✅ 视觉分类 ⚠️ 存在但难分类 视觉+雷达
呼吸监测 ❌ 不可见 ✅ 胸腔微动 雷达主导
注视方向 ✅ 精确 ❌ 无法检测 视觉主导
深度距离 ⚠️ 单目估计 ✅ 精确测距 雷达补充

关键优势

1. 减少专用传感器依赖

传统方案 融合方案 成本节省
重量垫(乘员分类) 摄像头+雷达替代 $15-30/车
电容传感器(占用检测) 雷达替代 $5-10/车
多个IR摄像头 单摄像头+雷达补充 $10-20/车

2. 软件定义座舱基础

1
2
3
4
5
6
7
8
当前功能:
DMS(驾驶员监控)+ OMS(乘员监控)+ CPD(儿童检测)

未来软件升级:
+ 手势识别
+ 生命体征监测
+ 情绪识别
+ 座舱交互

同一硬件平台通过软件升级扩展功能,无需新增传感器。

3. Euro NCAP对应

Euro NCAP要求 摄像头贡献 雷达贡献 融合效果
CPD儿童检测 视觉确认儿童座椅 穿透检测呼吸/存在 ✅ 全场景覆盖
OOP异常姿态 精确姿态估计 深度位置 ✅ 精确+可靠
乘员分类 体型/视觉特征 重量/反射特征 ✅ 多维分类
DSM分心 注视/行为 - ✅ 视觉主导

与IMS开发直接关联

1. IMS传感器配置建议

位置 摄像头 雷达 用途
顶控台(后视镜处) 1×IR摄像头 1×60GHz雷达 DMS+前排OMS
顶棚后方 1×IR摄像头 1×60GHz雷达 后排OMS+CPD
B柱左右 可选 1×60GHz雷达 侧方CPD

2. 融合算法管道

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
class CameraRadarFusion:
"""
Murata-Smart Eye方案的IMS融合管道

摄像头:视觉姿态/注视/行为
雷达:存在/呼吸/深度
融合:互补决策
"""

def __init__(self):
self.camera_pipeline = "Smart Eye AI视觉"
self.radar_pipeline = "Murata 60GHz雷达"

# 融合策略
self.fusion_rules = {
'cpd': self._cpd_fusion,
'occupant': self._occupant_fusion,
'oop': self._oop_fusion,
'vital': self._vital_fusion
}

def _cpd_fusion(self, camera_data, radar_data):
"""
CPD儿童检测融合

摄像头:识别儿童座椅/儿童体型
雷达:检测呼吸/微动(穿透毯子)
"""
camera_child_seat = camera_data.get('child_seat', False)
camera_child = camera_data.get('child', False)
radar_breath = radar_data.get('breathing', False)
radar_presence = radar_data.get('presence', False)

# 决策矩阵
if radar_presence and radar_breath:
if camera_child_seat or camera_child:
return {'cpd_alert': True, 'confidence': 0.95}
else:
# 雷达检测到存在但摄像头未识别(可能被遮挡)
return {'cpd_alert': True, 'confidence': 0.80}
elif radar_presence and not radar_breath:
# 存在但无呼吸(可能空座椅或物体)
return {'cpd_alert': False, 'confidence': 0.70}
else:
return {'cpd_alert': False, 'confidence': 0.95}

def _oop_fusion(self, camera_data, radar_data):
"""
OOP异常姿态融合

摄像头:精确3D姿态
雷达:深度/位置
"""
camera_pose = camera_data.get('pose_3d', None)
radar_depth = radar_data.get('depth', None)

if camera_pose and radar_depth:
# 双高置信度:交叉验证
if camera_pose['distance'] - radar_depth < 0.1: # 10cm一致性
return {'oop': camera_pose['is_oop'], 'confidence': 0.95}
else:
# 不一致,取摄像头
return {'oop': camera_pose['is_oop'], 'confidence': 0.75}
elif camera_pose:
return {'oop': camera_pose['is_oop'], 'confidence': 0.80}
elif radar_depth:
# 仅雷达(摄像头被遮挡)
return {'oop': radar_depth < 0.3, 'confidence': 0.60}
else:
return {'oop': None, 'confidence': 0}

3. 成本对比

方案 传感器BOM 开发复杂度 功能覆盖
纯摄像头 ~$40 中 DMS+OMS(夜间弱)
摄像头+重量垫+电容 ~$70 高 DMS+OMS+CPD
摄像头+60GHz雷达 ~$50 中 DMS+OMS+CPD+生命体征

InCabin 2026关注要点

展示内容 IMS团队行动
摄像头-雷达融合Demo 现场体验/技术交流
60GHz雷达性能指标 对比TI/Calterah方案
软件定义座舱路线 确认未来功能扩展性
BOM成本优化 评估替代重量垫可行性

竞品对比

方案 雷达 视觉 融合 量产
Murata+Smart Eye 60GHz AI视觉 ✅ 演示 接近量产
Calterah 60-81GHz ❌ ⚠️ 仅雷达 量产
TI 60GHz ❌ ⚠️ 仅雷达 量产
NXP UWB ❌ ⚠️ 仅UWB 研发
Vayyar 60GHz ❌ ⚠️ 仅雷达 量产

Murata+Smart Eye独特优势: 唯一演示摄像头+60GHz雷达融合方案。

参考链接


本文为行业前沿分析类博客,包含架构图、对比表格、代码示例、落地建议。