Murata + Smart Eye:摄像头-雷达传感器融合如何简化座舱感知架构

InCabin Europe 2026前瞻 — 当60GHz雷达与AI摄像头不再是竞争方案而是融合平台,座舱感知从”多传感器堆叠”走向”统一理解”

合作背景

2026年9月15日,Murata Manufacturing与Smart Eye宣布合作演示摄像头-雷达传感器融合平台,将在InCabin Europe 2026(巴塞罗那,9月22-24日)展出。

这不是又一篇”传感器融合”概念文——而是两家量产级供应商的实际合作:

  • Murata:微型化RF器件集成+车规级60GHz雷达
  • Smart Eye:AI驱动的座舱感知软件(DMS/OMS/CPD)

融合架构

为什么融合?

单传感器局限

传感器 优势 致命局限
摄像头 高分辨率、姿态/表情/行为 黑暗失效、遮挡失效、隐私争议
60GHz雷达 穿透毯子/衣物、黑暗可用、有深度 无表情/姿态、分辨率低
重量垫 乘员存在/重量 无姿态、无CPD(毯子下儿童)
电容传感器 座椅有人 无分类、无姿态

融合后的互补

场景 摄像头 雷达 融合结果
正面坐姿成人 ✅ 姿态+表情 ✅ 距离+呼吸 完整理解
毯子下睡觉儿童 ❌ 看不见 ✅ 微动检测 ✅ CPD
黑暗座舱 ❌ 失效 ✅ 正常 ✅ 夜间DMS
儿童后向座椅 ⚠️ 部分遮挡 ✅ 存在 ✅ 分类
驾驶员戴墨镜 ⚠️ 眼睛不可见 ✅ 头部存在 ⚠️ 需行为推断

BOM成本影响

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
"""
摄像头-雷达融合 vs 传统多传感器方案BOM对比

传统方案(4个独立传感器):
- DMS摄像头: $15-25
- OMS摄像头: $15-25
- 重量垫: $8-12
- 电容传感器: $5-8
- CPD雷达(独立): $10-15
总计: $53-85

融合方案(2个传感器复用):
- 共享摄像头(DMS+OMS): $15-25
- 60GHz雷达(CPD+存在+呼吸): $10-15
- 软件(Smart Eye AI): $5-10(授权)
总计: $30-50

节省: ~40%
"""

# BOM计算
traditional_bom = {
'DMS摄像头': (20, 'USD'),
'OMS摄像头': (20, 'USD'),
'重量垫': (10, 'USD'),
'电容传感器': (6, 'USD'),
'CPD雷达': (12, 'USD'),
}

fusion_bom = {
'共享摄像头': (20, 'USD'),
'60GHz雷达': (12, 'USD'),
'AI软件授权': (8, 'USD'),
}

trad_total = sum(v[0] for v in traditional_bom.values())
fusion_total = sum(v[0] for v in fusion_bom.values())
saving = (1 - fusion_total / trad_total) * 100

print("=== 座舱传感器BOM对比 ===")
print(f"传统多传感器方案: ${trad_total}")
print(f"摄像头-雷达融合方案: ${fusion_total}")
print(f"BOM节省: {saving:.0f}%")
print(f"减少传感器数量: {len(traditional_bom)} → {len(fusion_bom)}")

Murata 60GHz雷达技术

参数 Murata方案 典型值
频率 60GHz FMCW ISM频段
天线 板载微型化 Murata专利集成
探测距离 0.2-2m 座舱内
距离分辨率 ~5cm FMCW带宽决定
微动检测 呼吸(0.1-0.5Hz) 相位提取
功耗 <1W 车规级
尺寸 <15mm×15mm Murata微型化

Smart Eye AI软件能力

功能 摄像头输入 融合后增强
驾驶员疲劳 PERCLOS+眨眼 +呼吸率(雷达)
驾驶员分心 视线+头部姿态 +距离(雷达)
乘员分类 体型+面部 +重量估计(雷达)
乘员姿态 骨骼关键点 +深度(雷达)
CPD ❌ 毯子下不可见 ✅ 微动检测
手势识别 手部追踪 ✅ 穿透遮挡

对自适应约束系统的价值

Murata新闻稿明确提到:”更准确的乘员位置和姿态信息支持自适应约束系统,包括优化气囊部署和安全带控制。”

这与ZF LIFETEC的思路一致(见9月22日#23博客),但Murata+Smart Eye提供的是感知层而非约束执行层——两者互补。

软件定义车辆架构

Murata新闻稿的关键洞察:

“同一硬件平台也提供了通过软件添加新功能的基础,如手势识别和生命体征监测。”

这意味着:

  1. 硬件不变,软件升级——SDV理念在座舱感知中落地
  2. 初始部署DMS+CPD,后续通过OTA增加手势/生命体征
  3. 降低初始BOM + 后续软件增值——商业模式转变

InCabin Europe 2026 展望

展商 技术 关注点
Murata+Smart Eye 摄像头-雷达融合 首次演示
ZF LIFETEC 自适应约束 量产级
Fraunhofer 3D骨骼 隐私优先
Calterah UWB CPD 多站雷达
TI 60GHz雷达 AWR2943

IMS开发启示

1. 传感器融合接口设计

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
# 融合数据结构示例
class FusedCabinState:
"""摄像头-雷达融合输出"""
# 驾驶员
driver_fatigue: float # 0-1 (摄像头PERCLOS + 雷达呼吸)
driver_distraction: float # 0-1 (摄像头视线 + 雷达距离)
driver_gaze_zone: str # road/instrument/phone (摄像头主导)
driver_breathing_rate: float # breaths/min (雷达)

# 乘员
passenger_present: bool # 雷达+摄像头联合
passenger_class: str # adult/child/infant (摄像头+雷达体型)
passenger_posture: str # normal/oop/forward (摄像头+雷达深度)
passenger_breathing: float # breaths/min (雷达)

# CPD
rear_occupant_present: bool # 雷达微动
rear_occupant_class: str # child/infant (雷达+摄像头)

# 约束系统输入
distance_to_wheel: float # 雷达深度
seatbelt_status: str # 摄像头检测

2. 融合策略选择

融合层 方法 适用场景
数据级 原始信号融合 雷达相位+摄像头像素→联合特征
特征级 特征向量拼接 摄像头Embedding+雷达特征→MLP
决策级 各自输出概率融合 摄像头概率+雷达概率→贝叶斯
推荐 特征级 平衡精度和延迟

3. 部署优先级

功能 传感器 优先级 延迟要求
DMS疲劳/分心 摄像头主+雷达辅 P0 <100ms
CPD 雷达主+摄像头辅 P0 <1s
OMS乘员分类 摄像头+雷达 P1 <500ms
OOP姿态 摄像头主+雷达深度 P1 <100ms
自适应约束 融合输出 P1 碰撞前
手势识别 摄像头主+雷达辅 P2 <50ms
生命体征 雷达主 P2 <1s

局限性

  1. 遮挡极限:雷达可穿透毯子但金属/厚重物体仍有限制
  2. 多乘员干扰:座舱内多人雷达反射交叉干扰
  3. 摄像头隐私:尽管有雷达补充,摄像头仍记录视频
  4. 成本实际:BOM节省需产量摊薄研发成本
  5. 软件授权:Smart Eye AI软件授权费可能随功能增加

结论

Murata+Smart Eye合作标志着座舱感知从”传感器堆叠”到”融合理解”的转折:

  1. 摄像头+雷达互补解决了单传感器致命局限
  2. **BOM节省~40%**使下沉到更多车型成为可能
  3. 软件定义让硬件一次部署、功能持续进化
  4. 与自适应约束联动将感知价值延伸到被动安全

对IMS的启示:传感器融合不是”多加一个传感器”,而是”让每个传感器更聪明”。


参考来源:

  • Murata+Smart Eye联合新闻稿 (2026.09.15)
  • InCabin Europe 2026 (incabin.com/europe)
  • Smart Eye AI Interior Sensing (smarteye.se)
  • Murata 60GHz雷达产品线 (murata.com)