Murata + Smart Eye:摄像头-雷达传感器融合如何简化座舱感知架构
Murata + Smart Eye:摄像头-雷达传感器融合如何简化座舱感知架构
InCabin Europe 2026前瞻 — 当60GHz雷达与AI摄像头不再是竞争方案而是融合平台,座舱感知从”多传感器堆叠”走向”统一理解”
合作背景
2026年9月15日,Murata Manufacturing与Smart Eye宣布合作演示摄像头-雷达传感器融合平台,将在InCabin Europe 2026(巴塞罗那,9月22-24日)展出。
这不是又一篇”传感器融合”概念文——而是两家量产级供应商的实际合作:
- Murata:微型化RF器件集成+车规级60GHz雷达
- Smart Eye:AI驱动的座舱感知软件(DMS/OMS/CPD)
融合架构
graph TB
subgraph "硬件层"
CAM[摄像头<br/>顶灯/后视镜位置<br/>已有]
RADAR[60GHz mmWave雷达<br/>Murata miniaturized<br/>新增/已有]
end
subgraph "Murata雷达前端"
RADAR --> RF[RF前端<br/>60GHz FMCW]
RF --> DSP[距离/多普勒/相位<br/>原始数据]
end
subgraph "Smart Eye AI软件层"
CAM --> VIS[视觉理解<br/>姿态/行为/表情]
DSP --> DET[雷达理解<br/>存在/呼吸/距离]
VIS --> FUSE[传感器融合引擎]
DET --> FUSE
end
subgraph "输出应用"
FUSE --> DMS[DMS<br/>疲劳/分心/酒驾]
FUSE --> OMS[OMS<br/>乘员分类/位置/姿态]
FUSE --> CPD[CPD<br/>儿童存在检测]
FUSE --> AR[自适应约束<br/>气囊/安全带]
FUSE --> GESTURE[手势识别<br/>未来扩展]
FUSE --> VITAL[生命体征<br/>未来扩展]
end
为什么融合?
单传感器局限
| 传感器 | 优势 | 致命局限 |
|---|---|---|
| 摄像头 | 高分辨率、姿态/表情/行为 | 黑暗失效、遮挡失效、隐私争议 |
| 60GHz雷达 | 穿透毯子/衣物、黑暗可用、有深度 | 无表情/姿态、分辨率低 |
| 重量垫 | 乘员存在/重量 | 无姿态、无CPD(毯子下儿童) |
| 电容传感器 | 座椅有人 | 无分类、无姿态 |
融合后的互补
| 场景 | 摄像头 | 雷达 | 融合结果 |
|---|---|---|---|
| 正面坐姿成人 | ✅ 姿态+表情 | ✅ 距离+呼吸 | 完整理解 |
| 毯子下睡觉儿童 | ❌ 看不见 | ✅ 微动检测 | ✅ CPD |
| 黑暗座舱 | ❌ 失效 | ✅ 正常 | ✅ 夜间DMS |
| 儿童后向座椅 | ⚠️ 部分遮挡 | ✅ 存在 | ✅ 分类 |
| 驾驶员戴墨镜 | ⚠️ 眼睛不可见 | ✅ 头部存在 | ⚠️ 需行为推断 |
BOM成本影响
1 | """ |
Murata 60GHz雷达技术
| 参数 | Murata方案 | 典型值 |
|---|---|---|
| 频率 | 60GHz FMCW | ISM频段 |
| 天线 | 板载微型化 | Murata专利集成 |
| 探测距离 | 0.2-2m | 座舱内 |
| 距离分辨率 | ~5cm | FMCW带宽决定 |
| 微动检测 | 呼吸(0.1-0.5Hz) | 相位提取 |
| 功耗 | <1W | 车规级 |
| 尺寸 | <15mm×15mm | Murata微型化 |
Smart Eye AI软件能力
| 功能 | 摄像头输入 | 融合后增强 |
|---|---|---|
| 驾驶员疲劳 | PERCLOS+眨眼 | +呼吸率(雷达) |
| 驾驶员分心 | 视线+头部姿态 | +距离(雷达) |
| 乘员分类 | 体型+面部 | +重量估计(雷达) |
| 乘员姿态 | 骨骼关键点 | +深度(雷达) |
| CPD | ❌ 毯子下不可见 | ✅ 微动检测 |
| 手势识别 | 手部追踪 | ✅ 穿透遮挡 |
对自适应约束系统的价值
Murata新闻稿明确提到:”更准确的乘员位置和姿态信息支持自适应约束系统,包括优化气囊部署和安全带控制。”
graph LR
FUSE[融合感知输出] --> POS[乘员位置<br/>距方向盘距离]
FUSE --> SIZE[乘员体型<br/>成人/儿童/婴儿]
FUSE --> POSTURE[乘员姿态<br/>正常/OOP/前倾]
FUSE --> BELT[安全带状态<br/>佩戴/误用]
POS --> AIRBAG[气囊策略<br/>展开力度/时机]
SIZE --> AIRBAG
POSTURE --> AIRBAG
BELT --> SEATBELT[安全带策略<br/>预紧力/限力器]
AIRBAG --> SAFE[碰撞保护优化]
SEATBELT --> SAFE
这与ZF LIFETEC的思路一致(见9月22日#23博客),但Murata+Smart Eye提供的是感知层而非约束执行层——两者互补。
软件定义车辆架构
Murata新闻稿的关键洞察:
“同一硬件平台也提供了通过软件添加新功能的基础,如手势识别和生命体征监测。”
这意味着:
- 硬件不变,软件升级——SDV理念在座舱感知中落地
- 初始部署DMS+CPD,后续通过OTA增加手势/生命体征
- 降低初始BOM + 后续软件增值——商业模式转变
InCabin Europe 2026 展望
| 展商 | 技术 | 关注点 |
|---|---|---|
| Murata+Smart Eye | 摄像头-雷达融合 | 首次演示 |
| ZF LIFETEC | 自适应约束 | 量产级 |
| Fraunhofer | 3D骨骼 | 隐私优先 |
| Calterah | UWB CPD | 多站雷达 |
| TI | 60GHz雷达 | AWR2943 |
IMS开发启示
1. 传感器融合接口设计
1 | # 融合数据结构示例 |
2. 融合策略选择
| 融合层 | 方法 | 适用场景 |
|---|---|---|
| 数据级 | 原始信号融合 | 雷达相位+摄像头像素→联合特征 |
| 特征级 | 特征向量拼接 | 摄像头Embedding+雷达特征→MLP |
| 决策级 | 各自输出概率融合 | 摄像头概率+雷达概率→贝叶斯 |
| 推荐 | 特征级 | 平衡精度和延迟 |
3. 部署优先级
| 功能 | 传感器 | 优先级 | 延迟要求 |
|---|---|---|---|
| DMS疲劳/分心 | 摄像头主+雷达辅 | P0 | <100ms |
| CPD | 雷达主+摄像头辅 | P0 | <1s |
| OMS乘员分类 | 摄像头+雷达 | P1 | <500ms |
| OOP姿态 | 摄像头主+雷达深度 | P1 | <100ms |
| 自适应约束 | 融合输出 | P1 | 碰撞前 |
| 手势识别 | 摄像头主+雷达辅 | P2 | <50ms |
| 生命体征 | 雷达主 | P2 | <1s |
局限性
- 遮挡极限:雷达可穿透毯子但金属/厚重物体仍有限制
- 多乘员干扰:座舱内多人雷达反射交叉干扰
- 摄像头隐私:尽管有雷达补充,摄像头仍记录视频
- 成本实际:BOM节省需产量摊薄研发成本
- 软件授权:Smart Eye AI软件授权费可能随功能增加
结论
Murata+Smart Eye合作标志着座舱感知从”传感器堆叠”到”融合理解”的转折:
- 摄像头+雷达互补解决了单传感器致命局限
- **BOM节省~40%**使下沉到更多车型成为可能
- 软件定义让硬件一次部署、功能持续进化
- 与自适应约束联动将感知价值延伸到被动安全
对IMS的启示:传感器融合不是”多加一个传感器”,而是”让每个传感器更聪明”。
参考来源:
- Murata+Smart Eye联合新闻稿 (2026.09.15)
- InCabin Europe 2026 (incabin.com/europe)
- Smart Eye AI Interior Sensing (smarteye.se)
- Murata 60GHz雷达产品线 (murata.com)
本博客所有文章除特别声明外,均采用 CC BY-NC-SA 4.0 许可协议。转载请注明来源 Dapalm | IMS技术前沿!