前言
2026年2月，Anyverse发布分析报告，将Volvo双摄像头DMS方案评为Euro NCAP 2026标杆。该方案通过IR+RGB双摄像头、AI驱动软件和ADAS集成，展示了下一代DMS的技术方向。
一、Volvo DMS方案概述
1.1 系统构成
| 组件 |
规格 |
作用 |
| IR摄像头 |
近红外专用 |
全天候眼动追踪 |
| RGB摄像头 |
可见光 |
补充特征、用户体验 |
| IR LED照明 |
850nm |
夜间/隧道照明 |
| 处理单元 |
车载NPU |
边缘推理 |
1.2 核心能力
| 能力 |
描述 |
| 疲劳检测 |
PERCLOS + 时序分析 |
| 分心检测 |
凝视方向 + 头部姿态 |
| 身份验证 |
面部识别（需同意） |
| ADAS联动 |
与驾驶辅助系统协同 |
1.3 Euro NCAP评分
| 评估项 |
得分 |
说明 |
| 长时分心检测 |
高分 |
VATS协议通过 |
| 短时多分心 |
高分 |
VATS协议通过 |
| 电话使用检测 |
高分 |
特定场景检测 |
| ADAS集成 |
优秀 |
系统协同度高 |
二、双摄像头架构
2.1 架构图
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
| ┌─────────────────────────────────────────────────────────┐
│ Volvo 双摄像头DMS架构 │
├─────────────────────────────────────────────────────────┤
│ │
│ ┌─────────────────┐ ┌─────────────────┐ │
│ │ IR摄像头 │ │ RGB摄像头 │ │
│ │ (主传感器) │ │ (辅助传感器) │ │
│ │ │ │ │ │
│ │ • 850nm波段 │ │ • 可见光波段 │ │
│ │ • 暗瞳孔检测 │ │ • 面部特征 │ │
│ │ • 凝视估计 │ │ • 环境感知 │ │
│ └────────┬────────┘ └────────┬────────┘ │
│ │ │ │
│ └──────────┬───────────┘ │
│ ↓ │
│ ┌─────────────────────┐ │
│ │ IR LED照明阵列 │ │
│ │ • 850nm主照明 │ │
│ │ • 低眩光设计 │ │
│ └──────────┬──────────┘ │
│ ↓ │
│ ┌─────────────────────┐ │
│ │ 传感器融合模块 │ │
│ │ • 数据对齐 │ │
│ │ • 特征融合 │ │
│ │ • 置信度评估 │ │
│ └──────────┬──────────┘ │
│ ↓ │
│ ┌─────────────────────────────────────────────────┐ │
│ │ AI驱动软件栈 │ │
│ │ ┌─────────┐ ┌─────────┐ ┌─────────┐ │ │
│ │ │疲劳检测 │ │分心检测 │ │身份识别 │ │ │
│ │ └─────────┘ └─────────┘ └─────────┘ │ │
│ └─────────────────────────────────────────────────┘ │
│ │ │
│ ↓ │
│ ┌─────────────────────┐ │
│ │ ADAS系统集成 │ │
│ │ • 驾驶员状态反馈 │ │
│ │ • 干预决策支持 │ │
│ └─────────────────────┘ │
│ │
└─────────────────────────────────────────────────────────┘
|
2.2 双摄像头优势
| 优势 |
描述 |
| 鲁棒性提升 |
单摄像头失效时另一路补充 |
| 场景适应 |
IR应对暗光，RGB应对强光 |
| 特征互补 |
IR眼动 + RGB面部表情 |
| 冗余设计 |
提高系统可靠性 |
2.3 工作模式
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
| 双摄像头协同工作模式：
场景检测
│
├─── 正常光照
│ │
│ ├── IR摄像头：主力检测
│ └── RGB摄像头：辅助验证
│
├─── 强光环境
│ │
│ ├── IR摄像头：受干扰
│ └── RGB摄像头：主力检测
│
├─── 暗光环境
│ │
│ ├── IR摄像头 + IR LED：主力检测
│ └── RGB摄像头：禁用
│
└─── 墨镜遮挡
│
├── IR摄像头：尝试检测
└── RGB摄像头：辅助判断墨镜类型
|
三、AI驱动软件栈
3.1 算法模块
| 模块 |
算法 |
输出 |
| 人脸检测 |
CNN |
人脸边界框 |
| 关键点检测 |
回归网络 |
68点特征 |
| 眼动追踪 |
几何模型 |
凝视向量 |
| 疲劳评估 |
时序模型 |
KSS等级 |
| 分心检测 |
分类网络 |
分心类型 |
| 身份识别 |
特征嵌入 |
身份向量 |
3.2 软件架构
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
| Volvo DMS软件栈：
┌─────────────────────────────────────────────────┐
│ 应用层 │
│ 疲劳告警 | 分心告警 | 身份识别 | ADAS接口 │
├─────────────────────────────────────────────────┤
│ 决策层 │
│ 状态融合 | 风险评估 | 干预决策 │
├─────────────────────────────────────────────────┤
│ 算法层 │
│ 人脸检测 | 关键点 | 眼动 | 疲劳 | 分心 │
├─────────────────────────────────────────────────┤
│ 中间件层 │
│ 传感器管理 | 数据同步 | 通信中间件 │
├─────────────────────────────────────────────────┤
│ 驱动层 │
│ Camera Driver | ISP | NPU Runtime │
└─────────────────────────────────────────────────┘
|
3.3 性能指标
| 指标 |
数值 |
| 检测延迟 |
<30ms |
| 疲劳检测准确率 |
>95% |
| 分心检测准确率 |
>92% |
| 身份识别准确率 |
>98% |
| 误报率 |
<5% |
四、ADAS系统集成
4.1 集成架构
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
| DMS-ADAS协同：
┌─────────────────────────────────────────────────┐
│ 驾驶员状态 → ADAS决策 │
├─────────────────────────────────────────────────┤
│ │
│ DMS输出 │
│ ├── 疲劳等级 │
│ ├── 分心状态 │
│ └── 凝视方向 │
│ │ │
│ ↓ │
│ ┌─────────────────────────────────────────┐ │
│ │ ADAS决策模块 │ │
│ │ │ │
│ │ IF 疲劳等级 > 阈值 │ │
│ │ THEN 降低ADAS响应灵敏度 │ │
│ │ 增加警报提前量 │ │
│ │ 建议休息 │ │
│ │ │ │
│ │ IF 分心检测 = TRUE │ │
│ │ THEN 紧急制动准备 │ │
│ │ 车道保持增强 │ │
│ │ 声音警报 │ │
│ │ │ │
│ │ IF 凝视方向 = 偏离前方 │ │
│ │ THEN 判断是否合理 │ │
│ │ (如查看后视镜则正常) │ │
│ │ │ │
│ └─────────────────────────────────────────┘ │
│ │ │
│ ↓ │
│ ADAS执行 │
│ ├── ACC调整 │
│ ├── LKA增强 │
│ ├── AEB准备 │
│ └── 警报输出 │
│ │
└─────────────────────────────────────────────────┘
|
4.2 协同场景
| 场景 |
DMS检测 |
ADAS响应 |
| 疲劳驾驶 |
PERCLOS上升 |
ACC降低灵敏度，提前预警 |
| 分心看手机 |
凝视下方 |
车道保持增强，准备接管 |
| 疲劳+弯道 |
疲劳+无反应 |
提前减速，增强转向辅助 |
| 突发分心 |
瞬间分心 |
AEB准备，缩短反应时间 |
五、与竞品对比
5.1 硬件对比
| 维度 |
Volvo |
Tesla |
Mercedes |
BMW |
| 摄像头数量 |
2 (IR+RGB) |
1 (驾驶室) |
1-2 |
1 |
| IR照明 |
专用阵列 |
无专用 |
有 |
有 |
| 处理单元 |
自研+Qualcomm |
自研FSD |
Mobileye |
Qualcomm |
| Euro NCAP评分 |
标杆 |
一般 |
优秀 |
优秀 |
5.2 功能对比
| 功能 |
Volvo |
Tesla |
Mercedes |
BMW |
| 疲劳检测 |
✅ 优秀 |
⚠️ 基础 |
✅ 优秀 |
✅ 优秀 |
| 分心检测 |
✅ 优秀 |
⚠️ 有限 |
✅ 优秀 |
✅ 优秀 |
| 身份识别 |
✅ 可选 |
❌ 无 |
✅ 有 |
✅ 有 |
| ADAS联动 |
✅ 深度 |
⚠️ 有限 |
✅ 深度 |
✅ 深度 |
| 隐私保护 |
✅ 边缘处理 |
⚠️ 云端依赖 |
✅ 边缘 |
✅ 边缘 |
六、Euro NCAP合规要点
6.1 合规评估
| 要求 |
Volvo实现 |
| VATS协议 |
通过长时分心+短时多分心测试 |
| 电话使用检测 |
支持手持电话场景 |
| DDAW要求 |
疲劳检测达到GSR II要求 |
| ADAS评分 |
DMS辅助ADAS功能获得加分 |
6.2 超越标准
| 维度 |
Euro NCAP要求 |
Volvo实现 |
| 检测场景 |
协议场景 |
扩展实路场景 |
| 身份识别 |
不要求 |
可选提供 |
| 隐私保护 |
不明确 |
边缘处理优先 |
| ADAS联动 |
基础评估 |
深度协同 |
七、IMS借鉴要点
7.1 硬件选型
| 组件 |
Volvo选择 |
IMS建议 |
| IR摄像头 |
专用 |
同等规格 |
| RGB摄像头 |
辅助 |
可选（成本敏感时可省略） |
| IR LED |
850nm阵列 |
850nm + 940nm双波长 |
| 处理单元 |
Qualcomm |
Qualcomm 8295 / TI TDA4VM |
7.2 软件架构
| 模块 |
Volvo实现 |
IMS现状 |
差距 |
| 人脸检测 |
CNN |
CNN |
无 |
| 眼动追踪 |
几何模型 |
几何模型 |
无 |
| 疲劳评估 |
时序模型 |
PERCLOS |
需升级时序建模 |
| 分心检测 |
分类网络 |
规则引擎 |
需升级 |
| ADAS联动 |
深度协同 |
基础 |
需加强 |
7.3 开发路线
| 阶段 |
任务 |
时间 |
| Phase 1 |
单摄像头DMS基础版 |
已完成 |
| Phase 2 |
Euro NCAP 2026合规 |
2026 Q2 |
| Phase 3 |
双摄像头升级 |
2026 Q4 |
| Phase 4 |
ADAS深度集成 |
2027 Q2 |
总结
Volvo双摄像头DMS方案的核心亮点：
- 硬件冗余：IR+RGB双摄像头提供鲁棒性
- AI驱动：深度学习算法贯穿全栈
- ADAS协同：DMS深度影响ADAS决策
- 隐私优先：边缘处理，原始图像不存储
行动建议：IMS团队应评估双摄像头方案的ROI，优先实现ADAS深度集成，为Euro NCAP 2029做准备。
参考来源：
发布日期： 2026-04-07