STMicro VD56GA DeepNIR:1.1MP车规级红外图像传感器如何降低DMS成本门槛
STMicro VD56GA DeepNIR:1.1MP车规级红外图像传感器如何降低DMS成本门槛
硬件深度分析 — 当红外传感器从$30+降到$10以下,DMS从豪华车标配走向全系标配
产品概述
2026年9月,STMicroelectronics发布 ST SafeSense VD56GA — 1.1MP车规级红外图像传感器,专为DMS/OMS设计。
| 参数 | VD56GA | 典型竞品 | 优势 |
|---|---|---|---|
| 分辨率 | 1.1MP (1280×800) | OV2311: 2MP | DMS够用 |
| 像素架构 | BSI DeepNIR | FSI/BSI | NIR灵敏度↑ |
| 调制传递函数(MTF) | +35% | — | 清晰度↑ |
| 信噪比(波长940nm) | +21% | — | 暗光↑ |
| 全局快门 | ✅ | 部分卷帘 | 无运动模糊 |
| 封装 | aBGA + CPLCC | — | 双封装选项 |
| 车规 | AEC-Q100 Grade 2 | — | 车规认证 |
| 成本 | ~$8-12(预估) | OV2311: ~$15-25 | ↓40-50% |
DeepNIR BSI像素技术
graph TB
subgraph "传统FSI像素"
M1[金属走线层<br/>在感光区上方]
M1 --> B1[光线被金属遮挡<br/>NIR量子效率低]
end
subgraph "BSI像素"
S1[硅基底减薄<br/>光从背面入射]
S1 --> B2[无金属遮挡<br/>NIR量子效率↑]
end
subgraph "DeepNIR (ST专利)"
D1[BSI + 优化硅厚度<br/>+抗反射涂层<br/>+深耗尽层]
D1 --> B3[940nm QE >40%<br/>vs FSI ~15-20%]
end
B1 --> COMP[对比]
B2 --> COMP
B3 --> COMP
COMP --> RESULT["DeepNIR: 940nm信噪比+21%<br/>MTF+35%"]
为什么940nm?
| NIR波段 | 人眼不可见性 | 补光LED成本 | 传感器QE | 推荐 |
|---|---|---|---|---|
| 850nm | ⚠️ 微弱红光 | $ | 较高 | 老方案 |
| 940nm | ✅ 完全不可见 | $$ | DeepNIR↑ | 推荐 |
| 1550nm | ✅ | $$$$ | 需InGaAs(极贵) | 特殊 |
DeepNIR解决了940nm QE低的痛点:传统FSI在940nm QE仅15-20%,DeepNIR提升至40%+,接近可见光水平。
DMS传感器对比
1 | """ |
DMS系统成本影响
传统方案 vs VD56GA方案
| 组件 | 传统方案 | VD56GA方案 | 节省 |
|---|---|---|---|
| IR传感器 | OV2311 $20 | VD56GA $10 | $10 |
| IR补光LED | SFH 4740 ×4 ($4) | SFH 4740 ×2 ($2) | $2 (QE↑→补光↓) |
| 图像处理ISP | 外置ISP $5 | 集成ISP $0 | $5 |
| 镜头组 | 固定焦距 $3 | 固定焦距 $3 | $0 |
| FPC+结构件 | $3 | $3 | $0 |
| 总计 | $35 | $18 | ~49% |
部署架构
graph TB
subgraph "VD56GA传感器"
SENSOR[1.1MP BSI DeepNIR<br/>全局快门<br/>60fps]
ISP[集成ISP<br/>降噪/锐化/AE]
SENSOR --> ISP
end
subgraph "补光"
LED[940nm IR LED<br/>2× SFH 4740<br/>120mW/sr]
end
subgraph "处理"
ISP --> SOC[SoC<br/>QCS8255/Orin-Nano]
SOC --> DMS[DMS算法<br/>MediaPipe/EAR/PERCLOS]
SOC --> GAZE[视线估计<br/>DistillGaze 256K]
SOC --> OMS[OMS算法<br/>YOLO27n]
end
LED --> ENV[照射驾驶员<br/>940nm不可见]
ENV --> SENSOR
Euro NCAP 2026适配
| Euro NCAP要求 | VD56GA能力 | 适配度 |
|---|---|---|
| ≥25fps DMS | 60fps | ✅ 超标 |
| 驾驶员面部可见 | 1.1MP + DeepNIR | ✅ 充分 |
| 夜间/隧道 | 940nm IR + QE>40% | ✅ IR补光 |
| 戴眼镜/墨镜 | 全局快门+60fps | ✅ 帧率足够 |
| 头部转动跟踪 | 1280×800 | ✅ 够用 |
| OOP检测 | 1.1MP姿态 | ⚠️ OMS建议2MP+ |
与DistillGaze的协同
VD56GA + DistillGaze形成低成本+高精度DMS:
| 组件 | 参数 | 成本 |
|---|---|---|
| VD56GA传感器 | 1.1MP, DeepNIR, 60fps | ~$10 |
| 940nm LED ×2 | 120mW/sr | ~$2 |
| DistillGaze模型 | 256K, CPU运行 | ~$0(软件) |
| PERCLOS检测 | EAR阈值 | ~$0(软件) |
| 总DMS成本 | — | ~$12 |
对比传统方案($35+),节省~65%。
IMS开发启示
1. 传感器选型决策树
1 | def select_dms_sensor(budget, resolution_need, night_vision): |
2. 从豪华到下沉
| 车型级别 | 传感器 | 算法 | 总成本 |
|---|---|---|---|
| 豪华(DMS+OMS) | OV2311 ×2 | YOLO27+DistillGaze | ~$50 |
| 主力(DMS+简单OMS) | VD56GA ×1 + OV2311 ×1 | YOLO27n+DistillGaze | ~$30 |
| 入门(仅DMS) | VD56GA ×1 | DistillGaze+EAR | ~$12 |
3. 补光设计优化
DeepNIR QE>40%意味着补光LED可减半:
1 | # 补光计算 |
4. 全局快门的重要性
1 | """ |
局限性
- 1.1MP分辨率:OMS检测后排乘员时分辨率不足
- DeepNIR专有:ST专利技术,第二供应商风险
- Grade 2:-40°C to +85°C,极寒环境需验证
- 预估成本:实际量产价需确认
- 无IR-cut滤镜信息:需确认是否内置NIR带通
结论
ST VD56GA DeepNIR解决了DMS下沉的硬件瓶颈:
- 940nm QE >40%:补光减半,成本和功耗下降
- ~$10成本:比OV2311节省~50%
- 全局快门60fps:DMS运动场景可靠
- 集成ISP:简化系统设计
与DistillGaze(256K, 1.44°)组合,DMS可做到**$12整套、CPU运行、无需标注**——这对IMS全系标配意义重大。
参考来源:
- STMicroelectronics VD56GA产品发布 (2026.09)
- eeDesignIt: STMicroelectronics Targets Lower-Cost DMS (2026.09)
- Edge AI and Vision Alliance: ST SafeSense (2026.09)
- Institution of Electronics: DeepNIR BSI Architecture (2026.09)
- AEC-Q100 Grade 2 Automotive Qualification
本博客所有文章除特别声明外,均采用 CC BY-NC-SA 4.0 许可协议。转载请注明来源 Dapalm | IMS技术前沿!