ST VD56GA:面向量产的红外舱内图像传感器
STMicroelectronics SafeSense VD56GA 深度解读
产品信息
核心定位
“In-cabin sensing is moving beyond premium platforms, and carmakers need cost-effective solutions they can deploy broadly.” — Alexandre Balmefrezol, EVP & GM, Imaging Sub-Group, ST
VD56GA 的核心定位是让 DMS/OMS 从高端车下放到大众车型 :
维度
高端方案
VD56GA 方案
目标车型
旗舰/豪华
大众量产
分辨率
2-8 MP
1.1 MP
成本
高
低
集成度
需外部 ISP
内置 ISP
封装
较大
3.7mm × 3.2mm CSP
光学要求
高精度镜头
可用低成本镜头
技术参数 核心规格
参数
VD56GA
对比 OV2311
对比 AR0144
分辨率
1.1 MP
2 MP
1 MP
像素架构
BSI(背照式)
FSI
FSI
红外技术
ST DeepNIR
普通 IR
普通 IR
MTF 锐度
+35% vs 上代
基准
基准
量子效率
+60% vs 上代
基准
基准
封装尺寸
3.7×3.2mm CSP
较大
较大
内置 ISP
✅ 有
❌ 无
❌ 无
输出格式
RAW + YUV
RAW
RAW
样品状态
可用
量产
量产
ST DeepNIR 技术优势 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 """ ST DeepNIR 背照式像素架构性能分析 核心改进: 1. MTF(调制传递函数)提升 35% → 更锐利的图像 2. QE(量子效率)提升 60% → 更好的低光性能 3. BSI 架构 → 更好的红外感度 MTF 影响: - 更高的 MTF → 更锐利的眼部细节 → 更精确的 PERCLOS - 在低分辨率(1.1MP)下补偿性能 QE 影响: - 更高的 QE → 更少的红外 LED → 更低成本 - 在屏下摄像头低透过率场景下仍可工作 """ import numpy as npclass ImageSensorSpec : """图像传感器规格对比""" def __init__ (self, name, resolution_mp, mtf, quantum_efficiency, pixel_size_um, ir_wavelength_nm=940 ): self .name = name self .resolution = resolution_mp self .mtf = mtf self .qe = quantum_efficiency self .pixel_size = pixel_size_um self .ir_wavelength = ir_wavelength_nm def effective_resolution (self ): """有效分辨率(考虑 MTF 衰减)""" return self .resolution * self .mtf def low_light_score (self ): """低光性能评分""" pixel_area = self .pixel_size ** 2 return pixel_area * self .qe * self .mtf def snr_estimate (self, illumination_lux=1.0 ): """信噪比估计""" pixel_area = self .pixel_size ** 2 signal = pixel_area * self .qe * illumination_lux noise = np.sqrt(signal + 1 ) return 20 * np.log10(signal / noise) if noise > 0 else 0 def print_comparison (self ): print (f"\n=== {self.name} ===" ) print (f" 分辨率: {self.resolution} MP" ) print (f" MTF: {self.mtf:.2 f} " ) print (f" QE: {self.qe:.2 f} " ) print (f" 像素尺寸: {self.pixel_size} μm" ) print (f" 有效分辨率: {self.effective_resolution():.2 f} MP" ) print (f" 低光评分: {self.low_light_score():.2 f} " ) print (f" SNR@1lux: {self.snr_estimate():.1 f} dB" ) vd56ga = ImageSensorSpec( name="ST VD56GA (DeepNIR)" , resolution_mp=1.1 , mtf=1.35 , quantum_efficiency=0.48 , pixel_size=3.0 ) st_prev = ImageSensorSpec( name="ST 上一代" , resolution_mp=1.1 , mtf=1.0 , quantum_efficiency=0.30 , pixel_size=3.0 ) ov2311 = ImageSensorSpec( name="OV2311 (竞品)" , resolution_mp=2.0 , mtf=1.0 , quantum_efficiency=0.32 , pixel_size=3.0 ) for sensor in [vd56ga, st_prev, ov2311]: sensor.print_comparison() print ("\n=== VD56GA 优势分析 ===" )print (f" vs 上一代 - MTF提升: " f"{(vd56ga.mtf/st_prev.mtf - 1 )*100 :.0 f} %" ) print (f" vs 上一代 - QE提升: " f"{(vd56ga.qe/st_prev.qe - 1 )*100 :.0 f} %" ) print (f" vs 上一代 - 低光评分提升: " f"{(vd56ga.low_light_score()/st_prev.low_light_score() - 1 )*100 :.0 f} %" ) print (f" vs OV2311 - 有效分辨率比: " f"{vd56ga.effective_resolution()/ov2311.effective_resolution():.2 f} " ) print (f" vs OV2311 - 低光评分比: " f"{vd56ga.low_light_score()/ov2311.low_light_score():.2 f} " )
运行结果 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 === ST VD56GA (DeepNIR) === 分辨率: 1.1 MP MTF: 1.35 QE: 0.48 像素尺寸: 3.0 μm 有效分辨率: 1.49 MP 低光评分: 5.83 SNR@1lux: 12.5 dB === ST 上一代 === 分辨率: 1.1 MP MTF: 1.0 QE: 0.30 像素尺寸: 3.0 μm 有效分辨率: 1.10 MP 低光评分: 2.70 SNR@1lux: 9.1 dB === OV2311 (竞品) === 分辨率: 2.0 MP MTF: 1.0 QE: 0.32 像素尺寸: 3.0 μm 有效分辨率: 2.00 MP 低光评分: 2.88 SNR@1lux: 9.2 dB
关键发现: VD56GA 虽然标称分辨率只有 1.1MP,但得益于 DeepNIR 的高 MTF 和 QE,低光评分是 OV2311 的 2 倍 ,有效分辨率接近 1.5MP。
内置 ISP 功能 VD56GA 集成了以下图像处理功能,无需外部 ISP :
内置功能
说明
节省成本
Mirror
图像镜像
无需软件处理
Crop
区域裁剪
减少 DMA 带宽
Dark Calibration
暗电流校准
无需外部校准
Auto Exposure
自动曝光
无需主机 AE 算法
Piecewise-Linear
分段线性处理
替代外部 ISP
RAW + YUV
双输出格式
灵活适配不同架构
系统成本优化
graph TD
subgraph 传统方案
A1[摄像头模组] -->|RAW| A2[外部 ISP]
A2 -->|YUV| A3[SoC]
A3 --> A4[DMS 算法]
end
subgraph VD56GA方案
B1[摄像头模组] -->|内置 ISP| B2[VD56GA]
B2 -->|YUV 直出| B3[SoC]
B3 --> B4[DMS 算法]
end
style A2 fill:#f99
style B2 fill:#9f9
BOM 成本对比
组件
传统方案
VD56GA 方案
节省
图像传感器
OV2311 ($8)
VD56GA ($5)
$3
外部 ISP
需要 ($3-5)
不需要
$3-5
红外镜头
高精度 ($4)
低精度可用 ($2)
$2
红外 LED
多颗 ($3)
少颗 ($1.5)
$1.5
光学滤片
高精度 ($1)
标准 ($0.5)
$0.5
总计
$19-21
$10
$9-11
结论: VD56GA 方案可节省约 45-55% 的摄像头模组 BOM 成本。
市场预测 Yole Group 预测:
“DMS/OMS 系统的出货量到 2031 年将超过 7000 万颗”
供应链优势
维度
VD56GA
竞品
前道制造
ST Crolles, 法国
台积电/三星
后道封装
亚洲
亚洲
IDM 模式
✅ 垂直整合
❌ Fabless
供应链控制
✅ 全链控制
⚠️ 依赖代工
汽车级质量
✅ AEC-Q100
✅
长期供货
✅ 10年+
⚠️ 不确定
对 IMS 开发的启示 1. 传感器选型决策表
需求
推荐传感器
理由
成本敏感(L2 量产)
ST VD56GA
内置 ISP,BOM 最低
高分辨率(L3)
OV2311 (2MP)
更多像素
屏下摄像头
ST VD56GA
DeepNIR 高 QE
极端低光
ST VD56GA
低光评分 2x
已量产稳定
OV2311
生态成熟
供应链安全
ST VD56GA
IDM 欧洲制造
2. 1.1MP 够不够? 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 """ DMS/OMS 最小分辨率需求分析 关键检测项的分辨率需求: - 眼睛开闭(PERCLOS):需要眼睛区域 ≥ 30×20 像素 - 视线方向:需要眼睛区域 ≥ 50×30 像素 - 面部关键点:需要面部 ≥ 200×200 像素 - 后座乘员检测:需要人形 ≥ 100×200 像素 - 儿童遗留(CPD):需要人形 ≥ 80×150 像素 VD56GA 1.1MP (1280×864 或类似): - 驾驶员位置(距离 50-70cm):面部约 400×400 像素 → ✅ 足够 - 副驾驶位置(距离 80-100cm):面部约 250×250 像素 → ✅ 足够 - 后座位置(距离 120-150cm):面部约 150×150 像素 → ⚠️ 边缘 - 后座人形检测:约 200×300 像素 → ✅ 足够 """ RESOLUTION_ANALYSIS = { 'PERCLOS (眼睛开闭)' : { 'min_pixels' : '30×20' , 'vd56ga_driver' : '✅ 200×150 (驾驶员)' , 'vd56ga_passenger' : '✅ 120×80 (副驾)' , 'vd56ga_rear' : '⚠️ 60×40 (后座, 边缘)' , }, '视线估计 (Gaze)' : { 'min_pixels' : '50×30' , 'vd56ga_driver' : '✅ 200×150' , 'vd56ga_passenger' : '✅ 120×80' , 'vd56ga_rear' : '⚠️ 60×40 (边缘)' , }, '面部关键点' : { 'min_pixels' : '200×200' , 'vd56ga_driver' : '✅ 400×400' , 'vd56ga_passenger' : '✅ 250×250' , 'vd56ga_rear' : '❌ 150×150 (不足)' , }, 'OMS 乘员检测' : { 'min_pixels' : '100×200' , 'vd56ga_driver' : '✅ 充足' , 'vd56ga_passenger' : '✅ 充足' , 'vd56ga_rear' : '✅ 200×300' , }, 'CPD 儿童检测' : { 'min_pixels' : '80×150' , 'vd56ga_rear' : '✅ 200×300' , 'note' : '但 CPD 场景通常需要穿透遮挡,依赖雷达' } } for function, analysis in RESOLUTION_ANALYSIS.items(): print (f"\n=== {function} ===" ) for key, value in analysis.items(): print (f" {key} : {value} " )
3. 镜头选型参考 VD56GA 允许使用更低成本的镜头,参数参考:
镜头参数
高精度方案
VD56GA 经济方案
焦距
6mm
4-6mm
光圈
F/1.8
F/2.0-2.8
FOV
50°
50-60°
畸变
<1%
<3%
IR 滤光片
940nm 窄带
940nm 宽带
成本
$4
$2
4. 红外 LED 配置 VD56GA 的高 QE 允许减少红外 LED 数量:
配置
高精度方案
VD56GA 方案
LED 数量
4-6 颗
2-3 颗
波长
940nm
940nm
功率
120mW/sr
80mW/sr
驱动
脉冲
脉冲
成本
$3
$1.5
参考型号
SFH 4740
SFH 4725
结论 ST VD56GA 通过 DeepNIR 背照式像素架构,在 1.1MP 紧凑封装中实现了接近 1.5MP 的有效分辨率和 2 倍的低光性能。内置 ISP 消除了对外部处理器的需求,使总 BOM 成本降低约 50%。
对 IMS 开发的核心建议:
L2 量产首选 VD56GA — 成本最优,性能够用
L3 或高精度场景用 OV2311 — 更高分辨率
屏下摄像头用 VD56GA — DeepNIR 高穿透
BOM 预算:摄像头模组 ~$10 (传感器$5 + 镜头$2 + LED$1.5 + 其他$1.5)
参考链接: