ST VD56GA:面向量产的 1.1MP 红外座舱图像传感器

STMicroelectronics SafeSense 新品深度解读

产品信息

核心参数

参数 VD56GA 规格
分辨率 1.1 MP
封装 3.7mm × 3.2mm CSP
像素架构 ST DeepNIR(背照式)
红外灵敏度 较上代提升 ~60% QE
MTF 锐度 较上代提升 35%
输出格式 RAW + YUV
内置处理 镜像/裁剪/暗校准/AE/分段线性
制造 前端:Crolles, France;封装:亚洲
出货里程碑 10M+ SafeSense 传感器已出货

核心技术:ST DeepNIR

背照式像素架构

DeepNIR vs 传统像素

指标 传统 BSI ST DeepNIR 提升
量子效率 (QE) 基准 +60% 红外灵敏度大幅提升
MTF 基准 +35% 图像锐度更高
分辨率 1.1MP 1.1MP 相同(紧凑优势)
尺寸 较大 3.7×3.2mm 更小

为什么 1.1MP 够用?

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
"""
DMS/OMS 图像传感器分辨率需求分析

关键算法所需分辨率:
1. 人脸关键点检测:128×128 足够
2. 眼睑开度估计:64×64 ROI 足够
3. 视线估计:需要高质量眼部区域
4. 情绪识别:128×128 足够
5. 多乘员检测:需要更大视场角

1.1MP = ~1260×896, 远超算法需求
"""

# DMS 各算法分辨率需求
ALGORITHM_RESOLUTION = {
'人脸检测': {'min': (64, 64), 'recommended': (128, 128)},
'眼睑开度': {'min': (32, 32), 'recommended': (64, 64)},
'视线估计': {'min': (64, 64), 'recommended': (128, 128)},
'头部姿态': {'min': (64, 64), 'recommended': (128, 128)},
'情绪识别': {'min': (128, 128), 'recommended': (256, 256)},
'乘员检测': {'min': (256, 256), 'recommended': (640, 480)},
'多乘员': {'min': (640, 480), 'recommended': (1280, 720)},
}

print("=== DMS/OMS 算法分辨率需求 ===")
for algo, res in ALGORITHM_RESOLUTION.items():
rec = res['recommended']
total = rec[0] * rec[1]
print(f" {algo}: 推荐 {rec[0]}×{rec[1]} = {total:,} pixels")

print(f"\n VD56GA 1.1MP = ~1,100,000 pixels")
print(f" → 远超所有算法推荐分辨率")
print(f" → 紧凑封装适合空间受限的座舱安装")

内置图像处理

减少外部处理需求

VD56GA 集成了多种图像处理功能,无需外部 ISP:

功能 说明 对 DMS 的意义
镜像 (Mirror) 水平/垂直翻转 适配不同安装方向
裁剪 (Crop) 感兴趣区域输出 减少 CPU 负载
暗校准 (Dark Cal) 自动暗电流校准 减少固定模式噪声
自动曝光 (AE) 自适应红外光照 适应不同光照条件
分段线性 (PWL) 非线性色调映射 增强暗部细节

RAW vs YUV 双模式

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
"""
VD56GA 输出模式选择策略

RAW 模式:
- 输出原始 Bayer 数据
- 需要外部 ISP 处理
- 优势:最大灵活性,自定义处理

YUV 模式:
- 输出已处理图像
- 无需外部 ISP
- 优势:降低系统成本和复杂度
"""

OUTPUT_MODE_STRATEGY = {
'RAW': {
'适合场景': '高端 DMS(需要自定义 ISP)',
'优势': '最大图像质量灵活性',
'劣势': '需要外部 ISP 芯片',
'目标客户': 'Tier-1 自研算法',
},
'YUV': {
'适合场景': '中端 DMS(直接送入 SoC)',
'优势': '零外部处理,最低 BOM 成本',
'劣势': '处理参数固定',
'目标客户': '成本敏感型 OEM',
},
'混合策略': {
'适合场景': '开发阶段 RAW → 量产 YUV',
'优势': '开发灵活 + 量产低成本',
'劣势': '需要双模式支持',
'目标客户': '渐进式开发团队',
}
}

for mode, info in OUTPUT_MODE_STRATEGY.items():
print(f"\n=== {mode} 模式 ===")
for key, value in info.items():
print(f" {key}: {value}")

市场定位

DMS/OMS 图像传感器竞争格局

厂商 产品 分辨率 特点 量产状态
ST VD56GA (SafeSense) 1.1MP DeepNIR, 内置ISP, 紧凑 ✅ 样品
OmniVision OV2311 2MP RGB-IR, 全局快门 ✅ 量产
OmniVision OV9285 1MP 全局快门, 低功耗 ✅ 量产
Sony IMX390 2.4MP 高灵敏度 HDR ✅ 量产
On Semi AR0144 1MP 低功耗, 紧凑 ✅ 量产

VD56GA 差异化优势

成本优化路径

VD56GA 的设计目标是降低整个摄像头模组成本:

优化项 节省 方案
光学器件 ↓ 光学成本 高红外灵敏度 → 更低要求的光学
红外补光 ↓ LED 成本 60% 更高 QE → 更低功率补光
滤光片 ↓ 滤光成本 内置处理 → 更低要求滤光
外部 ISP ↓ 处理成本 内置 ISP → 无需外部处理芯片
封装 ↓ PCB 成本 3.7×3.2mm → 更小 PCB

对 IMS 开发的启示

1. 传感器选型决策

2. “Under Display” 摄像头支持

VD56GA 的高红外灵敏度使其适合屏下安装:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
"""
屏下 DMS 摄像头安装方案分析

VD56GA DeepNIR 优势:
1. 60% 更高 QE → 屏幕衰减后仍有足够信号
2. 内置 AE → 自动适应屏下低光环境
3. 紧凑封装 → 安装在方向盘后方/中控屏下方
4. 内置处理 → 减少 SoC 负载

对比传统方案:
- 传统 RGB-IR 摄像头:屏幕衰减后信号不足
- VD56GA DeepNIR:QE 提升补偿屏幕衰减
"""

# 屏下安装的光学衰减
SCREEN_ATTENUATION = {
'OLED 透过率 (940nm)': 0.35, # 35% 透过
'LCD 透过率 (940nm)': 0.15, # 15% 透过
'Micro-LED 透过率 (940nm)': 0.60, # 60% 透过
}

# VD56GA vs 传统传感器在屏下的有效信号
TRADITIONAL_QE = 0.30 # 传统传感器 QE
DEEPNIR_QE = 0.30 * 1.6 # DeepNIR 提升 60%

print("=== 屏下安装有效信号对比 ===")
for screen, trans in SCREEN_ATTENUATION.items():
traditional_signal = TRADITIONAL_QE * trans
deepnir_signal = DEEPNIR_QE * trans
improvement = deepnir_signal / traditional_signal

print(f"\n {screen}:")
print(f" 传统传感器: {traditional_signal:.3f}")
print(f" DeepNIR: {deepnir_signal:.3f}")
print(f" 提升: {improvement:.1f}x")

3. 量产传感器配置建议

配置 传感器 用途 成本
经济型 VD56GA × 1 DMS(方向盘后方) $
标准型 VD56GA × 2 DMS + OMS(后排) $$
高性能 OV2311 × 1 + VD56GA × 1 DMS (RGB-IR) + OMS $$$
全舱型 VD56GA × 3 DMS + OMS左 + OMS右 $$

4. ST 的 IDM 优势

ST 的 Integrated Device Manufacturer (IDM) 模式:

优势 说明 对 IMS 的意义
前端制造 Crolles, France 供应链韧性
品控 内部全流程 质量一致性
长期支持 IDM 承诺 汽车 15 年生命周期
定制能力 像素级定制 DeepNIR 优化

结论

ST VD56GA 通过 DeepNIR 像素架构和内置 ISP,为 DMS/OMS 量产提供了成本优化的紧凑方案。60% 的红外灵敏度提升使其特别适合屏下安装和低成本红外补光场景。对 IMS 开发而言,VD56GA 是经济型 DMS/OMS 配置的首选传感器之一。


参考链接: