前言
舱内监控系统(DMS/OMS)面临一个核心挑战:如何在不同光照条件下(白天、夜晚、隧道)保持稳定监测?
传统方案需要多个传感器或机械 IR-cut 滤镜切换,增加系统复杂度。
STURDeCAM57 通过单摄像头同时输出 RGB 和红外图像,提供了解决方案。
一、产品概览
1.1 基本信息
| 项目 |
规格 |
| 产品名称 |
STURDeCAM57 |
| 分辨率 |
5MP(2592×1944) |
| 传感器类型 |
全局快门(Global Shutter) |
| 光谱范围 |
RGB + 红外(940nm) |
| 接口 |
GMSL2(支持 15m 传输) |
| 工作温度 |
-40°C ~ 85°C |
| 防护等级 |
IP67 |
| 供应商 |
e-con Systems |
| 发布时间 |
2026 年 3 月 |
1.2 核心优势
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19
| STURDeCAM57 核心优势:
┌─────────────────────────────────────────────────────────┐ │ 1. RGB-IR 双通道输出 │ │ ├── RGB 通道:日间彩色图像 │ │ └── IR 通道:夜间/低光图像 │ │ │ │ 2. 全局快门 │ │ └── 无运动模糊,适合快速移动场景 │ │ │ │ 3. 内置 ISP │ │ ├── RGB-IR 分离 │ │ ├── 去马赛克 │ │ └── 色彩重建 │ │ │ │ 4. 车规级 │ │ ├── IP67 防护 │ │ └── -40°C ~ 85°C 工作温度 │ └─────────────────────────────────────────────────────────┘
|
二、技术架构
2.1 RGB-IR 技术
传统方案 vs STURDeCAM57:
| 方案 |
日间 |
夜间 |
复杂度 |
| 传统双摄像头 |
RGB 摄像头 |
IR 摄像头 |
高(两个摄像头、两个通道) |
| 机械 IR-cut 切换 |
RGB 模式 |
IR 模式 |
中(机械切换延迟) |
| STURDeCAM57 |
RGB+IR 同时输出 |
RGB+IR 同时输出 |
低(单摄像头) |
2.2 内置 ISP 架构
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21
| STURDeCAM57 ISP 处理流程:
传感器输出(RGB-IR 像素阵列) │ ▼ ┌─────────────────────────────────────┐ │ On-board ISP │ │ ├── RGB-IR 分离 │ │ │ ├── 提取 RGB 像素 │ │ │ └── 提取 IR 像素 │ │ │ │ │ ├── 去马赛克(Demosaicing) │ │ │ │ │ └── 色彩重建(Color Reconstruction)│ └─────────────────────────────────────┘ │ ├──► RGB 帧 → 驾驶员面部识别 │ 行为分析 │ └──► IR 帧 → 夜间瞳孔检测 眼动追踪
|
优势:解放主机 CPU/GPU 资源
| 处理位置 |
主机负载 |
适用场景 |
| 传统方案(主机处理) |
高 |
需要强大主机算力 |
| STURDeCAM57(内置 ISP) |
低 |
边缘设备友好 |
2.3 全局快门优势
| 快门类型 |
工作原理 |
适用场景 |
| 卷帘快门(Rolling Shutter) |
逐行曝光 |
静态或低速场景 |
| 全局快门(Global Shutter) |
全像素同时曝光 |
高速运动、振动场景 |
舱内场景优势:
1 2 3 4 5 6 7 8 9 10
| 全局快门在舱内监控中的优势:
1. 驾驶员快速转头 └── 无运动模糊,眼动追踪更准确
2. 车辆颠簸/振动 └── 图像稳定,减少误检
3. 手部动作检测 └── 打电话、吃东西等行为识别更精准
|
三、DMS/OMS 应用
3.1 DMS 应用
| 功能 |
RGB 通道 |
IR 通道 |
| 疲劳检测 |
眼睑闭合度 |
夜间瞳孔检测 |
| 分心检测 |
头部姿态、视线方向 |
低光条件下的眼动 |
| 行为识别 |
打电话、吃东西 |
夜间行为 |
3.2 OMS 应用
| 功能 |
RGB 通道 |
IR 通道 |
| 乘员检测 |
人员识别、姿态估计 |
夜间乘员存在检测 |
| 儿童检测(CPD) |
儿童面部识别 |
被毯子覆盖时的热成像 |
| 安全带检测 |
安全带状态 |
低光条件下的检测 |
3.3 日夜连续监控
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19
| 日夜连续监控示例:
白天场景: ├── RGB 通道:主导 │ ├── 面部识别 │ ├── 表情分析 │ └── 行为识别 │ └── IR 通道:辅助 └── 瞳孔定位
夜间/隧道场景: ├── RGB 通道:辅助 │ └── 低光彩色信息 │ └── IR 通道:主导 ├── 瞳孔检测 ├── 眼动追踪 └── 面部轮廓
|
四、系统集成
4.1 支持平台
| 平台 |
接口 |
说明 |
| NVIDIA Jetson AGX Orin |
GMSL2 |
高性能边缘计算 |
| NVIDIA Jetson Orin NX |
GMSL2 |
紧凑型边缘计算 |
| NVIDIA Jetson Orin Nano |
GMSL2 |
入门级边缘计算 |
| TI TDA4 |
FPD-Link IV(可选) |
车规级处理器 |
| Qualcomm QCS8255 |
GMSL2 |
高通车规平台 |
4.2 GMSL2 接口优势
| 特性 |
说明 |
| 传输距离 |
最长 15m |
| 供电 |
PoC(Power over Cable) |
| 带宽 |
高速串行传输 |
| 抗干扰 |
差分信号,适合车载环境 |
4.3 流健康监控
1 2 3 4 5 6 7 8 9 10 11
| STURDeCAM57 流健康监控:
持续监测: ├── 传感器状态 ├── ISP 状态 └── GMSL 链路状态
异常处理: ├── 链路中断 → 自动恢复 ├── 帧丢失 → 重传/补偿 └── 传感器故障 → 报警
|
五、对 IMS 开发的启示
5.1 硬件选型建议
| 场景 |
推荐配置 |
| 日间 DMS |
RGB 摄像头即可 |
| 全天候 DMS |
RGB-IR 摄像头 |
| CPD 儿童检测 |
RGB-IR + 4D 雷达融合 |
| 舱内全覆盖 |
多摄像头 + RGB-IR |
5.2 算法优化方向
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16
| RGB-IR 双通道算法优化:
1. 多光谱融合 ├── 日间:RGB 主导 + IR 辅助 ├── 夜间:IR 主导 + RGB 辅助 └── 融合策略:加权融合 / 特征级融合
2. 自适应切换 ├── 光照检测 ├── 动态选择主导通道 └── 无缝切换(无感知)
3. 低光增强 ├── IR 通道增强 ├── RGB 通道去噪 └── 联合去噪
|
5.3 部署成本分析
| 方案 |
摄像头数 |
ISP 位置 |
成本 |
| 传统 RGB + IR 双摄 |
2 |
主机 |
中 |
| RGB + 机械 IR-cut |
1 |
主机 |
低(但延迟高) |
| STURDeCAM57 |
1 |
内置 |
中(简化集成) |
六、总结
STURDeCAM57 核心价值:
- 单摄像头日夜监控:RGB-IR 双通道,无需机械切换
- 内置 ISP:减轻主机负担,边缘设备友好
- 全局快门:高速场景无运动模糊
- 车规级:IP67、-40°C~85°C,适合实车部署
对 IMS 开发启示:
- RGB-IR 是舱内监控的趋势
- 全局快门对 DMS 准确性有显著提升
- 内置 ISP 可简化系统集成
参考资料
发布日期: 2026-04-11
关键词: RGB-IR摄像头, DMS摄像头, OMS硬件, 全局快门