Smart Eye 多模态座舱 AI 代理:从 DMS 到 Agentic AI 的跃迁
Smart Eye 多模态座舱 AI 代理:从 DMS 到 Agentic AI 的跃迁
InCabin Europe 2026 世界首创技术演示深度解读
发布信息
- 发布方: Smart Eye(STO:SEYE, OTC:SMTEF)
- 发布日期: 2026年9月23日
- 展示场合: InCabin Europe 2026,巴塞罗那,展位 #305
- 核心产品: Multimodal In-Cabin Automotive AI Agent
- 新闻来源: https://www.stocktitan.net/news/SMTEF/smart-eye-unveils-world-first-multimodal-automotive-ai-agent-p60ra2dqur25.html
核心创新
Smart Eye 推出的是世界首个融合人+车+环境上下文的座舱 AI 代理:
传统 DMS: 检测疲劳/分心 → 发出警告
Smart Eye AI Agent: 融合语音+视线+情绪+驾驶员状态+座舱占用+外部传感器 → 理解上下文 → 决策 → 执行
关键设计理念
Smart Eye CEO Martin Krantz 的核心论点:
“汽车 AI 代理在经济上变得可行,当其创造的价值超过运行它们的成本和复杂性时。多模态上下文方法可以更快地将技术推向量产。”
核心洞察: 不是让 AI 更强大,而是通过丰富的上下文输入减少 AI 需要的计算量。
技术架构
graph TD
subgraph 人因输入
A1[语音]
A2[驾驶员身份]
A3[视线方向]
A4[注意力状态]
A5[情绪]
A6[驾驶员状态]
A7[座舱占用]
end
subgraph 车辆输入
B1[ADAS 数据]
B2[车辆系统]
B3[外部传感器]
end
A1 --> D[多模态融合层]
A2 --> D
A3 --> D
A4 --> D
A5 --> D
A6 --> D
A7 --> D
B1 --> D
B2 --> D
B3 --> D
D --> E[AI 代理引擎]
E --> F[任务决策]
F --> G[车辆功能执行]
F --> H[仪表板组件]
F --> I[外部目标理解]
多模态融合的价值
1 | """ |
运行结果
1 | === 场景1:看向窗外询问建筑 === |
Smart Eye 生态全景
InCabin Europe 2026 上 Smart Eye 展示了三层产品矩阵:
graph TD
subgraph Smart Eye 生态
A[Smart Eye AI Agent<br/>多模态座舱代理]
B[Smart Eye Interior Sensing<br/>DMS/OMS 软件]
C[Smart Eye Partnerships<br/>硬件合作]
end
A -->|融合| B
B -->|运行在| C
subgraph 硬件合作
C1[NOVELIC ACAM 60GHz]
C2[Murata 60GHz Camera-Radar]
C3[任意 OEM 硬件]
end
C --> C1
C --> C2
C --> C3
| 层级 | 产品 | 角色 |
|---|---|---|
| AI 代理层 | Multimodal AI Agent | 上下文融合 + 任务执行 |
| 感知层 | Interior Sensing AI | DMS + OMS 软件算法 |
| 硬件层 | NOVELIC / Murata / 其他 | 60GHz radar + camera 模块 |
平台特性
| 特性 | 说明 | 战略意义 |
|---|---|---|
| 模型不可知 | 支持不同基础模型 | OEM 可选择自己的 AI 供应商 |
| 部署灵活 | 边缘或云端 | 适应不同车型算力 |
| 语音系统不可知 | 支持不同语音引擎 | 不锁定语音供应商 |
| 开放平台 | 可集成第三方代理 | 生态扩展性 |
竞争格局:Smart Eye vs Minieye
| 维度 | Smart Eye AI Agent | Minieye BamBam |
|---|---|---|
| 核心定位 | 多模态上下文融合平台 | VLM 驱动座舱管家 |
| AI 模型 | 模型不可知(支持多种 FM) | VLM(Vision-Language Model) |
| 计算策略 | 上下文压缩减少计算 | 端到端 VLM |
| 视线+外部 | ✅ 核心功能 | ⚠️ 未提及 |
| 情绪计算 | ✅ Affectiva 技术 | ✅ 视觉情绪识别 |
| 硬件合作 | NOVELIC + Murata | 独立方案 |
| OEM 覆盖 | 24 OEM, 380 车型 | 40+ OEM |
| 平台 | 模型不可知 | 基于 OpenClaw |
对 IMS 开发的启示
1. 上下文压缩是 AI 代理的关键
Smart Eye 的核心洞察:不是让 AI 更强大,而是通过丰富上下文减少 AI 计算量。
对 IMS 的意义:
1 | 传统 IMS:检测 → 触发警告 |
2. 视线 + 外部传感器 = 空间理解
Smart Eye 演示中最亮眼的场景:驾驶员看窗外 + 说”那个” → AI 知道指的是什么。
这对 IMS 的意义:
- DMS 不只监测驾驶员在看哪,还要知道”看的是车外的什么”
- 需要 DMS-ADAS 数据融合
- 可用于:路口安全(看哪个方向来车)、导航辅助(看哪个路标)、危险提示
3. 模型不可知策略
Smart Eye 不绑定特定 AI 模型,而是提供”人因感知层”作为基础设施。这是一个重要的架构选择:
graph TD
A[Smart Eye 人因层] -->|上下文| B[OEM 选择的 AI]
B -->|决策| C[车辆执行]
D[IMS 参考] -->|多模态融合| E[模型不可知接口]
E -->|边缘 LLM| F[小模型快响应]
E -->|云端 LLM| G[大模型复杂任务]
4. 开发路线建议
| 阶段 | 时间 | 目标 | 技术方案 |
|---|---|---|---|
| Phase 1 | 0-3月 | DMS 数据结构化 | 检测结果 + 状态 + 上下文 |
| Phase 2 | 3-6月 | 多模态融合原型 | DMS + ADAS 数据融合 |
| Phase 3 | 6-12月 | AI 代理接口 | 定义 AI 代理输入/输出 API |
| Phase 4 | 12-18月 | 视线+外部目标关联 | DMS 视线与 ADAS 目标匹配 |
| Phase 5 | 18-24月 | 完整代理演示 | 多模态上下文 + AI 决策 |
InCabin Europe 2026 总结
本届 InCabin Europe 2026(9月22-24日,巴塞罗那)的核心趋势:
| 趋势 | 代表 | 对 IMS 的启示 |
|---|---|---|
| DMS → AI Agent | Smart Eye, Minieye | DMS 是 AI 代理的感知层 |
| Camera + Radar 融合 | NOVELIC, Murata, LITEON | 传感器融合是标配 |
| DFR 功能就绪度 | Minieye | DMS 与 ADAS 必须融合 |
| 120GHz 高频雷达 | indie | 生命体征检测升级 |
| Multistatic UWB | Calterah | 复用数字钥匙硬件 |
| EU 法规生效 | Reg 2019/2144 | 7月已强制执行 |
| 模型不可知 | Smart Eye | 不锁定 AI 供应商 |
结论
Smart Eye 的多模态 AI 代理代表了座舱 AI 的下一个范式:不是更大的模型,而是更丰富的上下文。通过融合人因感知(视线、情绪、注意力)与车辆/环境数据,可以在减少计算量的同时提供更精准的 AI 服务。
对 IMS 开发而言,立即开始设计多模态上下文融合接口,将 DMS 检测结果与 ADAS 数据关联,并为 AI 代理预留标准化的输入/输出 API,是跟上 2027-2028 量产节奏的关键。
参考链接: