TriDrive:联合驾驶员-车辆-道路建模的驾驶员监控预测框架
TriDrive:联合驾驶员-车辆-道路建模的驾驶员监控预测框架论文信息 项目 内容 标题 TriDrive: Joint Driver, Vehicle, and Road Modeling for Forecasting and Driver Monitoring 作者 Yuhang Wang 等 领域 Robotics (cs.RO), Computer Vision (cs.CV) 年份 2026 链接 arXiv:2609.33000 代码 HuggingFace 规模 32页(10页正文+附录),4图25表 核心创新TriDrive 是首个统一框架,联合预测驾驶员运动学、车辆动力学和道路需求,通过自动化条件转移模型实现。它解决了以往驾驶员监控中”座舱内活动”与”交通条件下的驾驶员运动”孤立建模的问题。 三大突破: 模态特定编码器:驾驶员锚定运动学表示 + 因果CAN总线动力学 + 冻结V-JEPA 2道路潜在表示 有向残差连接:驾驶员和道路上下文通过有向连接精化车辆预测 实时部署:蒸馏道路编码器后在 comma four + 8...
EEG解码框架用于自动驾驶乘客危险感知:3D-CRNN方法详解
EEG解码框架用于自动驾驶乘客危险感知:3D-CRNN方法详解论文信息 项目 内容 标题 EEG-Driven Decoding Framework for Passenger Hazard Perception in Highly Automated Vehicles 作者 Yingkai Yang, Ashton Yu Xuan Tan, Bowen Li, Xiaorong Gao, Sifa Zheng, Jianqiang Wang 等 期刊 Automotive Innovation(已接收) 年份 2026 链接 arXiv:2609.07128 代码 GitHub: SOTIF-AVLab/EEG2023 数据 DOI:10.21227/jw72-m261 规模 31页,8图13表 核心创新论文提出首个将乘客EEG认知信号用于自动驾驶危险感知的完整框架,包含三个创新组件: 乘客认知模型(PCM):建模乘客对危险的神经响应 风险感知序列标注(RSL):解决EEG标注稀疏问题 乘客EEG解码策略(PEDS...
INT8量化真的可移植吗?跨平台量化推理实测研究
INT8量化真的可移植吗?跨平台量化推理实测研究论文信息 项目 内容 标题 Is INT8 Portable? A Cross-Platform Measurement Study of Quantized Inference on Embedded and Automotive Accelerators 作者 Yuyeong Shin 等(韩国汽车技术研究院 KATECH) 领域 Hardware Architecture (cs.AR), Machine Learning, Performance 年份 2026 链接 arXiv:2609.16085 代码 GitHub: embedded-ai-quantization-guide 规模 22页,3图8表,32份报告 核心发现“量化一次,到处部署”对嵌入式和汽车部署是不安全的。 这篇来自 KATECH(韩国汽车技术研究院)的论文直接挑战了业界对INT8量化的基本假设。 三大可移植性失败 失败维度 描述 影响 速度不可移植 INT8在无点积ISA的CPU上反而慢1.7x 选错芯...
NVIDIA Cosmos 3 深度解析:统一世界模型如何变革座舱数据合成
📄 全文中文译稿已上线:论文库译稿页(保留全部图表,含工程向译者解读),需要逐节细节请直接读译稿。 NVIDIA Cosmos 3 深度解析:统一世界模型如何变革座舱数据合成技术背景 项目 内容 产品 NVIDIA Cosmos 3 发布 2026年5月 定位 首个全开放全模态世界模型(Omni-Model) 来源 AWS Physical AI Blog 代码 GitHub: NVIDIA-Omniverse 研究 NVIDIA Cosmos Lab 核心创新:从三模型到一模型架构演进1234567891011Cosmos 1/2 时代(多模型流水线): VLM(理解场景) → 文本描述 → 视频生成模型 → 合成帧 → 策略网络 → 动作 ❌ 每次模型间传递都丢失上下文 ❌ 增加推理延迟 ❌ 工程复杂度高Cosmos 3 时代(统一模型): 单次前向传播 → 文本推理 + 光真实视频 + 同步音频 + 动作轨迹 ✅ 无中间文本瓶颈 ✅ 保留全空间分辨率 ✅ 一次调用完成所有 Mixture-of-Transformer...
Murata + Smart Eye 多模态融合架构:60GHz雷达+光学统一座舱感知平台
Murata + Smart Eye 多模态融合架构:60GHz雷达+光学统一座舱感知平台技术背景 项目 内容 合作方 Murata Manufacturing + Smart Eye 展示 InCabin/AutoSens 2026 来源 Auto-Innovations 定位 DMS + OMS + CPD 统一硬件平台 核心创新Murata 联合 Smart Eye 推出60GHz毫米波雷达 + AI光学摄像头融合架构,将驾驶员监控(DMS)、乘员监控(OMS)和儿童存在检测(CPD)统一到单一硬件平台。 解决的核心问题 纯光学方案问题 雷达补充方案 低光照/夜间失效 60GHz穿透黑暗,不依赖光照 衣物/毯子遮挡 雷达穿透非导电材料检测微动 摄像头位置限制 雷达可安装多位置 误报率高(重物判为儿童) 雷达检测心肺微运动区分活体 架构详解1. 硬件架构 graph TB subgraph 传感器层 A[头顶控制台摄像头<br/>高分辨率RGB+IR] ...
RAMP:边缘CPU视觉模型自适应混合精度量化——BMVC 2026论文解读
RAMP:边缘CPU视觉模型自适应混合精度量化——BMVC 2026论文解读论文信息 项目 内容 标题 RAMP: Robust Adaptive Mixed-Precision Quantization for Edge CPU Vision Models 作者 David Población Criado 等 会议 BMVC 2026(第37届英国机器视觉会议) 年份 2026 链接 arXiv:2609.28262 代码 GitHub: davidpob99/ramp-mpq 规模 13页,4图2表 核心创新RAMP 提出了一种系统化的INT8混合精度量化策略,通过13种敏感度指标对比和K-Means聚类,在边缘CPU上实现近无损精度+1.81x加速。 三大发现: Jensen-Shannon 散度是唯一在所有配置下零灾难性失败的敏感度指标 固定阈值的敏感度分配方式在现代架构上脆弱且失效 排除低加速层的量化反而有害(导致计算图碎片化,禁用算子融合) 方法详解1. 问题定义1234567891011""&...
航空驾驶员疲劳监控跨域启示:从Cineon+Smart Eye到RAF训练模拟器
航空驾驶员疲劳监控跨域启示:从Cineon+Smart Eye到RAF训练模拟器技术背景 项目 内容 合作 Cineon Technology + Smart Eye + RAF(英国皇家空军) 场景 军用飞行员训练模拟器眼动追踪 时间 2026年9月 来源 Varjo Blog, Halldale 目标 让”驾驶术”可量化 核心发现Cineon 联合 Smart Eye 将非侵入式眼动追踪引入飞行员训练模拟器,结合混合现实(MR)技术,通过眼动模式分析评估飞行员能力等级、认知负荷、压力和疲劳状态。 三大目标 MR可用性反馈 — 收集混合现实训练的可用性数据 眼动模式分析 — 识别能力等级相关的注视模式 心理生理数据 — 支持机器学习模型评估认知负荷/压力/疲劳 跨域技术映射航空 → 汽车技术对应 graph LR subgraph 航空座舱 A[飞行员眼动追踪] --> B[仪表扫描模式] C[MR训练模拟器] --> D[虚拟场景交互] E[认知负荷评估] ...
Context-Aware Causal Gaze Forecasting:解决DMS追踪丢失的因果推断方案
Context-Aware Causal Gaze Forecasting:解决DMS追踪丢失的因果推断方案论文信息 项目 内容 标题 Context-Aware Causal Gaze Forecasting for Human-Vehicle Interaction During In-Cabin Tracking Dropouts 发表 arXiv:2609.12374, 2026 链接 https://arxiv.org/abs/2609.12374 核心创新DMS摄像头在驾驶员大角度转头(看后视镜、侧盲区、路口扫描)时丢失追踪。这些关键时刻恰恰是最需要视线信息的。本文提出因果推断方案:基于上下文预测追踪丢失期间的视线方向。 1. 问题定义1.1 追踪丢失场景 场景 丢失原因 时长 危险性 肩部检查(shoulder check) 极端侧头 0.5-1.5s 高(变道/转弯) 后视镜查看 头眼偏转 0.3-0.8s 中(正常但需追踪) 路口扫描 大幅左右看 1-3s 高(交叉路口) 拿物品 面部遮挡 0.5-2s 中 ...
情绪识别$29B市场:多模态AI如何重塑座舱情绪感知与驾驶员状态监控
情绪识别$29B市场:多模态AI如何重塑座舱情绪感知与驾驶员状态监控市场概况情绪识别/情绪检测是一个数十亿美元级、持续增长的市场,但不同研究机构的统计口径差异很大。(注:本节原引用的具体数字——2026 年 $29.14B、2031 年 $43.29B、CAGR 8.2%、汽车生物识别 $1.4B、手势识别 $26.27B→$208B 等——经核对无法溯源到任何可查证的报告,已删除。) 一个可查证的邻近市场参考(Mordor Intelligence,2026-10 抓取):全球手势识别市场 2026 年约 $37.41B,预计 2031 年达 $104.16B(2026–2031 CAGR 22.75%)。情绪识别市场的精确规模本文不做断言。 1. 市场驱动因素1.1 技术驱动 驱动力 描述 对IMS影响 多模态AI 面部+语音+文本+生理 融合架构变革 对话式AI 语音助手+情感理解 座舱交互升级 边缘AI NPU+MCU本地处理 隐私+实时 超个性化 个体情绪基线 精准状态检测 1.2 汽车行业需求(注:原表中的分项市场规模数字($2B+...
SGAP-Gaze:场景网格注意力实现驾驶员注视点估计新突破
SGAP-Gaze:场景网格注意力实现驾驶员注视点估计新突破论文信息 项目 内容 标题 SGAP-Gaze: Scene Grid Attention Based Point-of-Gaze Estimation Network for Driver Gaze 发表 arXiv:2604.19888, 2026 链接 https://arxiv.org/abs/2604.19888 关键词 point-of-gaze, scene grid, attention, driver gaze 核心创新现有视线估计预测3D视线方向向量,但不知道 驾驶员在看场景中的哪个点。SGAP-Gaze直接预测注视点(Point-of-Gaze, PoG),引入场景网格注意力机制。 1. 问题定义1.1 视线方向 vs 注视点 方法 输出 问题 视线方向(3D向量) (pitch, yaw) 不知看向哪里 注视点(PoG) 场景坐标(x,y) 直接可用但更难 1.2 驾驶场景的注视区域 区域 含义 DMS价值 道路前方 正常驾驶 ✅ 安全 后...