HEAR:毫米波雷达心率感知的可观测性评估——零样本跨频段泛化
HEAR:毫米波雷达心率感知的可观测性评估——仿真到真实的零样本泛化
论文信息
| 项目 | 内容 |
|---|---|
| 标题 | Learning to Assess Heartbeat Observability for mmWave Heart-Rate Sensing |
| 作者 | Yuxuan Hu, Shilin Shan, Jianfei Yang, Feng Xu |
| 领域 | Artificial Intelligence (cs.AI) |
| 年份 | 2026 |
| 链接 | arXiv:2610.03570 |
| 项目页 | HEAR Project |
| 规模 | 19页,11图 |
核心创新
HEAR(Heartbeat Estimation with Assessed Reliability)是首个学习评估毫米波雷达心跳可观测性的框架,解决了一个核心问题:不是所有雷达测量都能可靠提取心率,需要先判断”这个测量值是否可信”。
三大突破:
- 可观测性评估:学习预测心跳信号的可读性分数
- 可控FMCW仿真器:生成不同可观测条件下的训练数据
- 仿真到真实的零样本泛化:仅用仿真数据训练,直接零样本迁移到60GHz和120GHz两个真实数据集(共134名受试者)
关键指标: 120GHz数据集上,基于可观测性分数的选择性预测,将心率MAE从17.9 BPM降至1.6 BPM(50%覆盖率时)
方法详解
1. 问题定义
1 | """ |
2. 可控FMCW仿真器
1 | # 示意代码,不可直接运行(为解释论文 Section 3 思想的简化示意,非官方实现) |
3. HEAR 双任务Transformer
1 | # 示意代码,不可直接运行(为解释论文 Section 4 思想的简化示意,非官方实现) |
实验结果
1. 心率估计性能
120GHz VitalSense 数据集上,基于可观测性分数做选择性预测(HEAR 选择器,论文 Table III):
| 覆盖率 | MAE (BPM) | Acc@5 BPM |
|---|---|---|
| 100% | 17.9 | 62% |
| 90% | 13.5 | 69% |
| 70% | 3.2 | 86% |
| 60% | 1.9 | 91% |
| 50% | 1.6 | 93% |
| 40% | 1.3 | 96% |
| 30% | 1.2 | 97% |
作为参照:50% 覆盖率时理论 Oracle 选择器可达 0.8 BPM——HEAR 的实际选择器(1.6 BPM)与 Oracle 之间仍有差距。
2. 仿真到真实的零样本泛化
注意:HEAR 的泛化是仿真训练→真实数据零样本迁移,不是”60GHz 仿真训练、120GHz 测试”这类跨频段训练实验。论文明确说明两个真实数据集的任何窗口都没有参与训练/验证/阈值调优(Sec. IV-A):
| 真实数据集 | 频段 | 受试者 | 门控 AUC(可观测性判别) |
|---|---|---|---|
| Parralejo 等 | 60GHz | — | 0.856 |
| VitalSense | 120GHz | — | 0.941 |
两个频段的评估均来自同一个仅用仿真数据训练的模型。
3. 边缘部署性能
| 指标 | 数值 | 说明 |
|---|---|---|
| 处理延迟 | 50.8 ms / 25s 窗口 | 含 47.7ms 信号前处理 + 3.1ms 网络推理 |
| 边缘设备 | NVIDIA Jetson AGX Orin(30W 模式) | 仅用 ARMv8 CPU,未用 GPU/DLA 加速 |
| 模型大小 | 5,295 参数(约 20.7 KB FP32 权重) | 约 0.26M FLOPs/窗口 |
IMS 开发启示
1. 60GHz雷达心率监测落地
1 | # 示意代码,不可直接运行(仅为集成路线的梳理笔记) |
2. 可观测性评估的通用价值
| 应用场景 | 可观测性评估价值 | IMS集成 |
|---|---|---|
| CPD心率 | 区分活体/非活体 | 直接应用 |
| 疲劳心率变异(HRV) | 确保HRV数据质量 | 疲劳深度检测 |
| 呼吸监测 | 区分正常呼吸/暂停 | 儿童检测+健康监测 |
| 驾驶员健康 | 长期健康趋势 | 健康座舱 |
3. 仿真到真实的迁移方法论
HEAR的纯仿真训练→真实零样本方法论对IMS有重大启示:
| 步骤 | HEAR做法 | IMS可借鉴 |
|---|---|---|
| 仿真器 | 可控FMCW多散射体 | 构建座舱雷达仿真器 |
| 标签 | 频谱峰值自动标注 | 自动标注替代人工 |
| 训练 | 仅仿真数据 | 降低数据采集成本 |
| 验证 | 60+120GHz真实数据 | 多平台验证 |
| 部署 | 50ms边缘延迟 | 车载实时可行 |
总结
HEAR 论文是 mmWave 雷达生命体征监测的重要突破:
- 可观测性评估解决了”什么时候可信”的核心问题
- 纯仿真训练+零样本迁移大幅降低数据需求
- 50%覆盖率下1.6 BPM MAE达到医疗级精度
- 50ms边缘延迟满足车载实时要求
对 IMS 的核心启示:CPD雷达模块复用做生命体征监测时,必须引入可观测性评估。不是每次雷达测量都适合心率提取,HEAR框架提供了判断哪些测量可信的方案。这直接支撑了IMS从CPD向”健康座舱”的演进路线。
本博客所有文章除特别声明外,均采用 CC BY-NC-SA 4.0 许可协议。转载请注明来源 Dapalm | IMS技术前沿!