EdgeHAR: 边缘原生传感器基础模型——解纠缠学习对DMS跨用户泛化的启示
EdgeHAR: 边缘原生传感器基础模型——解纠缠学习对DMS跨用户泛化的启示
论文来源:arXiv:2609.14498 · 2026年9月13日提交 · ACM Ubicomp
作者:He Zhang, Siyu Yuan, Siyu Liu, Sizhen Bian, Bin Guo
⚠️ 2026-11-09 审计注记:原文三张实验表(跨用户 78.3%
85.2%、跨设备 62%88%、边缘约束 2.1MB/8ms/12MB)经与 arXiv 全文(表 2/4/6)核对均为虚构,已替换为论文真实数字;”50 样本适配 / <2 分钟 / <50mW”等部署参数原文不存在,已删。论文实验对象是可穿戴 IMU 传感器 HAR,不是 DMS——DMS 迁移均为本站推演。
核心方向:边缘基础模型 · 传感器解纠缠 · 跨域泛化 · 可穿戴智能
论文信息
| 项目 | 内容 |
|---|---|
| 论文标题 | EdgeHAR: An Edge-Native Compact Sensor Foundation Model for Human Activity Recognition |
| arXiv | 2609.14498 |
| 发表 | ACM Ubicomp (DOI: 10.1145/3798063.3837321) |
| 年份 | 2026 |
| 领域 | cs.LG, cs.AI |
| 核心贡献 | 三码解纠缠表示,边缘端基础模型 |
核心创新
解决的问题
现有HAR基础模型设计于云规模部署,在边缘端面临:
- 域偏移:新用户/设备/采样率/佩戴位置变化
- 计算约束:边缘端内存/算力/延迟限制
- 隐私:传感器数据不上云
EdgeHAR的三码解纠缠
将传感器信号分解为三个独立潜在码:
graph LR
A[传感器信号] --> B[编码器]
B --> C[Activity-Semantic Code<br/>活动语义码]
B --> D[Motion-Dynamics Code<br/>运动动态码]
B --> E[Acquisition-Context Code<br/>采集上下文码]
C --> F[可迁移活动知识]
D --> G[时序模式]
E --> H[传感器特定变化]
style C fill:#4a4,color:white
style F fill:#4a4,color:white
| 潜在码 | 捕获内容 | 对DMS的对应 |
|---|---|---|
| 活动语义码 | 可复用的活动知识 | 驾驶行为类别 |
| 运动动态码 | 时序模式 | 疲劳/分心时序特征 |
| 采集上下文码 | 传感器特定变化 | 摄像头型号/安装位置 |
对DMS的直接价值
DMS面临的跨域问题与HAR高度相似:
- 新用户(不同脸型/眼镜/帽子)
- 新设备(不同摄像头型号)
- 新安装位置(不同车型)
- 新环境(不同光照)
EdgeHAR的解纠缠方法可直接迁移到DMS。
方法详解
三码解纠缠架构
1 | # 示意代码,不可直接运行。论文未开源(全文无代码仓库链接),本块系本站依据 |
解纠缠损失
1 | # 示意代码,不可直接运行。论文未开源,以下正则化拆解系本站示意(注意块内 |
DMS行为分类
1 | # 示意代码,不可直接运行。7 类驾驶行为与 144 维特征为本站假想的 DMS 适配 |
实验结果
以下数字均核对自论文原文(arXiv HTML 全文,表 2/4/6/7)。注意:论文的实验对象是可穿戴 IMU 传感器 HAR(HHAR、MotionSense、UCI-HAR、Shoaib、PAMAP2 数据集),并非 DMS。
跨用户泛化(论文表 4:跨被试迁移,ACC%)
| 方法 | UCI | Motion | HHAR | 平均 |
|---|---|---|---|---|
| SDMix | 90.33 | 75.48 | 77.44 | 81.08 |
| ContrastSense | 93.33 | 83.13 | 87.66 | 88.04 |
| DI2SDiff | 87.68 | 88.43 | 89.19 | 88.43 |
| EdgeHAR 零样本 | 86.19 | 85.42 | 88.97 | 86.86 |
| EdgeHAR 少样本 | 91.88 | 93.17 | 94.89 | 93.31 |
关键发现:论文设定为仅用 2% 目标域样本微调,EdgeHAR 少样本平均 93.31%,超过零样本与全部对比方法;解纠缠表示是这种少样本适配能力的基础。(”只调 context 码、参数量<5%”系旧版虚构表述,论文未给出逐码微调消融,已删。)
跨设备/跨数据集泛化
论文没有单独的”跨设备”对照表;设备与佩戴位置差异通过跨数据集与跨位置迁移隐式覆盖——例如跨位置迁移(论文表 5,Shoaib 数据集)少样本准确率 88.29%95.71%,多源跨数据集少样本 86.28%92.45%。
边缘约束(论文表 6)
| 模型 | 参数量 | 大小 | CPU 延迟 | 内存 |
|---|---|---|---|---|
| GPT-2 Small | 160.0M | 400.0MB | 1028.0ms | – |
| LLMHAR | 8.0M | 46MB | 104.5ms | – |
| MobileHART | 2.54M | 10.35MB | 13.49ms | 20.77MB |
| EdgeHAR(完整版) | 1.41M | 5.41MB | 89.8ms | 21.37MB |
| EdgeHAR(部署版) | 1.086M | 4.14MB | 79.0ms | 18.42MB |
另有少样本新活动适配实验(论文表 7,PAMAP2):每类新活动 100 个样本时 Macro-F1 达 91.86%(50 样本时 74.87%,20 样本时仅 16.27%)。
IMS应用启示
1. DMS跨车型快速适配
| 场景 | 传统方案 | EdgeHAR方案 | 优势 |
|---|---|---|---|
| 新车型A | 重新训练 | 解纠缠少样本适配 | 少量样本即可(论文 HAR 设定 2% 目标域样本) |
| 新摄像头 | 重新训练 | 解纠缠少样本适配 | 硬件更换快适配 |
| 新用户群体 | 全量微调 | 解纠缠少样本适配 | 具体参数量占比论文未给出 |
| 新光照条件 | 数据增强 | 上下文信息与活动知识解耦 | 方向上无需重新采集 |
2. Euro NCAP场景适配
| ENCAP场景 | EdgeHAR优势 | 说明 |
|---|---|---|
| D-02手机使用 | semantic码通用 | 跨用户泛化 |
| F-01 PERCLOS | dynamics码通用 | 时序模式通用 |
| 新用户校准 | 少量样本适配 | 降低标定成本 |
| 新车型部署 | 上下文相关部分单独适配 | 快速部署 |
3. 部署方案
1 | # 示意代码,不可直接运行。三阶段流程为本站归纳;论文未给出 DMS/车规芯片 |
总结
EdgeHAR的核心价值:
- 三码解纠缠:活动语义/运动动态/采集上下文分离,跨域适配只需处理上下文相关部分(”只调一个码”系本站推演,论文未做逐码消融)
- 边缘原生:部署版 4.14MB / 79ms CPU 推理(论文表 6,可穿戴 HAR 场景实测,非车规芯片数字)
- 少样本适配:2% 目标域样本微调即可完成跨被试/跨数据集迁移
- 精度保持:跨被试少样本平均 93.31%,高于零样本与全部对比方法(HAR 基准)
对DMS的启示:
- 将三码解纠缠应用于DMS跨用户/跨车型泛化
- 新用户/新车型可通过解纠缠表示少样本适配(论文 HAR 设定为 2% 目标域样本)
- 约 4MB 的部署版模型体积为 DMS 车端部署提供量级参考(实际延迟需在目标芯片实测)
- Euro NCAP 新场景可通过上下文解耦思路快速适配