通过文本描述生成地面压力序列用于 HAR
原文中文,约500字,阅读约需2分钟。发表于: 。利用深度学习技术,使用文本描述生成大量的地面压力序列,通过离散潜在相关性获得由文本描述生成的高质量压力序列,并在实际压力传感器收集的压力动态上评估与仅使用真实数据训练的模型相当的 HAR 模型,将真实数据和合成的训练数据结合,使整体宏 F1 分数提高 5.9%。
T2M-HiFiGPT是一种新型条件生成框架,能够生成人体动作。它基于RVQ-VAE和双层GPT结构,研究表明RVQ-VAE能够产生高精度的2D时间-残差离散动作表示。双层GPT结构能够将先前帧和文本描述的信息压缩成1D上下文向量,并通过RVQ-VAE解码器将生成的残差离散指标转化回动作数据。该框架在HumanML3D和KIT-ML数据集上表现出色,优于最新的基于扩散和GPT的方法。