HyperAIHyperAI

Command Palette

Search for a command to run...

SA-DVAE:通过解耦变分自编码器改进零样本骨架动作识别

Sheng-Wei Li Zi-Xiang Wei Wei-Jie Chen Yi-Hsin Yu Chih-Yuan Yang Jane Yung-jen Hsu

摘要

现有的基于骨架的零样本动作识别方法利用投影网络学习骨架特征和语义嵌入的共享潜在空间。动作识别数据集固有的不平衡性,表现为变化的骨架序列与恒定的类别标签之间的差异,给对齐带来了显著挑战。为了解决这一不平衡问题,我们提出了SA-DVAE——通过解耦变分自编码器实现语义对齐的方法。该方法首先采用特征解耦技术,将骨架特征分解为两个独立的部分——一部分与语义相关,另一部分则无关——从而更好地对齐骨架特征和语义特征。我们通过一对模态特定的变分自编码器并结合总体校正惩罚来实现这一想法。我们在三个基准数据集上进行了实验:NTU RGB+D、NTU RGB+D 120 和 PKU-MMD,实验结果表明,SA-DVAE 在现有方法的基础上取得了性能提升。代码可在 https://github.com/pha123661/SA-DVAE 获取。


用 AI 构建 AI

从创意到上线——通过免费 AI 协同编码、开箱即用的环境和最优惠的 GPU 价格,加速您的 AI 开发。

AI 协同编码
开箱即用的 GPU
最优定价

HyperAI Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
SA-DVAE:通过解耦变分自编码器改进零样本骨架动作识别 | 论文 | HyperAI超神经