ROMP-单目、多人、实时三维人体形态估计

发布于

713

人观看

近年来，自单张图片估计三维人体形状和姿态的研究火热。但现有方法大多都遵从先检测-再逐人估计的多阶段框架。ROMP是第一个单阶段算法，可在1070Ti上自单个单目摄像头，实时估计多人三维人体网格。为了适应实际场景中普遍存在的多人遮挡问题，不同于多阶段方法的检测框级的模糊表征， ROMP端对端学习像素级的明确表征。并且为了让模型进一步适应严重遮挡的情况，我们在表征学习过程中融入了多人中心碰撞检测机制，促使模型学习更具有区分性的表征。
ROMP的模型结构采用了简洁的端对端设计，具有很强的可扩展性，便于借此进一步探索多人场景下更丰富的感知和交互功能。
ROMP的训练和测试代码已在Github上开源并积极维护，可以从图片、视频、摄像头中实时提取三维人体形态信息，并应用于虚拟形象驱动。

0点赞

0收藏

相关推荐

加关注

白玉兰开源

由上海交通大学牵头，联合电子中国电子技术标准化研究院、北京大学、机器之心、复旦大学、华东师范大学、开源社、上海人工智能研究院有限公司等单位成立上海白玉兰开源开放研究院（简称白玉兰开源） http://www.baiyulan.org.cn/

确认

3秒后跳转登录页面

去登陆