HyperAIHyperAI

Command Palette

Search for a command to run...

单目、单阶段、多个人的3D回归

Yu Sun Qian Bao Wu Liu Yili Fu Michael J. Black Tao Mei

摘要

本文专注于从单个RGB图像中回归多个3D人体模型。现有的方法大多遵循一个多阶段流程,首先检测出图像中的人体边界框,然后独立地回归每个边界框内的3D身体网格。相比之下,我们提出了一种一次性回归多个3D人体模型的所有网格的方法(简称ROMP)。该方法在概念上简单,无需边界框,并且能够以端到端的方式学习每个像素的表示。我们的方法同时预测一个身体中心热图和一个网格参数图,这两个图可以联合描述像素级别的3D身体网格。通过一个以身体中心为引导的采样过程,可以从网格参数图中轻松提取图像中所有人的身体网格参数。借助这种细粒度的表示,我们的单阶段框架摆脱了复杂的多阶段流程,并且对遮挡更加鲁棒。与现有最先进方法相比,ROMP在具有挑战性的多人基准测试中表现出色,包括3DPW和CMU全景数据集(CMU Panoptic)。在拥挤/遮挡数据集上的实验表明,该方法在各种类型的遮挡下均具有较强的鲁棒性。发布的代码是首个实时实现的单目多人3D网格回归系统。


用 AI 构建 AI

从创意到上线——通过免费 AI 协同编码、开箱即用的环境和最优惠的 GPU 价格,加速您的 AI 开发。

AI 协同编码
开箱即用的 GPU
最优定价

HyperAI Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供