3D
计算机视觉
计算机视觉（书籍）

以目前的计算机视觉技术能否对一张二维的人体全身照进行3D重建？

关注者
53
被浏览
22,725

8 个回答

这方面的工作已经很多啦

naked body mesh 重建一般主要基于smpl人体模型，即恢复参数化人体模型的形状和姿态，较好的工作有HMR，SPIN，VIBE，ExPose，FrankMocap等

  1. HMR[CVPR'2018]： End-to-end Recovery of Human Shape and Pose
  2. SPIN[ICCV'2019]： Learning to Reconstruct 3D Human Pose and Shape via Model-fitting in the Loop
  3. VIBE[CVPR'2020]： VIBE: Video Inference for Human Body Pose and Shape Estimation
  4. ExPose[ECCV'2020]: Monocular Expressive Body Regression through Body-Driven Attention

还有一类是重建clothed body mesh，重建带衣服的人体模型，文章有Tex2Shape，PIFu，PIFuHD等

  1. Tex2Shape[ICCV'2019]: Tex2Shape: Detailed Full Human Body Geometry from a Single Image
  2. PIFu[ICCV'2019]: PIFu: Pixel-Aligned Implicit Function for High-Resolution Clothed Human Digitization
  3. PIFuHD[CVPR'2020]: PIFuHD: Multi-Level Pixel-Aligned Implicit Function for High-Resolution 3D Human Digitization

目前在这个方向上已经有不少工作了，比如我之前用过的一些模型感觉都还不错，写过一些博客，可以提供一些参考：

总的来说，目前无论是人脸还是人体从RGB图片中的重建，其难度很多都体现在3D数据集的缺乏上。