VALSE 论文速览 第29期：通过观察镜中人来重建三维人体姿态

论文题目：通过观察镜中人来重建三维人体姿态

作者列表：方琦 (浙江大学)，帅青 (浙江大学)，董峻廷 (浙江大学)，鲍虎军 (浙江大学)，周晓巍 (浙江大学)

B站观看网址：

https://www.bilibili.com/video/BV1bP4y1V7k1/

论文摘要：

这篇文章探究了一种新的任务，从单张包含人和镜子的图片中重建三维人体姿态。与单视角三维姿态估计的一般场景相比，镜面反射提供了一个额外的虚拟视角来解决深度歧义性。本文提出了一种基于优化的框架，利用镜面对称约束重建出了准确的三维人体姿态。同时本文还利用单张图片中的消影点去估计镜面法向。为了验证提出的方法，本文收集了一个大规模的数据集，称为Mirrored-Human，它涵盖了各种各样的人、姿态和背景。实验表明，将我们估计的三维姿态作为该数据集的伪真值，用其来训练现有的单目方法后，这些方法的准确性和泛化能力得到较大的提升。该论文入选了CVPR 2021的口头报告。

论文信息：

[1]Qi Fang, Qing Shuai, Junting Dong, Hujun Bao, and Xiaowei Zhou. "Reconstructing 3D Human Pose by Watching Humans in the Mirror." In Proceedings of the IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR’21), pp. 12814-12823. virtual, June 2021.

论文链接：

[https://openaccess.thecvf.com/content/CVPR2021/papers/Fang_Reconstructing_3D_Human_Pose_by_Watching_Humans_in_the_Mirror_CVPR_2021_paper.pdf]

代码链接：

[https://zju3dv.github.io/Mirrored-Human/]

[https://github.com/zju3dv/EasyMocap]

视频讲者简介：

方琦，浙江大学计算机学院CAD&CG实验室硕士生，导师是周晓巍研究员，研究方向为三维人体姿态估计、运动捕捉等。在CVPR、ECCV、TPAMI上发表过多篇论文。

特别鸣谢本次论文速览主要组织者：

月度轮值AC：张正 (哈尔滨工业大学(深圳))、李爽 (北京理工大学)

季度责任AC：许永超 (武汉大学)