VALSE 论文速览 第01期：NeuralRecon: 基于单目视频的实时三维场景重建 ...

论文题目：NeuralRecon: 基于单目视频的实时三维场景重建

作者列表：孙佳明*  (商汤科技，浙江大学)，谢一鸣*  (浙江大学)，陈凌昊 (浙江大学)，周晓巍 (浙江大学)，鲍虎军 (浙江大学)

观看网址：

https://www.bilibili.com/video/BV1J44y1m7HM/

复制链接到浏览器打开或点击阅读原文即可跳转至观看页面。

论文摘要：

NeuralRecon提出了第一个基于深度学习的单目实时三维重建系统。与以往基于深度估计与TSDF融合的方法不同，NeuralRecon直接基于稀疏TSDF表示重建三维表面，并利用基于三维稀疏卷积的GRU来进行联合的局部表面重建与融合，使得当前时刻的重建结果可以基于过往的重建进行增量更新。该设计可以使得网络直接学习到三维表面的局部光滑、全局一致等先验信息，输出准确、连续的三维重建结果。NeuralRecon具有较好的泛化能力，并能在笔记本GPU上实时重建大范围的室内场景。NeuralRecon入选了CVPR 2021的口头报告，并获得了CVPR2021最佳论文奖提名。

论文信息：

[1] Jiaming Sun, Yiming Xie, Linghao Chen, Xiaowei Zhou, Hujun Bao “NeuralRecon: Real-Time Coherent 3D Reconstruction from Monocular Video ,” in Proceeding of IEEE Computer Vision and Pattern Recognition (CVPR), 2021.

论文链接：

[https://arxiv.org/pdf/2104.00681.pdf]

视频讲者简介：

孙佳明目前是商汤科技MIG-3D&MR部门的研究员，同时是浙江大学-商汤三维视觉联合实验室成员，导师是周晓巍研究员。于2017年本科毕业于南方科技大学计算机科学与工程专业，研究兴趣包括三维重建、基于学习的局部特征匹配、三维物体位姿估计与跟踪等。

个人主页：

https://jiamingsun.ml

特别鸣谢本次论文速览主要组织者：

月度轮值AC：王栋 (大连理工大学)、王鹤 (北京大学)

季度责任AC：王兴刚 (华中科技大学)