王选所师生参加SIGGRAPH ASIA 2023

第16届国际计算机图形学与互动技术学会(ACM SIGGRAPH)于2023年12月12日至15日在澳大利亚悉尼举行SIGGRAPH Asia 2023会议。这项一年一度的活动在亚太地区轮流举行,吸引了来自世界各地的先进技术与热爱研究、科学、艺术、动画、游戏、互动、教育和新兴技术的创意人士。

北京大学王选计算机研究所王鹏帅老师、博士生蒲果、硕士生吴将凯参加了此次会议。

王选所参会人员合影

王选所2022级博士生蒲果(导师连宙辉)为第一作者发表1篇论文,作者还包括王鹏帅,连宙辉(通讯)。论文具体信息如下:

Pu, Guo, Peng-Shuai Wang, and Zhouhui Lian. "SinMPI: Novel View Synthesis from a Single Image with Expanded Multiplane Images." SIGGRAPH Asia 2023 Conference Papers. 2023.

单图像新视角合成是一个具有挑战性且持续存在的问题,其旨在从一张单独的输入图像生成无数三维一致的视角。虽然目前学界已经付出了很大努力来提升生成的新视角的质量,但对底层场景表达的拓展却鲜有关注,而后者对于生成更加真实的新视角图像至关重要。本文提出了一种名为SinMPI的新方法,使用扩展的多平面图像(MPI)作为三维场景表达,以显著扩增MPI的视角范围,并从一个扩大的多平面空间中生成高质量的新视角。我深度估计器预测的深度将所有场景内容投射到扩展的多平面图像中,然后在深度感知映射和填补模块生成的伪多视角数据的监督下优化多平面图像。充分的定性和定量实验验证了我们的方法相较于现有方法的优越性。我们的代码和数据已公开(https://github.com/TrickyGo/SinMPI)。

蒲果同学做口头报告

王选所2021级硕士生吴将凯(导师张行功)为第一作者发表1篇论文,作者还包括刘黎明、谭云鹏、贾权禄、张颢丹、张行功(通讯作者)。论文具体信息如下:

JiangkaiWu, Liming Liu, Yunpeng Tan, Quanlu Jia, Haodan Zhang, and Xinggong Zhang. 2023. ActRay: Online Active Ray Sampling for Radiance Fields. In SIGGRAPH Asia 2023 Conference Papers (SA Conference Papers ’23), December 12–15, 2023, Sydney, NSW, Australia.

神经辐射场(NeRF)由于其高质量的重建能力与高保真的渲染效果受到广泛关注与持续改进。然而,巨大的训练耗时限制了其落地应用。尽管近年来辐射场训练已经取得了可观的加速,但距离实时训练还有很大的距离。为此,本文提出了一种在线主动光线采样策略ActRay,取代传统的光线等概率训练,以减少训练收敛所需的迭代次数。具体地,为了避免计算光线真实损失值的时间开销,本文提出了一种基于渲染梯度的损失传播算法,以高效地维护估计损失值。为进一步缩小估计损失值与真实损失值之间的差异,本文提出了一种基于上置信确界(UCB)的在线学习算法,来自适应地控制光线采样概率,补偿损失估计中的偏差。本文在真实数据集与合成数据集上测试了ActRay,结果表明其能加速辐射场训练至6.5倍。此外,本文还证明了ActRay的加速能力通用于不同的辐射场表示(隐式、显式、混合式)。我们将ActRay开源(https://pku-netvideo.github.io/actray/)并集成入领域内最流行的开源框架Nerfstudio。

吴将凯同学做口头报告

CLOSE

上一篇 下一篇