CMU卡内基梅隆开源 PhotoReg:对3D高斯泼溅模型进行光度配准
发布时间:2025-08-05 09:35 浏览量:2
以下内容来自小六的机器人AI学习圈(7年积累,全国最大的机器人SLAM、AI交流社区,14000+主题分享、700+教学视频,19000+问答评论;为SLAM行业AI从业者提供从入门、学习、交流、求职、线下链接、合作、咨询、答疑等一系列的服务)知识星球每日更新内容~
CMU卡内基梅隆开源 PhotoReg:对3D高斯泼溅模型进行光度配准
【PhotoReg: Photometrically Registering 3D Gaussian Splatting Models】
文章链接:2410.05044v1.pdf
项目主页:PhotoReg: Photometrically Registering 3D Gaussian ...
构建准确的环境表示对于智能机器人在部署过程中做出决策至关重要。光真实感环境模型的进步使得机器人能够开发出超真实的重建,并生成便于人类检查的直观图像。特别是最近引入的3D高斯泼溅(3DGS),可以用数百万个椭球体原件描述场景,并实时渲染,因此迅速受到关注。然而,仍存在一个关键未解决的问题:如何将多个3DGS融合成一个连续的模型?解决这一问题将使机器人团队能够联合构建其周围环境的3DGS模型。本文的关键洞察在于利用光真实感重建(从3D结构渲染出逼真的2D图像)和3D基础模型(从图像对预测3D结构)之间的对偶性。为此,我们开发了PhotoReg框架,用于将多个光真实感3DGS模型与3D基础模型进行配准。由于3DGS模型通常由单目摄像头图像生成,具有任意比例,为解决这一问题,PhotoReg通过考虑深度估计,主动强制不同3DGS模型之间的比例一致性。随后,通过精细的光度损失逐步优化对齐,从而生成高质量的融合3DGS模型。我们在标准基准数据集和自行采集的数据集上对PhotoReg进行了严格评估,包括两个四足机器人实验。
「小六的机器人AI圈」为机器人AI行业从业者提供从入门、学习、交流、求职、线下链接、合作、创业、行业内幕、咨询、答疑等一系列的服务。快人一步,步步领先!已沉淀6年,星球内部资料包括秘制视频课程、独家大咖采访及经验、项目对接、星主独家思考、同城线下交流会、求职招聘&笔面试题、学习打卡挑战、小组学习、最新前沿论文分享等等.
联系客服领券加入,3天不满意全额退款~