DUSt3R

DUSt3R是一种全新的方法，用于从任意图像集合中进行密集且无约束的立体三维重建。它的创新之处在于不需要先前的相机校准信息或视点姿态，而是将成对重建问题构建为点地图的回归，放宽了通常的投影相机模型的硬约束。DUSt3R的网络架构基于标准Transformer编码器和解码器，可以利用强大的预训练模型。该方法直接提供了场景的3D模型和深度信息，并且能够无缝地从中恢复像素匹配、相对和绝对相机姿态。该方法在单目/多视图深度估计以及相对姿态估计等任务上取得了新的最佳结果。总之，DUSt3R使得几何三维视觉任务变得更加容易。