2张图2秒钟3D重建!这款AI工具火爆GitHub,网友:忘掉Sora(实时3d重建)

AIGC动态欢迎阅读

原标题:2张图2秒钟3D重建!这款AI工具火爆GitHub,网友:忘掉Sora

关键字:腾讯,视图,图像,任务,两个

文章来源:量子位

内容字数:4207字

内容摘要:

丰色 发自 凹非寺量子位 | 公众号 QbitAI只需2张图片,无需测量任何额外数据——

当当,一个完整的3D小熊就有了:

这个名为DUSt3R的新工具,火得一塌糊涂,才上线没多久就登上GitHub热榜第二。

有网友实测,拍两张照片,真的就重建出了他家的厨房,整个过程耗时不到2秒钟!

(除了3D图,深度图、置信度图和点云图它都能一并给出)

惊得这位朋友直呼:

大伙先忘掉sora吧,这才是我们真正看得见摸得着的东西。

实验显示,DUSt3R在单目/多视图深度估计以及相对位姿估计三个任务上,均取得SOTA。

作者团队(来自芬兰阿尔托大学+NAVER LABS人工智能研究所欧洲分所)的“宣语”也是气势满满:

我们就是要让天下没有难搞的3D视觉任务。

所以,它是如何做到?

“all-in-one”对于多视图立体重建(MVS)任务来说,第一步就是估计相机参数,包括内外参。

这个操作很枯燥也很麻烦,但对于后续在三维空间中进行三角测量的像素不可或缺,而这又是几乎所有性能比较好的MVS算法都离不开的一环。

在本文研究中,作者团队引入的DUSt3R则完全采用了截然不同的方法。

它不需要任何相机校准或视点

原文链接:2张图2秒钟3D重建!这款AI工具火爆GitHub,网友:忘掉Sora

联系作者

文章来源:量子位

作者微信:QbitAI

作者简介:追踪人工智能新趋势,关注科技行业新突破

0
分享到:
没有账号? 忘记密码?