用Vision Pro实时训练机器狗!MIT博士生开源项目火了(visionprovider)

AIGC动态欢迎阅读

原标题:用Vision Pro实时训练机器狗!MIT博士生开源项目火了

关键字:腾讯,小哥,数据,机器人,动作

文章来源:量子位

内容字数:3109字

内容摘要:

鱼羊 发自 凹非寺量子位 | 公众号 QbitAIVision Pro又现火爆新玩法,这回还和具身智能联动了~

就像这样,MIT小哥利用Vision Pro的手部追踪功能,成功实现了对机器狗的实时控制。

不仅开门这样的动作能精准get:

也几乎没什么延时。

Demo一出,不仅网友们大赞鹅妹子嘤,各路具身智能研究人员也嗨了。

比如这位准清华叉院博士生:

还有人大胆预测:这就是我们与下一代机器互动的方式。

项目如何实现,作者小哥朴英孝(Younghyo Park)已经在GitHub上开源。相关App可以直接在Vision Pro的App Store上下载。

用Vision Pro训练机器狗具体来看看作者小哥开发的App——Tracking Steamer。

顾名思义,这个应用程序旨在利用Vision Pro追踪人类动作,并将这些动作数据实时传输到同一WiFi下的其他机器人设备上。

动作追踪的部分,主要依靠苹果的ARKit库来实现。

其中头部追踪调用的是queryDeviceAnchor。用户可以通过长按数字表冠来重置头部框架到当前位置。

手腕和手指追踪则通过HandTrackingProv

原文链接:用Vision Pro实时训练机器狗!MIT博士生开源项目火了

联系作者

文章来源:量子位

作者微信:QbitAI

作者简介:追踪人工智能新趋势,关注科技行业新突破

0
分享到:
没有账号? 忘记密码?