即刻App年轻人的同好社区
下载
App内打开
hblee
1月前
除了文本、图片、视频和 3D 模型,现在物理空间也能用 AI 生成了。Meta Reality Lab 昨天推出了一种用于重建环境和表示物理空间布局的方法:SceneScript。

SceneScript 不使用手工写死的方法给空间做标记,而是通过端到端的机器学习训练来直接推断房间的几何形状并标注出物体及其空间关系。类似于文本 token,SceneScript 设计了代表物理空间的 token 用来训练 LLMs,因此 LLMs 有能力识别现实空间结构并给出预测结果。

有了 SceneScript 的加持,XR 和 AI 的应用场景将极大地拓宽。想象这样的情况:头戴 XR 设备,语音唤起 AI 助手,用手指向厨房的一片空地双指轻捏选中,然后和 AI 助手说 "这块空间能不能放下某某品牌型号的冰箱?”,AI 助手就会给出答案,甚至给出其他适合的冰箱品牌和型号。

XR 和 AI 真的值得期待。

🔗 ai.meta.com
🔗 www.projectaria.com
00:45
620

来自圈子

圈子图片

虚拟与混合现实小组

210844人已经加入