Facebook更新AI Habitat虚拟空间训练集,提升AI视觉识别能力

智东西(公众号:zhidxcom)
编 | 赵佳蕊

导语:Facebook的研究人员创建了一些非常逼真的虚拟家庭、办公室等虚拟空间,以便于训练AI机器人/虚拟助理协作、查看、对话、推理、以及规划任务。

智东西6月17日消息,Facebook AI与Facebook Reality 实验室推出了Replica 和 AI Habitat 的最新版本。研究人员们参考了来自于物理环境的数据,为训练AI构建了一个虚拟空间。

其中AI Habitat是Facebook 为人工智能研究所创建的一个全新开放平台,今年3月份刚刚宣布开源。Replica 是Facebook Reality 实验室(原名为 Oculus 研究院)发布的一个真实空间样本数据集。

在这里,研究人员们可以训练AI机器人/虚拟助理协作、查看、对话、推理、以及规划任务。

一、虚拟空间的创建过程

Facebook研究人员使用高清晰度3D相机设备映射真实的办公室和家庭,创建这样的镜像环境。Replica 中包括了 18 个不同的空间模板,包括起居室、会议室、以及两层楼的房屋。

Facebook更新AI Habitat虚拟空间训练集,提升AI视觉识别能力

研究人员还开发了新的软件可以为虚拟的空间增加反射,这样可以混淆这种扫描系统。例如一个微小的细节,镜子反射和地毯纹理将是必要的,使这些空间具有几乎相同的真实物体。

Facebook称,其他模拟引擎每秒运行50到100帧,而AI Habitat每秒运行超过10000帧,这使得快速测试虚拟助理成为可能。

使用这个平台,研究人员将能够将一个AI系统放置在一个复制环境中,并教他们如何执行不同的任务。

二、虚拟空间的限制:AI无法与虚拟物体交互

Facebook更新AI Habitat虚拟空间训练集,提升AI视觉识别能力

Facebook 希望通过训练 AI 机器人,让它来响应虚拟客厅中的“帮我拿一下钥匙”等命令。

Facebook研究人员表示:在虚拟空间中的AI机器人也许能够学会如何从卧室移动到厨房,但是由于Facebook创造的人居环境中只是视觉上的,所以AI机器人无法与虚拟环境中的物体进行交互,比如不能拿起勺子。

缺乏与环境交互的能力是该平台的一个明显限制,但Facebook的研究人员正在寻求尽快添加该功能。

如果AR/VR应用程序可以学习如何与不同的物理环境进行交互,未来我们将能够通过照片级真人数字化身来参加远方亲人的生日聚会。