Facebook的开源AI虚拟家园项目介绍

在科技的助力下,“懒人”的梦想正一天天变得更加美好。“从楼上的书桌上把手机拿下来“,有了机器人的帮助,这种纯体力劳动变得毫无必要。又或者让机器人帮忙视力不佳的老人从陌生的地铁车站中穿行,这也似乎是AI加持下的新助理的职责所在。

Facebook的开源AI虚拟家园项目介绍

很多研究人员认为,要想实现此类场景应用,我们需要专注于体验人工智能(embodied AI)。简单来说,我们需要打造一个互动性的环境,让系统可以在类似真实世界的环境下进行训练,而不是和现在这样依赖于海量的静态数据集。

为了加速这一领域的研究,Facebook公开了一个新的名为AI Habitat(AI虚拟家园)项目,这是由Facebook AI实验室所创建的一个全新的模拟平台,专门用来训练所谓的embodied agents(体验代理,比如虚拟机器人),它们居住在一个拥有照片级真实的虚拟3D环境之中。

Facebook的开源AI虚拟家园项目介绍

该研究的目标是通过开放的模块化的设计,为体验人工智能研究打造更强大更灵活的设计标准。项目链接:https://aihabitat.org/

为了更好的演示这个新平台的作用,我们还公开了一个名为Replica的项目。该项目由Facebook Reality Labs(FRL,Facebook虚拟现实实验室)创建,它实现了对多层公寓、零售店铺和其它室内场景的超高真实度3D重建。

据我们所知,这应该是迄今为止(2019年6月)具有最高真实度的3D环境重建。如此接近真实的细节让虚拟空间和真实世界的差异几乎可以忽略不计(至少从视觉效果上),唯有如此,AI虚拟家园在模拟世界中所学会的技能才有可能在真实世界中施展。

AI Habitat除了可以在Replica的3D重建环境中运行,还可以在其它体验AI研究环境下运行,如Gibson和Matterport3D数据集。

备注:

1.Gibson是由斯坦福大学主导的3D空间数据集,覆盖211平方公里,有572个完整建筑物,1447个门,使用3D扫描和重建技术实现。

对于其中的每个空间,斯坦福都提供了:3D重建模型,RGB图,深度,表面法线纹理,空间切片,对象标注等。

http://gibsonenv.stanford.edu/database/?fbclid=IwAR00uH9c41b_olFYPrKL7gh19HQPwx_PU2iowjruOL_s_kvn6wrzCh3yj-s

2.Matterpor3D是由Google公司主导的3D空间数据集研究,关于Matterport3D的详细信息,请参考:

https://niessner.github.io/Matterport/?fbclid=IwAR0Q4k5sC71HheBuvIVHwL4tSMRWt2Lw7Y-K_ag358eRFdO2ufP74hx3yPA

总之,在设计AI Habitat项目之处,我们就已经考虑到了平台的兼容性和灵活性,以便充分利用类似研究的成果。

现在AI家园项目已经正式开放,这个平台也已经在实际的测试之中。

在下一篇文章中,将对AI家园项目的技术细节进行更深入的介绍。

发表评论

相关文章