AI即将拥有自我意识？Facebook推“Ego4D”开启元宇宙大门新智元报道来源：FacebookAI编辑

文章图片
新智元报道
来源：FacebookAI
编辑：小咸鱼好困
【新智元导读】今年11月， Facebook将开源让AI拥有以第一人称视角与世界进行交互的能力的Ego4D（Egocentric4DPerception）计划。其中包含超过3025小时的第一人称视频，包括来自73个城市的700多名参与者的日常生活。
你有想象过，有一天，戴上头盔，眼前立刻悬浮出科幻场景般的炫丽世界吗？

文章图片
在钢铁侠电影中，每当托尼斯塔克穿上机械盔甲，头盔合上的那一刻，超级人工智能管家贾维斯就会在他眼前出现，帮助他分析眼前的情况。
钢铁侠头盔里的贾维斯，其实是以第一人称视角来理解世界的，所以会带来电影里那样的沉浸式体验。
在未来，增强现实(AR)眼镜和虚拟现实(VR)耳机等设备在日常生活中，将会变得像智能手机一样普遍。
想象一下，你的增强现实设备准确地显示了如何在鼓课上握住木棒，指导你完成一个食谱，帮助你找到丢失的钥匙，或者像全息图一样浮现出你的记忆。

文章图片
为了实现这些新技术，人工智能需要像我们一样，从第一人称的角度理解世界并与它互动，这在研究界，通常被称为以第一人称为中心的视觉感知。
然而，今天的计算机视觉（CV）系统从数以百万计的照片和视频中学习，尽管发展飞速，有了喜人的研究进展，可这些照片和视频都是以第三人称视角拍摄的，相机的视角只是一个行动的旁观者视角。
嗯。。。钢铁侠系列的电影都结束了，现实生活中什么时候才能见到像贾维斯那样，以第一视角理解世界的AI ，出现在增强现实设备里呢？
别着急，有眉目了！

文章图片
「Ego4D」计划
2021年， FacebookAI正在宣布开展「Ego4D」（Egocentric4DPerception）计划，这是一个雄心勃勃的长期项目，为的就是解决以第一人称视觉为中心的感知领域的研究挑战。
「Ego4D」（Egocentric4DPerception）是一个大规模的以第一人称视觉为中心的数据集，具有前所未有的多样性。它由来自全球9个不同国家74个地点的855名独特参与者收集的3025小时视频组成。
该项目汇集了88名研究人员，将这一数据集的规模大幅增加了一个数量级，比任何其他项目都大20多倍，并且即将在11月底开放下载。

文章图片
让AI也体验「第一人称视角」
就拿过山车来说吧，你在上面体验着肾上腺素飙升的快感。而下面的人则是看得一脸懵比。

文章图片
人工智能，就更懵了……如果把CV系统绑在过山车上，它估计完全不知道自己该看些什么。即便在地面上从旁观者的角度看了几十万张过山车的图片或视频，也是如此。

文章图片
AI在第一人称视角把自行车上的部件识别为「红绿灯」
Facebook首席研究科学家KristenGrauman表示：「为了使人工智能系统能够像我们一样与世界互动，人工智能领域需要发展到一种全新的第一人称感知范式。这意味着教人工智能在实时运动、互动和多感官观察的背景下，通过人类的眼睛理解日常生活活动。」