以aria项目为例,谷歌将在公共场所测试AR眼镜原型

谷歌产品经理Juston Payne今天发布博客表示,将针对谷歌AR眼镜展开更有效、更有落地价值的测试项目。

就在不久前的IO开发者大会上,谷歌公布了AR眼镜原型,并演示了一个实时转录和翻译的系统。

今天Juston Payne表示,这是一个早期的AR眼镜原型。而且仅在实验室环境测试条件相当有限。为此,谷歌将在下个月开始,在真实世界中(公共场所)测试AR原型。

  • 测试设备:谷歌AR眼镜原型
  • 硬件功能:内置AR演示、麦克风、摄像头(工作期间外部LED会亮起);
  • 软件功能:不能拍照和录视频,但视频数据会被系统使用;
  • 测试地点:美国部分地区;
  • 测试规模:几十名,仅员工和受信任的测试员;
  • 数据存储:图像信息在完成后删除,图像内识别出的数据保存30天,之后自动删除;

目的就是,要了解AR眼镜在日常生活中到底能提供哪些帮助,例如基于AR眼镜的导航系统,需要根据复杂的路况和天气做判断,这在实验室内基本不能完成。

据悉,在公共场所谷歌将有几十名员工佩戴AR眼镜原型机,进行小规模测试。并且重点强调,这些测试员都必须经过设备、协议、隐私和安全培训,也是挑选过的、值得信赖的。

谷歌明确,测试期间的AR眼镜原型具备:显示模组、麦克风、摄像头。但是部分功能使用将受限,例如不支持摄影和拍照,但图像数据会被利用到如翻译菜单,或者识别环境进行导航等。

第一人称数据集的重要性

我们经常再谈,AR眼镜的杀手级应用是什么。其实,包括科技巨头都在探索之中,而探索的背景就是基于第一人称视频数据展开研究。

简单来说,谷歌这一测试基本上就是效仿Meta的Project Aria测试项目。据青亭网了解,Project Aria项目最早于2020年开始测试并收集数据。

早期让部分员工在公司和家庭佩戴收集数据,后期逐渐开放给代理商,或者有偿的测试员等。测试地区也从美国,到英国、新加坡等,累计到6月份共有超过3000人参与测试,规格可谓是足够庞大。

Meta测试员着装

可能是考虑到是当地法律限制,Meta在伦敦收集数据集时要求员工穿着醒目的工作服,以此提醒周围观众。当然,拍摄的视频自动模糊人脸等信息。

不仅如此,Meta在6月份还将部分在美国拍摄的Project Aria第一人称数据集进行开源,目的就是面向AI、ML科研人员,推动第一人称计算机视觉、场景感知、AI、ML算法的发展。

该数据集名为Project Aria Pilot,包含了159段第一人称视频,累计时长7小时,分别拍摄于每个5个地点,包含各种日常生活场景,比如洗碗、开门、做饭、在客厅使用手机、玩游戏、锻炼等等。详细阅读:《Meta开放Project Aria Pilot数据集,未来将开发实时3D地图》

从Meta Quest 2上我们已经看到,VR技术的发展中计算机视觉已经成为重要组成部分,从最初SLAM定位追踪,光学手柄追踪,到后续的手势追踪,桌面和沙发追踪等。而在AR/MR场景中更是如此,对于第一人称视觉数据的收集、场景感知已经展开。

谷歌AR眼镜原型测试细节

1,测试地点

当时Meta测试环境是办公室、被允许的住宅等私人场所,而公共场所列出了部分明确禁止的场所,例如泳池、更衣室。

谷歌AR眼镜原型测试中,目前限于美国部分地区,且均是有限范围的公共场所。同样列出镜子的场所,如:学校、政府办公区、医疗保健场所、宗教场所、儿童专区(游乐场等)、集会、应急响应场所等。

同时,测试员在驾车、体育运动时也被明确禁止测试AR眼镜。

2,测试员要求

谷歌表示,所有测试员都会经过严格的设备、协议、隐私、安全和设备培训。也就是说,测试员充分了解使用限制,安全规范等。

目前的测试员工仅谷歌员工,以及部分受信任的测试员(理论上是Google Research成员,没有详细说明)。

谷歌暂时未公布测试员的穿着详情,有可能在美国地区测试会没有这一方面的要求。

3,测试内容

因为这些AR眼镜原型机因为具备AR显示能力,相比Meta的Project Aria功能更完善,因此在实际应用场景上也有不同的测试项目。

比如,AR眼镜原型机的硬件耐用性如何,佩戴体验如何,实用性如何,在这期间都会得到进一步验证。

内容上包括,语音转文字、AR翻译、AR导航等等场景。

4,拍摄和录制

因为AR眼镜原型机外观上也更接近普通眼镜,一方面大家可能看不出来,同时也为了照顾周围群众的隐私,谷歌的AR眼镜只要是摄像头开启工作,外侧的LED都会保持亮起状态,以此来提醒周围朋友。

谷歌AR眼镜原型在测试中不能拍照、录制视频,摄像头的捕捉画面仅被用于系统级的功能,例如AR导航、翻译、视觉搜索等。

重要的是,当周围被拍摄的人知道在被拍摄后,可以向测试者提出要求删除视频。

拍摄的图像数据将在体验完成后就被删除,而拍摄图像产生的数据将会被用于分析、后期调试。期间拍摄到的人脸、车牌等隐私信息都会被消除,然后存储在安全级高的服务其中,仅少数谷歌员工有权访问和调用。

而且,图片产生的数据也将在30天后删除。

5,测试目的

前面也提到,就是测试AR原型本身,通过研究软件体验,评估和优化这些场景的使用价值,例如AR导航、翻译、转录、视觉搜索的体验,开发出更优秀的产品,提供前团后的良好体验。

发表回复

您的电子邮箱地址不会被公开。 必填项已用*标注

此站点使用Akismet来减少垃圾评论。了解我们如何处理您的评论数据