谷歌多年来一直致力于开发一种“新的交互语言” ，今天它正在分享它迄今为止开发的内容。该公司在名为In the lab with Google ATAP的新系列的第一集中展示了它在其新交互语言中定义的一组动作。这个首字母缩略词代表 Advanced Technology and Projects，它是谷歌更具实验性的部门，该公司称其为“硬件发明工作室”。
这种“交互语言”背后的想法是，通过更好地理解我们的非语言线索，我们周围的机器可以更加直观和感知我们与它们交互的愿望。 ATAP Lauren Bedal 的高级交互设计师告诉 Engadget，“我们周围的设备……应该感觉像是最好的朋友。” “他们应该有社交风度。”
具体来说（到目前为止，无论如何），ATAP 正在分析我们的动作（而不是声调或面部表情），以查看我们是否准备好参与其中，因此设备知道何时留在后台，而不是用信息轰炸我们。该团队使用该公司的Soli 雷达传感器来检测周围人员的接近度、方向和路径。然后，它解析这些数据，以确定是否有人在看、经过、接近或转向传感器。
谷歌正式确定了这组四个动作，称它们为 Approach、Glance、Turn 和 Pass。这些操作可用作触发智能显示器或其他类型的环境计算机等事物的命令或反应。如果这听起来很熟悉，那是因为其中一些手势已经在现有的支持 Soli 的设备上工作。例如， Pixel 4有一个名为 Motion Sense 的功能，当你挥手时它会打盹警报，或者如果它检测到你的手靠近它，它会唤醒手机。谷歌的Nest Hub Max 使用它的摄像头来查看您何时抬起张开的手掌，并会暂停您的媒体播放作为响应。
方法感觉类似于现有的实现。它允许设备告诉您（或身体部位）何时越来越近，因此它们可以显示您可能在足够近的地方看到的信息。与 Pixel 4 一样，当Nest Hub 知道您在附近时，它会使用类似的方法来提取您即将到来的约会或提醒。如果您在附近，它还会在倒计时屏幕上显示触摸命令，并在您远离时切换到更大、易于阅读的字体。
虽然 Glance 似乎与 Approach 重叠，但 Bedal 解释说，它可以用于了解一个人在使用多个设备时的注意力在哪里。 “假设你正在和某人通电话，而你碰巧瞥了一眼房子里的另一台设备，”她说。 “由于我们知道您可能将注意力集中在另一台设备上，因此我们可以提供建议，将您的对话转移到视频通话中。” Glance 还可用于快速显示信息片段。
不太熟悉的是转弯和传球。 “通过转向和远离，我们可以让设备帮助自动化重复或平凡的任务，”贝达尔说。它可用于确定您何时为多阶段流程中的下一步做好准备，例如遵循屏幕上的食谱，或重复的东西，例如开始和停止视频。与此同时，Pass 告诉设备您还没有准备好参与。
很明显，Approach、Pass、Turn 和 Glance 建立在 Google 多年来在其产品中实施的点点滴滴的基础上。但是 ATAP 团队也尝试将其中一些动作结合起来，比如传球和扫视或接近和扫视，这是我们在现实世界中还没有看到的东西。
为了让这一切正常运作，谷歌的传感器和算法需要非常擅长识别您何时执行特定操作，以及何时不执行操作。不准确的手势识别可能会将原本应该有帮助的体验变成令人难以置信的令人沮丧的体验。
ATAP 的设计主管 Leonardo Giusti 说：“这是我们对这些信号的最大挑战。”他说，与在移动设备上相比，插入电源的设备可以运行更复杂的算法。使系统更准确的部分努力是收集更多数据来训练机器学习算法，包括正确的动作以及类似但不正确的动作（因此他们也学会了不接受什么）。
“减轻这种风险的另一种方法是通过用户体验设计，”朱斯蒂说。他解释说，该系统可以提供建议而不是触发完全自动化的响应，以允许用户确认正确的输入，而不是对可能不准确的手势采取行动。
尽管如此，我们不会因为谷歌设备在不久的将来误解我们的这四个动作而感到沮丧。 Bedal 指出：“我们正在做的纯粹是研究。我们不专注于产品集成。”需要明确的是，谷歌正在分享这种对交互语言的看法，作为其发布的视频系列的一部分。 In the lab with ATAP 的后续剧集将涵盖这种新语言之外的其他主题，Giusti 说它的目的是“让人们深入了解我们正在探索的一些研究”。
但是很容易看出这种新语言最终如何进入谷歌所做的许多事情中。多年来，该公司一直在谈论其对“环境计算”世界的愿景，它设想将各种传感器和设备嵌入我们周围的许多表面，随时准备预测和响应我们的每一个需求。对于这样一个不让人感到侵入或侵入的世界，有许多问题需要解决（其中保护用户隐私为主）。拥有知道何时远离以及何时提供帮助的机器是该挑战的一部分。
Bedal 也是一名专业的编舞，他说：“我们相信这些动作确实暗示了一种未来与计算机交互的方式，这种方式通过利用我们移动的自然方式感觉是不可见的。”
她补充说，“通过这样做，我们可以做的更少，计算机可以……在后台运行，只在正确的时刻帮助我们。”