长期以来,眼动追踪一直是计算领域的圣杯之一。无论是可访问性问题、开辟新的形式因素,还是只是试图对我们与设备交互的方式进行新的旋转,数十年来的消费电子产品都充斥着尝试使用纱布来解锁一种新的输入形式的尝试。
卡内基梅隆大学的名字叫EyeMU (我认为“ICU”有点紧张)背后的想法很简单。这些天手机很大。如果您曾经尝试过单手使用现代旗舰,您就会知道其固有的痛点。如果幸运的话,也许您可以在用另一只手喝咖啡的同时用拇指点击图标。
虽然之前的大多数尝试都失败了,但目前的手机采用了各种不同的技术,可以帮助以自然的方式解锁此功能。我记得几年前尝试过一些带有眼动追踪的电视机,并且在尝试查看其中一张 Magic Eye 海报上的 3D 图像时感到同样的挫败感。然而,将好的前置摄像头、谷歌的 Face Mesh 和适当的算法结合起来,可以同时响应和预测用户意图。
“像谷歌和苹果这样的大型科技公司在凝视预测方面已经非常接近了,但仅仅盯着某物并不能让你到达那里,”副教授克里斯哈里森在一份新闻稿中说,“这个项目的真正创新是增加了第二种方式,例如向左或向右轻弹手机,结合注视预测。这就是它强大的原因。回想起来似乎很明显,但这是一个聪明的想法,让 EyeMU 更加直观。”
我认为,这里的另一个关键是不要试图只用眼睛来做所有事情。需要更传统的输入,但视频显示了研究人员如何依靠纱布和手势的组合完成大量工作。拍摄照片应用程序。查看图像会选择它。将其拉近脸部会放大并向左或向右摇动手机应用过滤器。这里最令人兴奋的是,现有硬件可以完成多少工作,作为补充触摸和语音输入的方式。
原文: https://techcrunch.com/2022/04/21/controlling-your-phone-with-your-eyes/