虽然通过手势来控制电脑已经不是什么新鲜事了,但要实现该功能通常需要一些外设或者特殊的嵌入式硬件。不过加拿大滑铁卢大学正在开发的 Typealike 系统,能够在不增加任何电子装置的情况下实现手势操作。Typealike 由两个部分组成:一个放在电脑网络摄像头上的向下倾斜的小镜子,以及在该电脑上运行的基于机器学习的软件。
以调高音量为例,用户只需要做一个大拇指向上的手势,软件会识别这个手势,并相应地提高音量。滑铁卢大学谢里顿计算机科学学院的硕士毕业生纳林·奇伯(Nalin Chhibber)说:“它始于一个关于使用网络摄像头新方法的简单想法。网络摄像头是对准你的脸的,但在电脑上发生的大多数互动是围绕你的手进行的。因此,我们想,如果网络摄像头能接收到手势,我们能做什么?”
此外,通过将网络摄像头的视角下移到他们的手上,用户就不会有Typealike不断查看他们的脸所带来的隐私问题。由于每个人的手都有不同的外观和动作,研究人员使用30名志愿者创建了一个视频数据库,其中包括该系统目前使用的36种手势。然后对该数据库进行了机器学习算法的训练,学习如何在手和照明条件不同的情况下持续识别每个手势。
目前,该系统识别手势的准确率为 97%。据认为,一旦进一步发展,Typealike 也可用于虚拟现实环境,使手持式控制器成为不必要的。Daniel Vogel 副教授说:“我们一直在着手制造人们可以轻松使用的东西。人们看着像 Typealike 这样的东西,或者人机交互领域的其他新技术,他们说这很有意义。这就是我们想要的”。