滑铁卢大学开发创意软件 摄像头前做手势让电脑听你话

作者:滑铁卢大学时间:2022-01-10来源:滑铁卢大学

通过手势控制电脑不是新鲜事,但这样做通常需要使用外围电子设备或特殊的嵌入式硬件。然而 Typealike系统,带来了这样的功能,只要使用现有的电脑,不需要额外的电子产品。

滑铁卢大学开发创意软件 摄像头前做手势让电脑听你话-异乡好居

Typealike系统目前正在由加拿大滑铁卢大学(University of Waterloo)开发中,它由两部分组成:一个放置在电脑摄像头上方的向下倾斜的小镜子,以及运行在电脑上的基于机器学习的软件。

举个例子,当用户想把扬声器音量调大,他们只需用一只手在键盘旁边竖起大拇指,软件便会识别这个手势,并相应地增加音量。

滑铁卢大学开发创意软件 摄像头前做手势让电脑听你话-异乡好居

滑铁卢大学Cheriton电脑科学学院最近刚毕业的硕士Nalin Chhibber说:“它始于一个简单的网络摄像头使用新方法的想法。网络摄像头对着你的脸,但电脑上发生的大多数互动都是在你的手周围进行的。所以,我们想,如果网络摄像头可以捕捉到手势,我们能做什么呢?”

此外,通过将网络摄像头的视角向下倾斜到他们的手上,用户就不会像Typealike那样不断地对着自己的脸而担心隐私问题。

因为每个人的手看起来和动作都不一样,研究人员用30名志愿者创建了一个视频数据库,其中包含了系统目前使用的36种手势。然后,在这个数据库上训练机器学习算法,学习在手和光照条件变化的情况下,始终如一地识别每个手势。

滑铁卢大学开发创意软件 摄像头前做手势让电脑听你话-异乡好居

该系统目前识别手势的准确率为97%。一般相信,如进一步开发,Typealike也可以用于虚拟现实环境,使手持控制器变得不必要。

该硏究最近发表在《ACM人机互动》期刊。

免责声明:以上内容文字或图片转载自互联网,不代表本网站赞同其观点和对其真实性负责,如果以上内容侵犯您的版权或者非授权发布请联系在线客服或发送邮件info@uhomes.com申请删除,谢谢。