新的手势控制技术可以将日常用品转变成遥控器,这可能会改变我们与电视机和其他屏幕的互动方式,您可以通过移动一杯茶来调整电视频道,通过滚动一辆玩具车来调节音乐播放器的音量,或者旋转一个铲子来暂停平板电脑上的烹饪视频。
今年10月在魁北克市的UIST2017会议上,兰卡斯特大学的研究人员将展示一种新颖的技术,将身体运动或对象运动用于与屏幕交互。
“Matchpoint”技术只需要一个简单的网络摄像头,就可以通过显示在屏幕角落的圆形窗口小部件轨道上的移动目标。这些目标对应于不同的功能,例如音量,更改频道或查看菜单。用户使用手,头或物体同步目标的移动方向,以达到研究人员称之为“自然的空间耦合”的目的,从而激活所需的功能。
与现有的手势控制技术不同,软件不会寻找已经被训练来识别的特定身体部位 - 例如手。兰开斯特的技术寻求旋转运动,因此不需要校准也不需要软件对物体内置有先前知识。即使在手没空闲时在沙发上站立或弯腰时,也可以为用户提供灵活性和便利性的操作。
用户也不需要学习具体的命令来激活不同的功能,就像市场上有一些手势控制的电视机一样,用户可以随意去耦。
选择音量调节或频道选择时,会出现滑块。用户按照滑块所指示的方向移动他们的手,头或物体,以更改音量或找到所需的频道。
除了电视机,该技术也可以与其他屏幕一起使用。例如,YouTube教程,如修理自行车或烘焙蛋糕,可以在平板电脑上轻松暂停和倒带而无需放下工具或面碗。
可以创建多个指针,允许多个用户同时指向交互式白板上的图纸或图片。Matchpoint还允许用户通过使用两只手放大和缩小来操纵白板上的图像,并旋转图像。
除了短期联轴器外,用户还可以将固定物体与控制器连接,即长时间保持其控制功能。例如,放在桌子上的杯子可以在向左或向右移动时改变音乐播放器上的轨道,并且可以使用滚动玩具车来调节音量。物体可以通过将其从相机的视场中移除从而失去与控制器的耦合。
兰开斯特大学计算与通信学院的博士生克里斯托弗·克拉克(Christopher Clarke)以及该技术开发人员说:“自然的空间耦合是手势控制的一种新方式,通过匹配运动而不是要求计算机识别特定对象。
“我们的方法能有一个更加用户友好的体验,您可以在不需要放下饮料的情况下更换频道,或者改变位置,无论是放松在沙发上还是站在厨房中。
“房子里的日常物品现在可以很容易地变成遥控器,所以当你最喜欢的节目即将从另一个频道开始时,就不用再找遥控器,现在房间里的每个人都有”遥控器“,甚至可以用你的宠物猫改变频道。“
研究人员认为,Matchpoint也适用于无法使用传统指针(如遥控器,鼠标和键盘)的人员的辅助工具。