手势交互的应用前景

移动开发 Android
手势交互是利用计算机图形学等技术识别人的肢体语言,并转化为命令来操作设备。手势交互是继鼠标、键盘和触屏之后新的人机交互方式。手势交流是人的本能,在学会语言和文字之前,已经能用肢体语言与人交流。

手势交互是利用计算机图形学等技术识别人的肢体语言,并转化为命令来操作设备。手势交互是继鼠标、键盘和触屏之后新的人机交互方式。手势交流是人的本能,在学会语言和文字之前,已经能用肢体语言与人交流。

其实在过去30年,研究人员一直在研究基于肢体语言的交互系统。因为手势在日常生活中最为频繁,便于识别。所有基于肢体语言的研究主要以手势识别为主,而对身体姿势和头部姿势语言较少。

gesture control

翻译自《Gesture-controlled user interfacers,what have we done and what ’s next?》

手势交互系统中主要有几个部分:人、手势输入设备、手势分析和识别和被操作的设备或界面。最近几年生产出的Kinect和Leap Motion与之前的研究相比,整个手势交互系统都有较大的发展进步:

1.。面向大众,而不只是老年人和残疾人,普通用户也可以使用这些产品。

2.手势输入设备。比起鼠标和键盘操作,这些手势交互是更加方便的交互方式。早期需要穿戴手套,对于普通用户来说比较累赘。之后摄像头作为输入设备,用户并不需要和实体设备接触,而且可以分析手势的3D运动轨迹。

3.手势分析。计算机图形学等科学的发展,识别率得到提升,可以实时捕捉手臂和手指的运动轨迹,技术推动了人机交互的发展。

4.被操作的设备或界面。可以识别的手势更多,可以输入的命令更多,不再限定在特定平台执行某项特定的任务。 MYO腕带可以视作一个开放的手势识别平台,除了电脑和电视机,智能电器和飞行器等设备都可以被操作,Leap Motion未来也可能被用来进行虚拟操作,比如虚拟雕塑和虚拟手术。

leap motion

Leap Motion的手势交互

但和Leap Motion商业产品而不是***的,还存在一定局限性。kinect是游戏产品,在开始使用时,需要一定的初始化操作。Leap Motion使用过程中,手要悬浮在空中,使用一段时间之后会比较疲劳。Leap Motion的识别精度达到了次毫米级,连接之后可以立即使用,但由于手悬浮时难免有细微的抖动,对屏幕在几个像素范围对精准操作非常困难。

Kinect主要是识别运动轨迹,手停留几秒识别为“选择”操作,但还没有更进一步的将手指关节识别为命令,Leap Motion可以识别手指关节的变化(如抓取),但像在电脑端那样执行任务流是不适合的。在产品商业化和设计时,扬长避短才能发挥手势交互真正的优势。

MYO-gesture-control-armband-gear-patrol-full

MYO腕带

Leap Motion和Kinect运用的是计算机图形学,MYO则涉及到生物科学,臂带上的感应器可以捕捉到用户手臂肌肉运动时产生的生物电变化,从而判断佩戴者的意图,再将电脑处理的结果通过蓝牙发送至受控设备。MYO的优点是不受镜头的摄像范围限制,反应更灵敏,但只限于单手手势,并且需要额外佩戴设备。

 与已有成熟的交互方式相比,手势交互的技术更复杂,但同时有很多优势:

1.学习成本较低,识别人的自然手势,不像传统交互那样记住双击和鼠标左右点击的区别。

2.可以脱离实体接触,实现远距离控制。

3.交互动作更加丰富和自然,不同的操作有不同的手势,不像传统交互局限于点击和滑动等几种常用的操作。

4.对用户正常活动影响较少,可以随时继续手势操作。

因为游戏用户对科技接受程度更高,新鲜技术带来的游戏乐趣抵消了技术缺陷,所以手势交互率先在游戏领域得到了应用。未来将逐步进入人工智能、培训教育和仿真技术领域,但像传统交互形式一样进入大众化消费领域还需要一段时间。

责任编辑:徐川 来源: 晓生的博客
相关推荐

2011-08-22 10:31:26

MeeGoN9诺基亚

2013-07-29 15:50:26

移动应用交互

2022-11-30 07:49:49

交互事件屏幕手势识别

2011-05-11 12:59:18

HTML5

2010-08-23 09:49:53

.NET 4

2011-04-13 09:28:59

2020-04-24 10:53:08

自然语言处理NLP是人工智能

2013-02-19 10:47:17

情感交互产品交互趋势

2013-04-17 09:50:36

用户体验设计UED手势

2021-01-22 17:23:32

鸿蒙HarmonyOS应用

2016-03-03 10:19:30

交互触控

2017-07-24 11:57:27

手势交互王晓涛

2019-01-03 09:45:20

Go 前端 Web

2009-05-06 08:44:27

苹果iTunes移动OS

2011-09-07 09:55:25

2011-05-10 10:25:22

MIDletBlackBerry

2018-04-18 08:57:59

AndroidiOS移动系统

2012-08-10 11:14:07

CRM云计算管理机制

2018-09-17 14:26:12

2023-03-22 11:17:04

ChatGPT供应链人工智能
点赞
收藏

51CTO技术栈公众号