面向动态应用的实时手势识别系统

面向动态应用的实时手势识别系统(中文5500字,英文PDF)
摘要
虚拟环境一直被认为是一种通过各种不同的应用进行更深入、更有效的人机交互的手段。其应用范围包括复杂的科学数据分析、医学训练、军事模拟、恐惧症治疗和虚拟样机。随着普适计算的发展，现有的键盘、鼠标和笔的用户交互方式还不足以满足人机交互范围的不断扩大。手套和基于传感器的跟踪器使用起来很笨重、拘束，也不舒服。由于这些设备的限制，对可用指令集的努力也是有限的。直接使用手作为输入设备是一种创新的方法，用于提供自然的人机交互，其继承基于文本的界面，通过2D图形界面，多媒体支持的界面，到成熟的多参与者虚拟环境（VE）系统。设想一个未来能实现3D应用程序的人机交互时代，用户可以通过移动和旋转他的手来移动和旋转对象，所有这些都无需任何输入设备的帮助。
该研究工作致力于实现一个应用程序，该应用程序采用计算机视觉算法和手势识别技术，这反过来导致开发低成本的接口设备，用于使用手势与虚拟环境中的对象交互。该应用程序的原型架构包括一个中央计算模块，该模块应用camshift技术来跟踪手和手势。Haar like技术已被用作分类器，可用于定位手部位置和分类手势。手势的模式是通过映射在手中所形成的缺陷的数量与指定的手势进行识别来完成的。虚拟对象由OPEN GL库生成。这种手势识别技术旨在替代使用鼠标与虚拟对象进行交互。这有利于促进在虚拟环境中使用手势控制虚拟游戏、图像浏览等应用程序。
关键字：手势 虚拟对象 虚拟环境 跟踪 识别