基于视频的人机交互技术研究论文

摘   要

人机交互（Human-Computer Interaction）主要研究人、计算机以及彼此之间互相影响的有关技术。视觉语言（包括手势和面部表情）作为一种自然的人-人信息交互的辅助方式，具有所见即所得、自然方便等优点，因此在新一代“以人为中心”的智能人机交互中得到了广泛的关注。此次课题就是在这一方面做的一些尝试和探索，其中选择了基于手势的人机交互方式做研究，由于手势具有多样复杂性以及时空的差异性，因此，基于视觉的手势识别是一个极富挑战性的多学科交叉难题。

手势一般隐藏了一定的信息，我们需要对手势进行识别，得到其表达的含义，从而控制人机交互的实施。本文实现了一个利用视频手势提取进行人机交互的原型系统，大致可分为四个部分：视频采集和分离、图像预处理、手势提取和识别、人机交互。其中的关键部分是手势的提取和识别，手势提取需要采用图像处理的方法，而手势势识别采用的则是决策树的方法，通过对手势几何特征的分析和决策来判定手势类型。

采用以上方法对一段视频进行实时处理和分析，进而实现人机交互。其中主要的交互功能可以实现，实时性也较好，准确性也较高，不过该方法的鲁棒性不是很好，对光照强度较敏感。

关键词：人机交互，手势识别，图像处理，几何特征

                      

目   录

第一章  绪论

1.1 人机交互概述……………………………………………………………… 4

1.2 手势识别概述……………………………………………………………… 5

1.3 国内外研究现状…………………………………………………………… 6

1.4 本论文所做的工作及论文安排…………………………………………… 7

第二章  基于视觉的手势识别技术基础

2.1 手势建模…………………………………………………………………..  8

2.2 手势分割…………………………………………………………………… 11

2.3 手势分析…………………………………………………………………… 11

2.4 手势识别…………………………………………………………………… 12

2.5 本章小结…………………………………………………………………… 14

第三章  基于视频的人机交互设计

3.1 总体框架设计……………………………………………………………… 15

3.2 图像获取及预处理………………………………………………………… 16

3.3 手势提取和识别…………………………………………………………… 23

3.4 人机交互…………………………………………………………………… 28

3.5 本章小结…………………………………………………………………… 29

第四章 方案实现与结果分析

程序运行环境………………………………………………………………. 30

程序界面设计和主要功能…………………………………………………. 31

程序运行结果以及分析……………………………………………………. 36

本章小结……………………………………………………………………. 37

总结和展望……………………………………………………….  38

致谢……………………………………………………………….  39

参考文献………………………………………………………….  40