基于动态手势控制的交互式体三维显示

被引:3
作者
潘文平 [1 ]
沈春林 [1 ]
张赵行 [2 ]
邢建芳 [1 ]
机构
[1] 南京航空航天大学自动化学院
[2] 中国科学院自动化研究所
关键词
隐马尔科夫模型; 手势识别; 体三维显示;
D O I
暂无
中图分类号
TP391.41 [];
学科分类号
080203 ;
摘要
研究了动态手势的跟踪和识别算法,实现了基于动态手势控制的交互式体三维显示。体三维显示可在真实的三维空间中呈现具有物理深度的三维图像,并且所显示图像可从360°范围内任意角度裸眼观看。采用基于视觉的动态手势控制,可从围绕显示系统的任意视角实现交互式体三维显示。首先从相邻帧帧差图像中检测特定的静态手势获得初始跟踪区域,并针对此区域建立手部肤色的分布模型。然后通过光流法更新跟踪区域内KLT特征点的位置,并按特征点群算法结合手部肤色的分布模型对特征点的位置进行修正。对于跟踪获得的动态手势轨迹,经过坐标变换并按八方向Freeman链码进行量化编码,获得手势观测序列。最后利用经过训练建立的手势隐马尔科夫模型库,实现动态手势的识别。将动态手势控制应用到交互式体三维显示并进行了实验。实验结果表明,手势跟踪和识别算法准确而快速,对不同手势的平均识别正确率超过93%,平均响应时间小于40ms,能从任意视角较好地实现交互式体三维显示。
引用
收藏
页码:88 / 95
页数:8
相关论文
共 8 条
[1]   基于数字微镜器件和旋转螺旋屏的体三维显示系统 [J].
潘文平 ;
沈春林 ;
李莉 ;
邢建芳 ;
樊琼剑 .
光电工程, 2010, 37 (10) :144-150
[2]   基于手势识别的机器人人机交互技术研究 [J].
陈一民 ;
张云华 .
机器人, 2009, 31 (04) :351-356
[3]   基于数字微镜的旋转体三维显示装置研究 [J].
李莉 ;
李玉峰 ;
沈春林 ;
龚华军 ;
杨忠 .
仪器仪表学报, 2008, (01) :67-72
[4]   基于二维旋转屏的体三维显示系统像素属性分析 [J].
林远芳 ;
刘向东 ;
刘旭 ;
张晓洁 .
光子学报, 2004, (04) :476-480
[5]   Real-time hand-tracking with a color glove [J].
Wang, Robert Y. ;
Popovic, Jovan .
ACM TRANSACTIONS ON GRAPHICS, 2009, 28 (03)
[6]   Simultaneous gesture segmentation and recognition based on forward spotting accumulative HMMs [J].
Kim, Daehwan ;
Song, Jinyoung ;
Kim, Daijin .
PATTERN RECOGNITION, 2007, 40 (11) :3012-3026
[7]  
Evaluation of a Volumetric Display for Radiation Therapy Treatment Planning .2 X. Gong,M. Kirk,J. Chu,J. Napoli,M. Rivard. Medical Physics . 2006
[8]  
Multi-Finger Gestural Interaction with3D Volumetric Displays .2 Grossman T,Wigdor D,Balakrishnan R. Proceedings of the17th Annual ACM Symposium on User interface Software and Technology (UIST‘04) . 2004