基于多模式接口技术的聋人与正常人交流系统

被引：9

作者：

高文

陈熙霖

马继勇

王兆其

机构：

[1] 中国科学院计算技术研究所!北京

[2] 哈尔滨工业大学计算机系哈尔滨

[3] 哈尔滨工业大学计算机系!哈尔滨)

来源：

计算机学报 | 2000年 / 12期

基金：

国家自然科学基金重点项目;

关键词：

手语合成; 人脸特征检测; 多模式接口;

D O I：

暂无

中图分类号：

学科分类号：

摘要：

讨论了利用多模式接口技术处理异种语言模式交流的问题 .作为连接聋哑人和听力正常人的一个桥梁 ,我们将手语识别、手语合成、唇读、人脸特征检测以及特定人面部动画相结合 ,构成了手语转换和口语交流的代理 .文中对汉语手语识别和合成中的一些特殊问题进行了讨论 .对手语识别采用数据手套作为手语输入的数据采集设备 .对于一些同形异意的手语词汇 ,利用唇读得到的辅助信息可以达到提高识别率的效果 .对手语的合成 ,采用运动跟踪获得的信息来加强原来基于手工建模的三维虚拟人合成 ,增强了手语合成与显示的自然逼真度 .文中的研究验证了利用多模式接口技术可以有效地实现异种语言模式间的交流

引用

页码：1253 / 1260

页数：8

共 4 条

[1]

Hand gesture coding based on experiments using a hand gesture interface device.[J].Tomoichi Takahashi;Fumio Kishino.ACM SIGCHI Bulletin.1991, 2

[2] 一种基于传感器的人体上肢运动实时跟踪方法 [J].

王兆其 ;

高文 ;

徐燕 .

计算机学报, 2001, (06) :616-619

[3] 基于数据手套输入的汉语手指字母的识别 [J].

吴江琴 ;

高文 ;

陈熙霖 .

模式识别与人工智能, 1999, 12 (01) :74-78

[4]

聋人手语概论.[M].傅逸亭;梅次开著;.学林出版社.1986,

← 1 →