基于虚拟人合成技术的中国手语合成方法

介绍了一种中国手语合成方法,实现了文本到中国手语的自动翻译,并使用虚拟人合成技术,实现了中国手语的合成与显示,以此帮助聋人与听力正常人之间实现自然交流.在该方法中,首先应用两只数据手套和3个6自由度位置跟踪器,基于运动跟踪的原理,记录真实人体演示每个手语词的运动数据,建立一个初始的手语词运动数据库.然后,应用一种基于控制点的人体运动编辑方法,对每个手语词的运动数据进行编辑与微调,最后得到一个高质量的手语词运动数据库.当给定一个文本句子时,应用人体运动合成方法,对每个手语词的手语运动片段进行拼接合成,最终生成一个完整的手语运动,并基于VRML的人体运动显示方法将合成的运动逼真地显示出来.基于该方法,在PC/Windows/VC6.0环境下实现了一个中国聋人手语合成系统.该系统采集了《中国手语》(含续集)中收录的5 596个手语词,可以合成一般生活与教学用语.经聋校的老师和学生确认,合成手语准确逼真,可以广泛应用于教学、电视、Internet等多种大众媒体,帮助聋人参与其他听力正常人的活动,具有广泛的应用前景和重要的社会意义.

基于词根的中国手语识别方法

迄今为止 ,手语识别面临的最大问题是如何解决词汇集易扩充的连续识别 提出一种大词汇量连续中国手语识别方法 ,将词根作为识别基元 ,由于基元的数目是有限的 ,因此基于HMM的手语信号的训练和识别变得比较容易处理 ,可以实现更大词汇量的识别 除此之外 ,所提方法还有利于实现手势语和手指语的混合识别 从中国手语中共整理出2 4 0 0多个词根 ,为每个词根建一个并行的HMM模型 ,对各数据流的HMM模型进行聚类 ,确定出手语识别的基元 根据这些基元对手势词编码 ,并建立了树状搜索网格 ,使用状态结点上高斯密度函数聚类、语言模型和N Best方法提高系统的速度和精度 对 5 119个手语词做了实验 ,连续语句的识别率可在 90

一种中国手语单手词汇识别系统

利用数据手套、视觉设备和肘部弯曲传感器作为输入设备,提出了一种基于特征匹配和信息融合的中国手语单手词汇识别系统。首先利用手姿信息和手势信息的类型判别来确定待识词所属类别,并选择相应的词库;然后根据所属类别将待识词和库中词的相应特征按一定的规则进行匹配;最后利用D-S证据理论将各特征的匹配结果进行融合,选择具有最大基本概率赋值的词汇作为输出。实验结果表明,该系统不但具有较好的实时性和灵活性,而且识别率比较高。

中国手语信息处理述评

为了能够有效地对中国手语进行信息处理,需要针对中国手语的特性提出相应的信息处理方案。该文根据国内外的研究进展情况,从基于规则和基于语料库的角度,讨论了中国手语信息处理过程中遇到的有关问题,并提出可借鉴的中国手语信息处理技术,同时从中国手语自身的词法、句法出发,参考国外手语语言学的最新研究成果,讨论了中国手语信息处理中有关信息表征、理解、生成等问题。最后指出未来手语的信息处理将会更多地建立在跨学科、多模式的基础之上,该项研究将有力地促进信息无障碍技术的发展。

中国手语情感隐喻的认知研究

本文统计分析了中国手语10类情感隐喻的手形、位置和运动三大音系参数,研究发现:1)中国手语和汉语共享"情感是容器中的热气"等本体隐喻,但由于聋人听觉经验的缺失,现有语料没有发现中国手语中利用声音作为喻体的情感隐喻;2)中国手语情感隐喻的转喻表达可分为"行为"和"生理"两类,其中可能存在两次映射,这与手语表达的象似性和认知经济性密切相关。整个研究表明,中国手语和汉语的情感隐喻共性大于差异,这是因为聋人在其他感觉通道经验以及受中国文化影响方面,与听人有较强的一致性。

面向机器翻译的中国手语的理解与合成

自然语言与可视化语言之间的自动翻译研究具有重大的现实意义和学术研究价值 ,它是一个崭新的、有发展前途的研究领域 .该文从机器翻译的角度来考察汉语和中国手语之间的相同之处和差异 ,探讨两种语言在语序、句子结构、短语结构、特殊词类等方面的特点 ,建立了汉语中国手语机器翻译的一系列规则 .在此基础之上 。

基于表面肌电信号对中国手语识别的探索与动作规范

目的探索基于表面肌电信号(surface electromyography,SEMG)中国手语手势识别的可行性,尽量减少用户执行手势动作主观用力差异对SEMG分类的不利影响。方法以中国手语30个字母手势动作为研究对象,通过分析手势动作过程,提出一套基于SEMG的中国手语手势动作规范方案。在实验室搭建的识别系统上,15名受试者参加了特定用户和与用户无关的规范前后识别实验。结果经过规范学习后,30种手语手势的动作识别率得到了显著提高,平均提升值为37%。结论手势动作规范可使不同动作的SEMG具有更高的可分性,此研究结果为实现基于SEMG大词汇量的中国手语手势识别提供了一种可行的方案。

语义类标记在中国手语词词汇识别和语义提取中的作用

通过2个实验,考察了语义类标记在中国手语词汇识别和语义提取中的作用。实验1采用手语词汇判断任务,比较了有、无语义类标记的手语词汇识别。实验2采用语义决定任务,探讨了语义类标记对手语词语义提取的影响。结果表明,语义类标记影响聋生对手语词的识别和语义提取。聋生识别有语义类标记的手语词显著快于识别无语义类标记的手语词。当语义类标记与手语词的语义一致时,能够促进聋生对手语词的语义提取;当语义类标记与手语词的语义不一致,会干扰聋生对手语词的语义提取。中国手语词语义类标记效应的发现,丰富了中国手语词词汇认知的理论,对聋人的语言教学和概念教学具有重要的启示。

面向大词汇量的实时连续中国手语识别系统

目前手语识别研究的难点之一在于如何实现大词汇量的连续语句识别 .针对这个问题 ,该文提出了几个有效的方法 ,包括修正转移矩阵、状态结点的捆绑、快速匹配、在搜索路径中加入词跳转的估计参数等 .利用上述技术 ,该文实现了一个基于数据手套和位置跟踪器的大词汇量的连续的中国手语实时识别系统 .对中国手语辞典中收录的 5 10 0个词以及一批连续语句作实验 ,实验结果表明 。

中国手语关系从句篇章特征考察

目的探讨中国手语关系从旬结构在篇章中的使用情况。方法在语料中设置不同的指称对象，让被试用中国手语复述语料，进行语料转写，再对语料进行分析。结果手语者叙述故事，中心名词首现时，倾向于使用限制修饰；中心名词复现时。倾向于采用空间位置表达，即采用指点手势（位置基本固定）代替关系从句，或采用数字、直接命名等方式指称对象。结论手语者在篇章中能够使用关系从句结构，但使用频率较低。在不同类型关系从句的使用方面，手语者倾向于使用内置中心语关系从句，限定性关系从旬与非限定性关系从旬使用频率差别不大。此结论与其他国家手语、口语的相关研究一致。

《中国手语》中手语构词特点分析

手语构词特点,指手语词汇之间共有的某些特点与联系,是从所有手语词汇中总结得出的规律与特征。《中国手语》中手语的构词特点主要表现在五个方面:兼代现象,基本词现象,简缩现象,面部表情与体态成为构词成分,手语位置与构词存在关联。

中国手语和汉语句法比较——以两类简单句和关系从句为例

手语和作为有声语言的汉语比较,在句法结构上存在诸多不同,有其作为视觉语言的特殊之处。通过从简单句和关系从句两个方面比较中国手语和汉语的句法结构,深入解剖中国手语和汉语句法结构的异同,从而为手语研究、聋人的汉语学习和手语翻译的发展等方面提供支持。

中国手语翻译人员专业教育的开创史——记中州大学手语翻译专业的创建

2007年1月11日，劳动和社会保障部在上海召开第八批新职业信息发布会，正式向社会发布10个新职业。手语翻译员是其中之一。这在中国大陆是近年来人们翘盼的一个职业，它被登录，在我国手语翻译职业化进程中是一个具有里程碑意义的事件。

自然手语与文法手语的区别

自然手语和文法手语是聋人间及聋人与听人间交流的两种普遍方式。自从1960年美国语言学权威史多基博士得出了手语是一门语言学意义上的语言的结论后,手语便作为语言来研究。文章从两者的适用范围差异、特点上的差异、语法的差异这三方面进行论述,在语法的差异上,例举实例,便于直观地体会二者在语法上的差异。

如何在聋校语文教学中合理使用自然手语和文法手语

当前自然手语和文法手语的讨论已成为聋教育和手语研究的热点问题。本文从自然手语和文法手语对聋生语言学习的作用入手,探索如何根据聋生的语言基础、知识经验、认知水平等实际情况,根据具体教学内容、教学目的要求,合理使用自然手语和文法手语进行教学,以提高课堂教学效率,发展聋生的语文能力。

中国手语空间方向动词研究

中国手语中的空间方向动词包括多向动词和单向动词两类。多向动词具有多个方向,可以根据实际情况利用某种手形自由地向多个方向运动,或者以手指自由地指向多个方向,来表达动作的不同方向。多向动词往往同时也是多平面的。单向动词从语义上来讲只有一个方向,与其语义一致,单向动词的手形运动方向也只有一个。

文法手语在古诗词教学中的问题及自然手语的表意功用

聋校古诗词教学存在特殊困难,一方面来自古诗词本身理解和表达的难度以及聋生自身的局限性,另一方面则来自于目前我国大多数聋校语文教师所使用的文法手语。本文结合具体实例说明了文法手语在古诗词词语和句子表达中的问题(借音过多、字字直译、脱离情境,成分全译、线性语序),提出自然手语的表达技巧(意译优先、整体意译、结合情境,成分省略、同时呈现),并从手语语言学的角度进行了原理的阐释。

基于统计模型的中国手语合成韵律研究

为了提高手语合成系统的可懂度,获取更为方便真实的人机交互方式,采用基于统计模型的中国手语韵律研究方法,即通过跟踪视频中手语动作,分析手语表达的韵律特征来提取手语韵律参数.并针对手语表达中肢体关节部位的不同贡献,分别对腕关节和肘关节进行了独立韵律研究.实验结果表明,通过基于统计模型的韵律研究方法可以有效得到韵律参数变化特征,并可以通过手语合成系统进行韵律特征的模拟.

中国手语在上海健听人中推广现状与影响因素

本研究通过问卷法、访谈法,对上海东方国际手语教育学校250位学员进行调查,探讨中国手语在上海健听人中推广的现状及影响因素。并在研究结果的基础上提出在全国范围内推广中国手语的意见与建议。