节点文献
手语合成中的多模式行为协同韵律模型
【机构】 中国科学院计算技术研究所；
【摘要】 缺乏人脸唇部运动的手语合成的可懂度只有60%-70%,因此如何将语音人脸表情等其他模式行为加入手语动作中并协同表达是实现逼真自然手语合成的关键难点问题。传统的作法大多采用规则法实现,难以刻画多模式之间协同关联的复杂性,本文提出利用大量真实多模式行为数据进行学习训练,获取单模式行为的韵律模型以及多模式行为之间的协同关联模型,从而实现虚拟人多模式行为的协同。本文重点给出了多模式行为的韵律模型描述,同时给出基于手语韵律参数与语音韵律特征融合的协同控制韵律模型并用于多模式行为协同控制上,取得了较好的实验结果。
- 【会议录名称】 第一届中国情感计算及智能交互学术会议论文集
- 【会议名称】第一届中国情感计算及智能交互学术会议
- 【会议时间】2003-12
- 【会议地点】中国北京
- 【分类号】TP391.4
- 【主办单位】中国科学院自动化研究所、中国自动化学会、中国图象图形学会、中国计算机学会、中国中文信息学会、国家自然科学基金委员会、国家863计划计算机软硬件技术主题