基于汉语文本驱动的人脸语音同步动画的处理方法专利登记公告

专利名称：基于汉语文本驱动的人脸语音同步动画的处理方法

摘要：本发明公开了一种基于汉语文本驱动的人脸语音同步动画的处理方法，首先按照汉语拼音发音时嘴唇动作的大小特征将所有中文音素归为16组中文可视音素并用输入的人脸图像合成对应的关键帧；其次分析输入文本得到其对应的中文可视音素序列和动画的关键帧序列；然后在每两个相邻关键帧之间插入过渡帧；再将关键帧序列与语音流对齐；最后同时播放语音流和动画流以实现人脸语音同步动画。本发明在输入任意的人脸头像和任意的文本内容后，可以全自动地完成人脸动画的生成和输出，操作简单、效果流畅，适用于可视化人机界面、计算机游戏、对外汉语教学等多种

专利类型：发明专利

专利号：CN201210037528.7

专利申请（专利权）人：上海交通大学

专利发明（设计）人：赵群飞;杜鹏;樊延峰;邓杰;唐品

主权项：一种基于汉语文本驱动的人脸语音同步动画的处理方法，其特征在于该方法包括下列步骤：①采集人脸图像：由光源将光线照在欲采集的人脸上产生表示人脸特征的反射光或透射光，再由CCD探测器将光信号转换成相应的电信号；或从存储设备中读取人脸图像；②人脸检测：对步骤①所得的人脸图像进行预处理，然后利用AdaBoost算法检测人脸区域；③人脸特征提取：在步骤②所检测到的人脸区域内，利用ASM算法提取人脸的特征点，其中嘴部提取32个特征点，眼睛部提取20个特征点，鼻部和脸部外围轮廓提取30个特征点；④关键帧合成：根据步骤③嘴

专利地区：上海