姜大龙
- 作品数:12 被引量:84H指数:6
- 供职机构:中国科学院计算技术研究所更多>>
- 发文基金:国家自然科学基金国家高技术研究发展计划国家重点基础研究发展计划更多>>
- 相关领域:自动化与计算机技术电子电信更多>>
- 虚拟人行为交互方法研究
- 人体行为交互是人际之间除语音交互之外的一种重要交互方法.本文介绍了我们应用虚拟人合成技术实现人体行为交互的主要研究工作,以及这些研究成果在聋人手语(手势)交互、人脸表情与动画合成等方面的应用.
- 王兆其高文陈益强杨长水左力姜大龙李治国
- 关键词:虚拟人人机交互人体动画
- 文献传递
- 多模式语音合成
- 传统语音合成是单模式的,本文首次提出并实现一种多模式语音合成系统,系统在播放合成语音同时,还伴随有唇动,面部行为以及身体手势动作等.在多模式合成系统中,各模式之间的同步以及协同是至关重要的,本文由此提出基于聚类,统计以及...
- 陈益强高文王兆其杨长水姜大龙
- 文献传递
- 面向纹理特征的真实感三维人脸动画方法被引量:15
- 2004年
- 纹理变化是人脸表情的重要组成部分 ,传统的人脸动画方法通常只是对纹理图像做简单的拉伸变换 ,没有考虑人脸细微纹理特征的变化 ,比如皱纹、酒窝等 .该文提出了一种面向纹理特征变化的真实感三维人脸动画方法 .给出局部表情比率图 (PartialExpressionRatioImage,PERI)的概念及其获取方法 ,在此基础上 ,进一步给出了面向MPEG 4的PERI参数化与面向三维人脸动画的多方向PERI方法 ,前者通过有机结合MPEG 4的人脸动画参数(FacialAnimationParameter ,FAP) ,实现人脸动画中细微表情特征的参数化表示 ;后者通过多方向PERI纹理特征调整方法 ,使得三维人脸模型在不同角度都具有较好的细微表情特征 .该文提出的方法克服了传统人脸动画只考虑人脸曲面形变控制而忽略纹理变化的缺陷 ,实现面向纹理变化的具有细微表情特征的真实感三维人脸动画 .实验表明 ,该文提出的方法能有效捕捉纹理变化细节 ,提高人脸动画的真实感 .
- 姜大龙高文王兆其陈益强
- 关键词:纹理特征FAP
- 基于机器学习的语音驱动人脸动画方法被引量:34
- 2003年
- 语音与唇动面部表情的同步是人脸动画的难点之一.综合利用聚类和机器学习的方法学习语音信号和唇动面部表情之间的同步关系,并应用于基于MEPG-4标准的语音驱动人脸动画系统中.在大规模音视频同步数据库的基础上,利用无监督聚类发现了能有效表征人脸运动的基本模式,采用神经网络学习训练,实现了从含韵律的语音特征到人脸运动基本模式的直接映射,不仅回避了语音识别鲁棒性不高的缺陷,同时学习的结果还可以直接驱动人脸网格.最后给出对语音驱动人脸动画系统定量和定性的两种分析评价方法.实验结果表明,基于机器学习的语音驱动人脸动画不仅能有效地解决语音视频同步的难题,增强动画的真实感和逼真性,同时基于MPEG-4的学习结果独立于人脸模型,还可用来驱动各种不同的人脸模型,包括真实视频、2D卡通人物以及3维虚拟人脸.
- 陈益强高文王兆其姜大龙
- 关键词:语音驱动人脸动画语音识别模式识别
- 虚拟人行为交互方法研究被引量:12
- 2001年
- 人体行为交互是人际之间除语音交互之外的一种重要交互方法。本文介绍了我们应用虚拟人合成技术实现人体行为交互的主要研究工作,以及这些研究成果在聋人手语(手势)交互、人脸表情与动画合成等方面的应用。
- 王兆其高文陈益强杨长水左力姜大龙李治国
- 关键词:虚拟人人机交互人体动画
- 基于MPEG-4的三维人脸动画实现方法
- 三维人脸动画技术可以应用于虚拟现实、虚拟主持人、虚拟会议、辅助教学、医疗研究、电影制作、游戏娱乐等很多领域.本文介绍了基于MPEG-4标准的人脸动画的工作原理,改进了MPEG-4中已知FAP(人脸动画参数)值和FaceD...
- 姜大龙王兆其高文
- 关键词:人脸动画MPEG-4三维动画
- 文献传递
- 基于MPEG-4的三维人脸动画实现方法被引量:8
- 2001年
- 三维人脸动画技术可以应用于虚拟现实、虚拟主持人、虚拟会议、辅助教学、医疗研究、电影制作、游戏娱乐等很多领域。本文介绍了基于MPEG-4标准的人脸动画的工作原理,改进了MPEG-4中已知FAP(人脸动画参数)值和FaceDefTables(人脸动画定义表),计算FAP控制区内点的坐标的算法。最后提出了一种构造人脸动画定义表的方法。该方法的操作结合了自动计算和手工调整,最后实现了以FAP作为参数驱动的三维人脸动画。
- 姜大龙王兆其高文
- 关键词:人脸动画MPEG-4
- 手语合成中的多模式行为协同韵律模型
- 缺乏人脸唇部运动的手语合成的可懂度只有60%-70%,因此如何将语音人脸表情等其他模式行为加入手语动作中并协同表达是实现逼真自然手语合成的关键难点问题。传统的作法大多采用规则法实现,难以刻画多模式之间协同关联的复杂性,本...
- 陈益强高文杨长水姜大龙
- 文献传递
- 基于数据挖掘的语音驱动三维人脸动画合成被引量:6
- 2002年
- 提出采用数据挖掘的概念,利用神经网络,聚类以及统计学方法从大量语音视频库中发现语音与唇动以及人脸表情之间的关联模型,并应用于语音驱动人脸动画合成中,本文提出的方法不仅可很好地解决语音与人脸动画的同步,同时还具有易训练,鲁棒性强,可扩展等特性。实验表明,基于数据挖掘技术的合成模型非常有效,极大提高了动画人物的真实感和可信度。
- 陈益强高文王兆其姜大龙左力
- 关键词:数据挖掘语音驱动计算机
- 真实感三维人脸合成方法研究
- 随着计算机多媒体和网络技术的迅速发展,人们对各种人机交互界面的人性化要求越来越高.三维人脸合成技术作为虚拟人合成技术的一个重要组成部分,近30年来在动画工作者们的不懈努力下取得了长足的进步和发展.真实感三维人脸合成技术的...
- 姜大龙
- 关键词:人脸动画人脸建模MPEG-4
- 文献传递