QQ客服 官方微博 反馈留言

题名	个性化人脸自动建模与动画技术研究
作者	姚健
学位类别	工学博士
答辩日期	2008-06-03
授予单位	中国科学院研究生院
授予地点	中国科学院自动化研究所
导师	王阳生
关键词	个性化人脸建模 人脸动画 三维人脸数据库 自动化重建 形状无关纹理 球面参数化 Individual Facial Modeling Face Animation 3D Face Database Automatical Reconstruction Shape-Free Texture Spherical Parametrization
其他题名	Research on Automatical Individual Facial Modeling and Animation
学位专业	模式识别与智能系统
中文摘要	人脸建模和动画在动画制作、人机交互、医疗和教育等领域都具有重要的应用和研究价值。本文以基于图像的快速、自动个性化人脸建模和动画为主要研究内容，围绕其中的关键点控制的快速建模、自动化形变模型重建、形状无关纹理重建、 以及快速人脸动画重映射等方面展开了研究。主要研究工作和贡献如下： 1.提出了一种关键点控制下的快速个性化人脸建模方法。在输入是单张正面人脸图像的条件下，自动检测和标定目标图像中的关键点位置，从关键点的二维坐标迭代计算其三维空间坐标。利用关键点信息和径向基函数变形预定义的三维人脸模型，获取个性化网格。 在网格确定后， 计算顶点在图像上的正投影坐标，根据输入图像生成个性化纹理。 生成的人脸模型具有一定的真实感，可以应用于多人在线的网络游戏。 2.提出了基于单张照片的全自动个性化人脸建模方法。对于输入图像非正脸且光照非均匀的条件下，仅依靠人脸检测的结果自动初始化参数，再根据统计的三维人脸信息迭代修正图像参数和模型参数，最终达到渲染图象与输入图像匹配的结果，从而实现自动化的个性化人脸模型重建。引入规则网格作为模型的标准结构，方便了归一化样本和纹理生成。迭代过程采用分阶段方式， 不但能加快迭代速度，还能够消除由于前景和背景相似引起的局部收敛。 3.提出了以形状无关纹理为匹配目标重建个性化模型的方法。对于渲染图匹配法重建存在的关键点定位不准等问题，引入以形状无关纹理作为匹配目标，从而消除姿态、形状变化对像素权重的影响。提出以视角图控制形状无关纹理的迭代系数，能够解决渲染图匹配方法中关键点不易对齐的问题。进而把视角图引入纹理合成过程中，能够最大限度的利用输入图像中有效的细节信息， 提升合成纹理的效果。 4.提出基于球面参数化的稀疏关键点动画重映射方法，使用关键点网格的三角形重心坐标对运动数据进行差值， 只需要在Motioncapture系统中标定少量关键点并采集动画数据，就可以快速映射到封闭或半封闭的人脸模型上。使用较少的标记点可以缓解系统精度和处理速度间的矛盾，还保证了表演者的舒适度，结合个性化建模的结果就能够生成具有真实感的个性化人脸表情动画。
英文摘要	Facial modeling and animation are valuable for both application and research field such as animation film, human-computer interface, medical treatment and education. In this thesis, we focus on some of the key issues in image based automatical modeling and animation of individual face. The main contributions include: 1.We propose a reconstruction method under the control of key points, which can generate individual face model fast. Based on one frontal face image captured from PC camera, the facial key points can be detected automatically and their 3D coordinates are estimated with morphable models. Then a generic face model is deformed with RBF and key points' coordinates to generate individual mesh. Finally, we crop the face region from input image and generate individual texture to make the model more realistic. The method can be applied in multi-player online games. 2.For one face image captured in different direction and different illumination, we propose a totally automatical method for reconstruction. We only need the result of face detection to initialize parameters for individual face. The final parameters include morphable models can be obtained by matching rendered model image to input image. The regular mesh facilitates normalization of input samples and generation of individual face. The strategy of iteration by stages makes computation faster, also it can eliminate errors when the background is similar to face region. 3.We improve the automatical reconstruction method by replacing rendered image with shape-free texture. Thus we can eliminate the influence of posture and shape variance, and can decrease the probability of local convergence. Also we propose visual angle map in the method. It improves the key points alignment and refines detail of texture image. 4.We introduce spherical parametrization in facial animation and achieve animation remapping with sparse key points. The original animations are captured by Motion Capture system and with only 34 markers. After remapping the key points' motion vectors, we interpolate the non-key points' motion vectors with barycentric coordinates of key mesh triangles. All the method can achieve fast remapping of realistic expression animation. Fewer markers makes fewer uncomfortableness for the performer.
语种	中文
其他标识符	200418014628073
内容类型	学位论文
源URL	[http://ir.ia.ac.cn/handle/173211/6115]
专题	毕业生_博士学位论文
推荐引用方式 GB/T 7714	姚健. 个性化人脸自动建模与动画技术研究[D]. 中国科学院自动化研究所. 中国科学院研究生院. 2008.

个性服务

查看访问统计

相关权益政策

暂无数据

收藏/分享

除非特别说明，本系统中所有内容都受版权保护，并保留所有权利。