虚拟角色脸部模型的构建方法

第２２卷第２期　２０１１年６月　苏卅Ｉ市职业大学学报　Ｊｏｕｒｎａｌ　ｏｆ　Ｓｕｚｈｏｕ　Ｖｏｃａｔｉｏｎａｌ　Ｕｎｉｖｅｒｓｉｔｙ　Ｖｏ１．２２．Ｎｏ．２　Ｊｕｎ．，２０１１　虚拟角色脸部模型的构建方法　金益　（苏州市职业大学计算机工程系，江苏苏州　２１５１０４）　摘　要：虚拟角色是虚拟场景中非常重要的组成部分，逼真的虚拟角色可广泛应用于人机交互、　游戏、影视制作、军事训练等领域．介绍了基于传统经验的虚拟角色脸部模型构建方法和一种基于　样本插值的角色脸部模型的构建方法，通过对视觉可信度和生成人物表情两个方面的比较，得出　生成人物表情更适合应用于虚拟角色表情建设中．　关键词：虚拟角色；虚拟角色特征库；样本插值；情绪捕捉　中图分类号：ＴＰ３９３　文献标志码：Ａ　文章编号：ｌ００８－５４７５（２０１　１）０２—００２０—０３　Ｍｅｔｈｏｄ　ｆｏｒ　Ｆａｃｉａｌ　Ｍｏｄｅｌｉｎｇ　ｏｆ　Ｖｉｒｔｕａｌ　Ｃｈａｒａｃｔｅｒ　ＪＩＮ　（Ｄｅｐａｒｔｍｅｎｔ　ｏｆ　Ｃｏｍｐｕ￣ｒ　Ｅｎｇｉｎｅｅｒｉｎｇ，Ｓｕｚｈｏｕ　Ｖｏｃａｔｉｏｎａｌ　Ｕｎｉｖｅｒｓｉｔｙ，Ｓｕｚｈｏｕ　２１５１０４，Ｃｈｉｎａ）　Ａｂｓｔｒａｃｔ：Ａ　ｖｉｒｔｕａｌ　ｃｈａｒａｃｔｅｒ　ｉｓ　ａｎ　ｉｍｐｏｒｔａｎｔ　ｃｏｍｐｏｎｅｎｔ　ｏｆ　ｔｈｅ　ｖｉｒｔｕａｌ　ｓｃｅｎｅ．Ｌｉｆｅｌｉｋｅ　ｖｉｒｔｕａｌ　ｃｈａｒａｃｔｅｒｓ　ａｒｅ　ｗｉｄｅｌｙ　ａｐｐｌｉｅｄ　ｉｎ　ｈｕｍａｎ—ｃｏｍｐｕｔｅｒ　ｉｎｔｅｒａｃｔｉｏｎ，ｇａｍｅｓ，ｖｉｄｅｏ　ｐｒｏｄｕｃｔｉｏｎ　ａｎｄ　ｍｉｌｉｔａｒｙ　ｔｒａｉｎｉｎｇ．Ｔｈｅ　ｐａｐｅｒ　ｉｎｔｒｏｄｕｃｅｓ　ａ　ｍｅｔｈｏｄ　ｆｏｒ　ｆａｃｉａｌ　ｍｏｄｅｌｉｎｇ　ｂａｓｅｄ　ｏｎ　ｔｒａｄｉｔｉｏｎａｌ　ｅｘｐｅｒｉｅｎｃｅ　ａｎｄ　ｔｈａｔ　ｏｆ　ｖｉｒｔｕａｌ　ｃｈａｒａｃｔｅｒｓ　ｂａｓｅｄ　ｏｎ　ｓａｍｐｌｅ　ｉｎｔｅｒｐ０ｌａｔｉＯｎ．　Ｂａｓｅｄ　ｏｎ　ｔｈｅ　ｃｏｍｐａｒｉｓｏｎ　ｏｆ　ｖｉｓｕａｌ　ｃｒｅｄｉｂｉｌｉｔｙ　ａｎｄ　ｃｈａｒａｃｔｅｒｓ’ｆａｃｉａｌ　ｅｘｐｒｅｓｓｉｏｎｓ．ｉｔ　ｉｓ　ｃｏｎｃｌｕｄｅｄ　ｔｈａｔ　ｔｈｅ　ｌａｔｔｅｒ　ｉｓ　ｍｏｒｅ　ｓｕｉｔａｂｌｅ　ｆｏｒ　ｅｘｐｒｅｓｓｉｏｎ　ｃｏｎｓｔｒｕｃｔｉｏｎ　ｏｆ　ｖｉｒｔｕａｌ　ｃｈａｒａｃｔｅｒｓ．　Ｋｅｙ　ｗｏｒｄｓ：ｖｉｒｔｕａｌ　ｃｈａｒａｃｔｅｒ；ｖｉｒｔｕａｌ　ｃｈａｒａｃｔｅｒ　ｌｉｂｒａｒｙ；ｓａｍｐｌｅ　ｉｎｔｅｒｐｏｌａｔｉｏｎ；ｅｍｏｔｉｏｎａｌ　ｃａｐｔｕｒｅ　虚拟角色是虚拟场景中非常重要的组成部分，逼真的虚拟角色可广泛应用于人机交互、游戏、影视　制作、军事训练等领域．虚拟角色建模技术涉及计算机图形学、虚拟现实、人工智能、运动学与动力学、　认知心理学等多个交叉应用学科，是一个综合性的新的研究领域…．虚拟角色建模包括建立角色的表面　模型和骨骼模型，虚拟角色的构建包括角色外观、角色表情、角色动作的构建．角色外观可通过ＭＡＹＡ、　３ＤＭＡＸ等软件来制作，角色外观设置完成后便可创建角色表情库和角色动作库．角色的表情制作是依　据剧本和角色性格来构建不同的表情以使动画角色活灵活现、充满生机．　首先介绍基于传统经验的虚拟角色脸部模型构建方法，而后介绍了一种基于样本插值的角色脸部　模型的构建方法，最后在视觉可信度和生成人物表情两个方面进行比对研究，在比较两种方法的差异　后，得出后者更适合应用于虚拟角色表情建设中．　收稿日期：２０１１－０３—１４；修回日期：２０１卜０３—２８　基金项目：苏州大学创新基金资助项目（２０１０ＳＺＸ０９）　作者简介：金益（１９８０一），女，江苏苏州人，讲师，硕士，主要从事计算机仿真与建模研究　２０１１年第２期　金益：虚拟角色脸部模型的构建方法　１　基于传统经验的虚拟角色脸部模型构建　２０世纪９０年代以来，基于传统经验的虚拟角色脸部建模技术成为角色脸部建模与表情生成的主要　研究方向，代表技术有基于多角度脸部图像建模技术，￣ＨＰｉｇｈｉｎｔ２１提出的基于图像建模与绘制技术．基于　图像的方法首先需要对真实人脸进行不同角度的拍照，最简单的是采用人脸的正面和侧面图像．Ｐｉｇｈｉｎ　方法根据事先选定的人脸特征点，用手工方式在人脸图像上标注特征点，然后以匹配特征点和特征线的　方式变形一张三维人脸网格模板以获得特定人脸　Ｊ．在获得同一人脸不同表情的图像前提下，Ｍｏｒｐｈｉｎｇ　方法利用全局和局部人脸区域（网格顶点和纹理同时）方法，生成可信度较高的各种表情．　另外一种传统方法是基于多边形表示给出了一种参数化的人脸模型　Ｊ．基于一组参数值，该模型可　以变形产生各种脸部表情，即实现了脸部表情的参数化生成．根据简化的解剖学知识，提出了一种基于　肌肉物理特性的人脸模型，通过设定一组肌肉的拉伸和收缩系数，控制脸部顶点位移生成人脸表情．　２基于样本插值的虚拟角色脸部模型构建　因为基于多张不同侧面图像的人脸建模方法人工干预较多，同时对人脸模型缺乏有效的参数化控　制手段，为￣ＬＢｌａｎｚｌ４　提出了基于三维人脸样本数据库生成三维人脸模型的方法．该方法使用三维激光　扫描仪采集并建立三维人脸样本数据库．为能在各样本间实现插值运算，该方法将三维人脸模型柱面展　开成二维图像，然后基于２Ｄ光流运算建立一致性对应关系．所谓样本间的一致性对应关系是指插值运　算的各样本具有相同的顶点数量和相同的顶点连接关系．经ＰＣＡ数据降维后，基于线性插值即可生成新　的虚拟人脸．为生成真人人脸模型，对于输入的一张二维人脸图像，通过最小化公式（１）可以实现基于二　维图像重建三维人脸几何与纹理信息．　Ｅｌ＝　ｌｌＩｎｐｕｔ（ｘ，　）一Ｉｍｏｄｅｌ（ｘ，　）　Ｘ，Ｙ　…１　式中：Ｉｎｐｕｔ是给定的二维人脸图像，Ｉｍｏｄｅｌ是根据ｐｈｏｎｅ光照模型计算产生的二维图像．相对传统的基　于人脸图像建模技术，基于样本插值的人脸建模方法自动化程度高且视觉效果好．在模型的直观控制和　参数化修改方面，基于样本插值的虚拟人脸建模方法可以根据每个样本事先标注的某一社会学属性值　如年龄、胖瘦等，生成该属性的特征向量．以后对一给定的虚拟人模型，只需线性增减该特征向量，即可　得到根据该属性调整后的高可信度虚拟人模型【５】．　３两种方法比较　在视觉可信度方面，基于传统经验的方法主要是通过视觉方法计算和恢复人脸特征点的三维信息，　并修改一般三维人脸模型建立特定三维人脸．其优势在于建模过程相对简单，人脸数据容易获得，真实　感好．缺点在于人工介入程度较高，特征点指定误差大．基于样本插值方法优势是明显的，因为数据来　源于大量真实模型的测量采样结果，显得更为真实可　靠，但是缺点在于工作量大，速度相对较慢．　在生成各种人物表情方面，基于传统经验的方　法创新之处在于提供了一种简便易行的方法用于获　取真实人脸的三维网格模型．因为人脸表情生成的复　型，所以产生的表情呆板生硬，与真实感的要求相差　甚远．相比之下，基于样本插值方法的关键是能建立　杂性，基于传统经验的方法使用的是简化人脸解剖模　三维人脸样本数据库．人类所能产生的所有面部表　情怒、厌、怕、喜、哀、惊可以被归纳为６个“基础造型”　（ｂａｓｉｃ　ｐｏｓｅｓ　ａｎｄ　ｓｈａｐｅｓ）．这６个基础造型连同三维人　脸样本数据库能组合出任何一种人类表情（见图１）．这　一■■　一■一　图１基础造型　苏州市职业大学学报　第２２卷　对建立“虚拟角色特征库”也是一个重大的启发．所以，基于样本插值的方法在获取逼真的人脸表情上更　具有优势．　但是后一种方法的缺点是无法生成类似皱纹的脸部细节，而突破就在于建立的三维人脸样本数据　库采用全新的面部信息记录系统．系统由数个摄像机组成，专门拍摄人脸．两个摄像机能得到立体信息，　而数个摄像机加在一起则能得到更为精确的空间信息．通过库中的基础表情，能够组合演变出任何可能　产生的表情，这种技术被称为“情绪捕捉”（ｅｍｏｔｉｏｎ　ｃａｐｔｕｒｅ）　】．　４结　论　虚拟角色建模技术是一门综合性强、充满挑战的前沿学科，是一门把科学与艺术、现实与抽象融为　体的技术．其中获取虚拟角色逼真的面部表情更具有广泛的应用前景和商业价值，特别是在计算机动　画电影的制作中．　一从上述两种技术路线的比较中，可以得出基于样本插值的方法在获取逼真的人脸表情上更具有优　势的结论．目前，由于人体本身的复杂性以及计算资源的有限性，受各个相关学科研究发展状况的制约，　虚拟角色建模技术仍然存在许多需要解决而亟待解决的问题．相信在不久的将来，随着各学科研究工作　的不断深人和人类对自身认识的不断完善，虚拟角色建模技术一定会取得飞跃的发展．　参考文献：　［１】武春友，王士同．软计算在虚拟角色面部表情建模中的应用［Ｊ】．计算机工程与设计，２００７，１２（６）：２９１４—２９１７．　［２］ＰＩＧＨＩＮ　Ｆ，ＡＵＳＬＡＮＤＥＲ　Ｊ，ＬＩＳＣＨＩＮＳＫＩ　Ｄ，ｅｔ　ａ１．Ｒｅａｌｉｓｔｉｃ　ｆａｃｉａｌ　ａｎｉｍａｔｉｏｎ　ｕｓｉｎｇ　ｉｍａｇｅ－ｂａｓｅｄ　３Ｄ　ｍｏｒｐｈｉｎｇ［Ｒ】　Ｔｅｃｈｎｉｃａｌ　Ｒｅｐｏｒｔ　ＵＷ—ＣＳＦ一９７—０１－０３．１９９７．　［３］王军华，吕克志．面向艺术与设计虚拟人技术比较研究［Ｊ】＿计算机系统应用，２００９（５）：１２５—１２７．　［４】ＢＬＡＮＺ　Ｖ，ＶＥＴＴＥＲ　Ｔ．Ａ　ｍｏｒｐｈａｂｌｅ　ｍｏｄｅｌ　ｆｏｒ　ｔｈｅ　ｓｙｎｔｈｅｓｉｓ　ｏｆ　３Ｄ　ｆａｃｅｓ［Ｃｌ／／Ｉｎ　Ｃｏｍｐｕｔｅｒ　Ｇｒａｐｈｉｃｓ　Ｐｒｏｃ．ＳＩＧＧＡＰｔ　Ｉ’９９　Ｌｏｓ　Ａｎｇｅｌｅｓ，Ｃａｌｉｆｏｒｎｉａ：ＩＥＥＥ　Ｃｏｍｐｕｔｅｒ　Ｓｏｃｉｅｔｙ　Ｐｒｅｓｓ，１９９９：１８７－１９４．　［５】武春友，王士同．交互式进化计算在虚拟角色表情建模中的应用［Ｊ］．计算机应用，２００７，２７（３）：７２４－７２５．　［６］薛为民．基于Ａｇｅｎｔ的虚拟人情感交互建模技术研究［Ｊ］．北京联合大学学报，２００５，１９（２）：６６—６９．　（责任编辑：李　华）