《机械工程学报》2007年07期 加入收藏    获取最新    基于Snake模型的特定人脸三维重建方法   王宣银;潘锋;向桂山;梁冬泰   　　以双目立体视觉为基础,构建一种特定人脸重建系统,提出基于Snake模型的特定人脸三维重建方法,利用已标定的摄像机拍摄立体图像对,采用肤色检测得到人脸区域。在对立体图像对进行摄像机畸变校正、立体图像对的外极线对齐、人脸区域选择及归一化等预处理后,采用金字塔结构相关匹配算法,在误匹配点数与精度两者之间达到较好的平衡。针对人脸提出能量最小化方程,考虑顺序匹配约束、连续性约束、曲线上各点曲率的估计和相关性约束条件,大大提高视差提取的正确率,解决了立体视觉中立体匹配的难点,成功地恢复出人脸的三维数据,实现特定人脸的重建。试验结果表明:基于Snake模型的视差抽取,并经过光顺处理和纹理映射后,除了脸部部分边缘存在一些变形外,主体部分的重建效果真实感强。该算法不需要结构光等设备,基本不需要人工干预,就能恢复出特定人脸的三维数据,效果好,实用性强。 【作者单位】：浙江大学流体传动及控制国家重点实验室 杭州310027 【关键词】：人脸三维重建;立体匹配;金字塔结构;相关计算;Snake模型 【基金】：新世纪优秀人才计划资助项目(NCET-04-0545) 【分类号】：TP391.41 【DOI】：CNKI:SUN:JXXB.0.2007-07-030 【正文快照】： 　　0前言人脸是人类日常生活中最常见的,是人类相互交流的重要渠道,是人类喜、怒、哀、乐等复杂表情和语言的载体。近年来,人脸三维重建的研究已成为机器视觉领域的一个研究热点[1-2]。虽然人脸具有类似的结构,但却有许多微妙和细小的差别,使人脸与人脸之间得到区分,因此特定人脸     推荐 下载CAJ全文           下载PDF全文   CAJViewer7.0阅读器支持所有CNKI文件格式，AdobeReader仅支持PDF格式   SPECIFIC FACE 3D RECONSTRUCTION BASED ON SNAKE MODEL   WANG Xuanyin PAN Feng XIANG Guishan LIANG Dongtai(State Key Laboratory of Fluid Power Transmission and Control;Zhejiang University;Hangzhou 310027)   　A reconstruction system for special human face is designed which is based on the binocular stereo vision.A 3D reconstruction method for special human face based on Snake model is presented.The stereo image pair is gathered with a calibrated camera,and the face area is segmented by skin detec-tion method.After the image pair is processed with distortion correction and epipolar line alignment,and the face area is se-lected and normalized,the correlation matching algorithm adopts pyramid structure which can balance well between error matching points and precision.An energy minimization func-tion for human face is proposed which takes into account the order matching constraint,the continuity constraint,the curva-ture estimation of every point on curve and the correlation con-straint condition.The function improves greatly the accuracy of disparity extraction,resolves the stereo matching difficulty in stereo vision area,restores successfully the 3D data of human face and realizes the reconstruction of special face.Experiments show that the algorithm which adopts the disparity extraction based on Snake model and fairing handling and texture map-ping is realistic in the reconstruction of main face part,except the deformation along partially face contour.The algorithm is effective and practical,which can restore the 3D data of special face without structured light and manual intervention. 【Keyword】：Face 3D reconstruction Stereo match Pyramid structure Correlation calculation Snake model   【参考文献】   共（13）篇    中国期刊全文数据库 找到 5 条   1 俞能海,陈豪,刘政凯; 基于块金字塔的快速块匹配算法 [J];电路与系统学报; 2003年02期 2 梅丽,鲍虎军,郑文庭,彭群生; 基于实拍图像的人脸真实感重建 [J];计算机学报; 2000年09期 3 高文,陈熙霖,晏洁,宋益波,尹宝才; 虚拟人面部行为的合成 [J];计算机学报; 1998年08期 4 梁荻,苏志勋; 基于正交照片的人脸重建技术 [J];系统仿真学报; 2003年11期 5 潘锋,王宣银,肖宝平; 彩色图像的快速人脸检测方法研究 [J];仪器仪表学报; 2004年05期  中国博士学位论文全文数据库 找到 1 条   1 潘锋; 仿人眼颈视觉系统的理论与应用研究 [D];浙江大学; 2005年  西文参考文献 找到 7 条   1 NOH J,NEUMANN U; A survey of facial modeling and animation techniques [M];; 1998年 2 ANSARI A,ABDEL M; 3D face modeling using two or-thogonal views and a generic face model[C] [M];Interna-tional Conference on Multimedia and Expo 2003; 2003年 3 TANG L,HUANG T; Automatic construction of 3D hu-man face models based on 2D images [M];International Conference on Image Processing; 1996年 4 CHEN Z,HO S,TSENG D; Polyhedral face reconstruc-tion and modeling from a single image with structured light [M];IEEE Transactions on Systems,Man.and Cyber-netics; 1993年 5 GARCIA E,DUGELAY J; Low cost 3D face acquisition and modeling [M];International Conference on Informa-tion Technology:Coding and Computing; 2001年 6 KASS M,WITKIN A,TERZOPOULOS D; Snakes:active contour models [M];International Journal of Com-puter Vision; 1987年 7 HU G,PENG Q,FORREST A; Robust mesh smoothing [M];Journal of Computer Science and Technology; 2004年   【引证文献】   共（1）篇    中国期刊全文数据库 找到 1 条   1 谢永智; 人脸三维建模方法综述 [J];科技创新导报; 2008年09期   【共引文献】   共（65）篇    中国期刊全文数据库 找到 10 条   1 尹宝才,胡永利,程世铨,谷春亮; 基于形变模型的人脸建模及其应用综述 [J];北京工业大学学报; 2003年03期 2 邹北骥,彭永进,伍立华,彭群生; 基于面分块的人脸造型技术研究 [J];电子学报; 2001年11期 3 张立臣,毛庆,冯德民,王映辉; 基于多摄像机的人脸三维建模 [J];电脑开发与应用; 2005年04期 4 钟玮; 三维人体面部表情动画技术在影视制作中的应用 [J];电影文学; 2006年09期 5 修春波,刘向东,张宇河; 混沌搜索匹配算法在电视跟踪系统中的应用 [J];电视技术; 2005年02期 6 周洁萍,龚建华,陈铮,杜蔚; 协同虚拟地理环境中多用户交流交互模式及实现 [J];地理与地理信息科学; 2005年05期 7 陈清金,邓中亮,黄明吉; 图像的同名点的匹配算法 [J];北京邮电大学学报; 2002年04期 8 侯文广,陈大为,丁明跃; 一种基于多重影像实现真实感人脸三维重建的方法 [J];电子学报; 2008年04期 9 胡永利,尹宝才,谷春亮,程世铨; 基于形变模型的三维人脸重建方法及其改进 [J];计算机学报; 2005年10期 10 申煜湘,邹北骥,彭永进; 基于面分块的三维人脸模型的边界表示方法 [J];湖南大学学报(自然科学版); 2001年05期  中国优秀硕士学位论文全文数据库 找到 10 条   1 杨艳萍; 基于图像序列的三维重建方法研究 [D];大连理工大学; 2006年 2 陈廓; 基于区域控制模型的人脸重建技术及应用 [D];浙江大学; 2006年 3 王力; 基于未定标图像的三维模型重建 [D];大连理工大学; 2006年 4 戴唐云; 基于3DSMAX/OGRE的火箭视景仿真系统的研究与实现 [D];电子科技大学; 2007年 5 王建哲; 三维人体变形技术研究 [D];西安电子科技大学; 2002年 6 桂国富; 基于图像的视图插补技术研究 [D];安徽大学; 2003年 7 程日彬; 真实感三维人脸合成技术研究 [D];西北大学; 2006年 8 李大湘; 视频中人脸检测与跟踪技术的研究 [D];西北大学; 2005年 9 陈素军; 基于正交图像的人脸建模技术研究 [D];燕山大学; 2006年 10 宋建华; 基于支持向量机的彩色图像人脸检测 [D];吉林大学; 2007年  中国博士学位论文全文数据库 找到 10 条   1 高鹏; 视频会议系统与MPEG-4标准的研究 [D];中国科学院研究生院（计算技术研究所）; 1999年 2 徐冰; 智能虚拟环境Agent技术研究 [D];浙江大学; 2005年 3 潘锋; 仿人眼颈视觉系统的理论与应用研究 [D];浙江大学; 2005年 4 冯志全; 运动人手的三维跟踪方法研究 [D];山东大学; 2006年 5 刘晓红; 面向虚拟概念设计的机械产品行为建模及关键技术研究 [D];武汉理工大学; 2003年 6 罗冠; 虚拟人的运动生成及控制技术研究 [D];西北工业大学; 2004年 7 姜大龙; 真实感三维人脸合成方法研究 [D];中国科学院研究生院（计算技术研究所）; 2005年 8 张汗灵; 基于图象的绘制关键技术研究 [D];西北工业大学; 2003年 9 赵吉广; 基于视频图像的路面性能参数采集方法研究 [D];东南大学; 2006年 10 邹北骥; 人脸造型与面部表情动画技术研究 [D];湖南大学; 2001年   【同被引文献】   共（2）篇    中国期刊全文数据库 找到 1 条   1 徐成华,王蕴红,谭铁牛; 三维人脸建模与应用 [J];中国图象图形学报; 2004年08期  中国博士学位论文全文数据库 找到 1 条   1 胡永利; 真实感三维人脸建模及应用研究 [D];北京工业大学; 2004年   【二级参考文献】   共（95）篇    中国期刊全文数据库 找到 10 条   1 操勇,毛勇; TM1300嵌入式多媒体网络通信系统的设计与实现 [J];电子技术应用; 2003年10期 2 俞能海,陈豪,刘政凯; 基于块金字塔的快速块匹配算法 [J];电路与系统学报; 2003年02期 3 席平,刘勇; 反向工程中的曲面光顺算法 [J];北京航空航天大学学报; 2002年02期 4 贾云得,徐一华,刘万春,杨聪,朱玉文; 微型实时多目立体视觉机设计与实现 [J];电子学报; 2003年09期 5 王明辉,彭立中; 一种新的快速块匹配运动估计算法 [J];北京大学学报(自然科学版); 2001年03期 6 李熙莹,倪国强; 一种自动提取目标的主动轮廓法 [J];光子学报; 2002年05期 7 韩鸿哲,王志良,刘冀伟,李彬,韩忠涛; 基于自适应背景模型的实时人体检测 [J];北京科技大学学报; 2003年04期 8 熊兴华,钱曾波,王任享; 遗传算法与最小二乘法相结合的遥感图像子像素匹配 [J];测绘学报; 2001年01期 9 解梅,佟异; 基于脊线采样的指纹识别算法 [J];电子学报; 2003年10期 10 刘荣; DSP技术的现状及发展 [J];电子技术应用; 1999年04期  西文参考文献 找到 10 条   1 Takeo Kanade, Masatoshi Okutomi; A stereo matching algorithm with an adaptive window: theory and experiment [M];IEEE Transactions on Pattern Analysis and Machine Intelligence; 1994年 2 Weng Ju-Yang et al; Motion and structure from two perspective views: algorithms, error analysis, and error estimation [M];IEEE Transactions on Pattern Analysis and Machine Intelligence; 1989年 3 Ingemar J Cox et al; A maximum likelihood stereo algorithm [M];Computer Vision and Image Understanding; 1996年 4 J. Miao, B. C. Yin, K. Q. Wang, L. S. Shen, X. C.Chen; A hierarchical multiscale and multiangle system for human face detection in a complex background using gravity-center template [M];Pattern Recognition; 1999年 5 Nahas M, Huitric H, Rijoux M et al; Animation of B_ spline figure [M];The Visual Computer; 1988年 6 Horace H S Ip, Yin Li -Jin; Constructing a 3D individual head model from two orthogonal views [M];The Visual Computer; 1996年 7 Pascal Fua; A parallel stereo algorithm that produces dense depth maps and preserves image features [M];Machine Vision and Application; 1993年 8 B. Moghaddam, A. Pentland; Probabilistic visual learning for object recognition [M];IEEE Trans. Pattern Analysis and Machine Intelligence; 1997年 9 M. Turk, A. Pentland; Eigenfaces for recognition [M];J.Cognitive Neuroscience; 1991年 10 K. C Yow, R. Cipolla; Feature-based human face detection [M];Image and Vision Computing; 1997年   【相似文献】    中国期刊全文数据库   1 曾峦,李迎春; 一种新的散堆物料立体匹配方法设计 [J];装备指挥技术学院学报; 1998年01期; 35-39 2 黄海赟,戚飞虎,岑峰; 基于网络最大流的立体匹配算法 [J];上海交通大学学报; 2001年02期; 14-18 3 王宣银,潘锋,向桂山,梁冬泰; 基于Snake模型的特定人脸三维重建方法 [J];机械工程学报; 2007年07期; 172-177 4 杨敬安; 双目立体匹配的新算法 [J];合肥工业大学学报(自然科学版); 1990年01期; 63-71 5 刘冲,宋展,王跃宗,王立鼎; 显微三维表面重构 [J];机械工程学报; 2002年S1期; 38-43 6 夏泽邑,刘冲,王跃宗,沙里瓦特; 基于平均局部熵的显微立体匹配算法 [J];仪器仪表学报; 2003年S1期; 320-322+328 7 刘正东,杨静宇; 自适应窗口的时间规整立体匹配算法 [J];计算机辅助设计与图形学学报; 2005年02期; 96-99 8 游素亚，柳健，彭复员，万发贯; 一种基于小波变换的多分辨率立体匹配算法 [J];华中科技大学学报; 1994年05期; 89-94 9 吴勇军,殷勤业,曾雁星,方强,吴研; 基于幅相分离立体匹配的小波立体图像压缩 [J];西安交通大学学报; 2002年12期; 37-40 10 张可黛,曾峦; 基于小波多尺度零交叉基元的立体匹配方法 [J];装备指挥技术学院学报; 2000年03期; 42-47  中国优秀硕士学位论文全文数据库   1 沙里瓦特; 显微立体视觉中的匹配技术研究 [D];大连理工大学; 2005年 2 刘进; 基于视觉的三维建模相关技术研究 [D];南京航空航天大学; 2002年 3 蔡钦涛; 基于图像的三维重建技术研究 [D];浙江大学; 2004年 4 王晓华; 基于双目视觉的三维重建技术研究 [D];山东科技大学; 2004年 5 唐志健; 基于立体视觉的深度信息恢复技术研究 [D];大庆石油学院; 2006年 6 武广智; 地图构建中基于视觉的物体识别与定位 [D];浙江大学; 2006年 7 李美菊; 投影数字散斑双目视觉系统的立体匹配 [D];四川大学; 2005年 8 谢涛; 基于区域分割的立体匹配及其相关研究 [D];大连理工大学; 2006年 9 肖冰; 基于点特征的立体匹配技术研究 [D];陕西师范大学; 2006年 10 陈海波; 三维重建中立体匹配问题研究 [D];中南大学; 2005年  中国博士学位论文全文数据库   1 张艳珍; 微机视觉系统相关理论及技术研究 [D];大连理工大学; 2001年 2 刘正东; 计算机视觉中立体匹配技术的研究 [D];南京理工大学; 2005年 3 潘锋; 仿人眼颈视觉系统的理论与应用研究 [D];浙江大学; 2005年 4 谢存; 计算机视觉中若干问题实现技术和算法的研究 [D];大连理工大学; 2002年 5 王宇宙; 计算机视觉三维重建理论与应用 [D];西北大学; 2004年 6 张春森; 序列立体图象三维运动物体定位与跟踪 [D];武汉大学; 2004年  中国重要会议论文全文数据库   1 周秀芝,王润生; 基于自适应窗口的稠密立体匹配 [A];立体图象技术及其应用研讨会论文集 [C]; 2005年 2 宋展,刘冲,王跃宗; 显微立体视觉中三维表面重构技术 [A];第五届海内外青年设计与制造科学会议论文集（第二卷） [C]; 2002年 3 赵杰,彭京,李戈,王晨; 基于粗细结合匹配方法的立体视觉研究 [A];全国第13届计算机辅助设计与图形学（CAD/CG）学术会议论文集 [C]; 2004年 4 张凯,葛文兵,汪国平,董士海; 基于立体视觉的自然手势识别 [A];第一届建立和谐人机环境联合学术会议（HHME2005）论文集 [C]; 2005年 5 贾涛,陈涛,杨润奎; 基于仿射不变量的长基线立体匹配 [A];第三届全国信息获取与处理学术会议论文集 [C]; 2005年 6 付丽琴,韩焱; 基于立体匹配技术的射线图像三维信息重建技术研究 [A];第十一届中国体视学与图像分析学术会议论文集 [C]; 2006年 7 连晓峰,窦丽华,陈杰; 基于图割算法的全景图像立体匹配 [A];2007年中国智能自动化会议论文集 [C]; 2007年 8 张可黛,曾峦; 一种新的匹配质量控制方法 [A];2000中国控制与决策学术年会论文集 [C]; 2000年 9 高月芳,朱同林,张佑生,偶春生; 一种改进的立体匹配算法 [A];全国第13届计算机辅助设计与图形学（CAD/CG）学术会议论文集 [C]; 2004年 10 王跃宗,刘冲,李德胜; 彩色显微图像立体匹配研究 [A];中国微米、纳米技术第七届学术会年会论文集（一） [C]; 2005年

相关期刊  >  阀门  >  风机技术  >  分析测试仪器通讯  >  分析仪器  >  衡器  >  机械传动  >  机械设计  >  机械设计与研究  >  流体机械  >  起重运输机械  >  润滑与密封  >  水泵技术  >  无损检测  >  无损探伤  >  压缩机技术  >  液压气动与密封  >  液压与气动  >  医疗卫生装备  >  医疗装备  >  中国医疗设备  相关机构  > 指挥技术学院测量控制系  > 上海交通大学计算机科学与工程系  > 浙江大学流体传动及控制国家重点实验室  > 杭州  > 合肥工业大学学报(自然科学版)  > 大连理工大学机械工程学院MEMS中心  > 大连  > 大连理工大学机械工程学院  > 南京理工大学计算机系  > 南京  > 华中理工大学电子与信息工程系  > 西安交通大学电子与信息工程学院  > 西安邮电学院电信系  > 西安  > 装备指挥技术学院  相关作者  > 曾峦  > 黄海赟  > 岑峰  > 潘锋  > 梁冬泰  > 刘冲  > 王跃宗  > 夏泽邑  > 刘正东  > 游素亚  > 彭复员  > 吴勇军  > 曾雁星  > 吴研  > 李迎春  > 戚飞虎  > 王宣银  > 向桂山  > 杨敬安  > 宋展  > 王立鼎  > 沙里瓦特  > 杨静宇  > 柳健  > 万发贯  > 殷勤业  > 方强  > 张可黛