《【王丽】基于单张 RGB 图片的人脸重建方法.pdf》由会员分享,可在线阅读,更多相关《【王丽】基于单张 RGB 图片的人脸重建方法.pdf(31页珍藏版)》请在三个皮匠报告上搜索。
1、基基于于单单张张R RG GB B图图片片的的人人脸脸重重建建方方法法王王丽丽声网 AI 算法工程师声网 AI 算法工程师2022年加入声网从事 3D 人脸/人体重建相关研究王王丽丽contents013 3D D 人人脸脸表表示示方方法法人脸表示方式有哪些?3D 人脸怎么表示?023 3D D 人人脸脸重重建建算算法法什么是 3D 人脸重建?基于模型的重建流程?03应应用用及及展展望望重建算法应用有哪些?有哪些局限?未来可发展的方向?0 01 13 3D D 人人脸脸表表示示方方法法人人脸脸表表示示方方法法3 3D D 人人脸脸表表示示的的意意义义人人脸脸表表示示方方法法2 2D D 表表示
2、示RGB 图、灰度图、红外线图 2 2.5 5D D 表表示示深度图3 3D D 表表示示点云、网格、3D 模型 人人脸脸表表示示方方法法3 3D D 人人脸脸表表示示深度图映射点云网格人人脸脸表表示示方方法法=,S表示人脸3D形状向量:=1,1,1,2,2,2,TT表示对应点纹理信息向量:=1,1,1,2,2,2,T3D 人脸表示人人脸脸 3 3D D 坐坐标标形形状状向向量量3 3D D 人人脸脸表表示示方方法法3 3D D 人人脸脸模模型型获获取取方方式式软件建模仪器采集三维人脸重建0 02 23 3D D 人人脸脸重重建建算算法法3 3D D 人人脸脸重重建建算算法法1 Learnin
3、g an Animatable Detailed 3D Face Model from In-The-Wild Images.Siggraph2021.什什么么是是 3 3D D 人人脸脸重重建建?=,3 3D D 人人脸脸重重建建算算法法3 3D D 人人脸脸重重建建方方法法传统重建方法基于模型重建方法端到端重建方法传统重建方法单图重建多图重建视频重建基于CNN end-to-end方法VRNetPRNet模型重建方法CANDIDE-33DMM及变种3D人脸重建方法1 Learning Formation of Physically-Based Face Attributes.arXiv20
4、20.3 3D D 人人脸脸重重建建算算法法基基于于模模型型的的重重建建流流程程3D 人脸模型构建3D 人脸渲染网络模型构建,回归人脸模型系数/纹理信息3 3D D 人人脸脸重重建建算算法法基于模型的 3D 人脸重建3 3D D 人人脸脸模模型型构构建建核心思想:人脸可以将形状和颜色进行分离;在三维空间中进行一一匹配,并且可以由其他许多幅人脸正交基加权线性相加而来1 A Morphable Model For The Synthesis Of 3D Faces.S3 3D D 人人脸脸重重建建算算法法基于模型的 3D 人脸重建1 A Morphable Model For The Synthe
5、sis Of 3D Faces.Siggraph1999.3 3D D 人人脸脸模模型型构构建建?=+=11+=11?3D 人脸形状向量人脸属性向量表情向量?=23?1 A Morphable Model For The Synthesis Of 3D Faces.Siggraph1999.3 3D D 人人脸脸重重建建算算法法基于模型的 3D 人脸重建?=,3 3D D 人人脸脸模模型型构构建建3D 人脸形状向量人脸属性向量表情向量3 3D D 人人脸脸重重建建算算法法基于模型的 3D 人脸重建?=,3 3D D 人人脸脸模模型型构构建建3D 人脸形状向量人脸属性向量表情向量1 Learni
6、ng an Animatable Detailed 3D Face Model from In-The-Wild Images.S3 3D D 人人脸脸重重建建算算法法基于模型的 3D 人脸重建3 3D D 人人脸脸模模型型构构建建3D 人脸纹理向量1 A Morphable Model For The Synthesis Of 3D Faces.Siggraph1999.?=+=3 3D D 人人脸脸重重建建算算法法基于模型的 3D 人脸重建网网络络模模型型构构建建与与训训练练3D 人脸重建目标 ,=?+?1 A Morphable Model For