面向虚拟现实的着装人体个性化头面部纹理生成技术

扫码查看

原文链接

NETL
NSTL
万方数据
维普

中文摘要：为提升用户在虚拟现实中的体验感,让相同着装人体可以拥有定制的用户面容,提出通过输入单张用户正面人脸图像,利用DECA神经网络生成三维头部模型和初始纹理.在此基础上,对初始纹理进行光照校正,并通过掩膜提取面部主要区域和边缘肤色,然后对头颈部纹理进行肤色转换和面部纹理 2 次修复,得到一个完整的头面部纹理,接着将其作为风格图像,将着装人体的原始身体纹理作为内容图像,通过PAMA神经网络进行风格迁移,得到肤色转换后的身体纹理.将经过处理的头面部纹理与身体纹理重新映射在三维模型上,得到具有用户特征的定制化着装人体.实验结果表明,采用该方法修复的头面部纹理能最大限度保留用户面部信息,生成时间仅需1.4s左右,肤色转换后的面部与身体纹理过渡自然,映射得到的用户着装人体真实度高,可用于各种虚拟现实的应用场景.

外文标题：VR-oriented personalized head and face texture generation technology of dressed human body

外文关键词：

users'personalized customizationface textureillumination correctiontexture repairingneural style transfervirtual reality

作者：

陈金文、王鑫、罗炜豪、梅琛楠、韦京艳、钟跃崎

展开 >

作者单位：

东华大学纺织学院,上海 201620

东华大学纺织面料技术教育部重点实验室,上海 201620

关键词：

定制化着装人体头面部纹理光照校正纹理修复风格迁移虚拟现实

基金：

上海市自然科学基金

项目编号：

21ZR1403000

出版年：

2023

DOI：

10.13475/j.fzxb.20220706301

纺织学报

中国纺织工程学会

纺织学报

CSTPCDCSCD北大核心

影响因子：0.699

ISSN：0253-9721

年,卷(期)：2023.44(9)

参考文献量2