(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211001121.9 (22)申请日 2022.08.19 (71)申请人 中国科学院自动化研究所 地址 100190 北京市海淀区中关村东路95 号 (72)发明人 刘彭鹏　曾智　张桂煊　张树武　 (74)专利代理 机构 北京路浩知识产权代理有限 公司 11002 专利代理师 任少瑞 (51)Int.Cl. G06T 17/00(2006.01) G06T 15/00(2011.01) (54)发明名称 人体模型构建方法、 装置、 电子设备及存储 介质 (57)摘要 本发明提供一种人体模型构建方法、 装置、 电子设备及存储介质； 其中所述人体模型构建方 法包括： 基于单视角人体图像及单视角人体图像 对应的人体参数化模型， 确定人体参数化模型对 应的目标人体 法向图； 基于目标人体 法向图及人 体参数化模 型， 确定人体参数化模 型对应的目标 先验特征， 目标先验特征是将法向图先验特征、 相对深度先验特征及骨架结构先验特征进行特 征融合后得到的； 基于目标先验特征， 构建目标 人体模型。 通过上述方法， 利用人体参数化模型， 充分挖掘人体固有的目标先验特征， 基于目标先 验特征构建目标人体模型， 避免了基于隐式表达 存在的深度模糊性问题和重建伪影问题， 提高了 构建三维人体模型的准确度。 权利要求书2页 说明书15页 附图4页 CN 115393510 A 2022.11.25 CN 115393510 A 1.一种人体模型构建方法， 其特 征在于， 包括： 基于单视角人体图像及所述单视角人体图像对应的人体参数化模型， 确定所述人体参 数化模型对应的目标 人体法向图； 基于所述目标人体法向图及所述人体参数化模型， 确定所述人体参数化模型对应的目 标先验特征， 所述 目标先验特征是将法向图先验特征、 相对深度先验特征及骨架结构先验 特征进行特征融合后得到的； 基于所述目标 先验特征， 构建目标 人体模型。 2.根据权利要求1所述的人体模型构建方法， 其特征在于， 所述基于单视角人体图像及 所述单视角人体图像对应的人体参数化模型， 确定所述人体参数化模型对应的目标人体法 向图， 包括： 将所述人体参数化模型进行可微渲染处理， 得到可微渲染处理结果， 所述可微渲染处 理结果包括所述人体参数化模型对应的第一人体法向图； 将所述单视角人体图像及所述第 一人体法向图输入生成式对抗网络模型， 得到所述生 成式对抗网络模型输出的所述目标人体法向图， 所述生成 式对抗网络模型是基于单视角人 体图像样本及与所述单视角人体图像样本对应的人体法向图样本进行训练得到的。 3.根据权利要求2所述的人体模型构建方法， 其特征在于， 所述可微渲染处理结果还包 括所述人体参数化模型对应的渲染深度图； 所述基于所述目标人体法 向图及所述人体参数化模型， 确定所述人体参数化模型对应 的目标先验特征， 包括： 对所述渲染深度图、 所述目标人体法向图及所述单视角人体图像进行特征提取， 生成 特征图； 基于所述特 征图， 确定所述法向图先验特 征； 基于所述 渲染深度图， 确定所述相对深度先验特 征； 基于所述人体参数化模型， 确定所述骨架结构先验特 征。 4.根据权利要求3所述的人体模型构建方法， 其特征在于， 所述基于所述渲染深度图， 确定所述相对深度先验特 征， 包括： 针对任一空间查询点， 确定所述空间查询点与所述渲染深度图的距离， 及所述空间查 询点在所述 渲染深度图上的投影值； 基于所述距离及所述投影值， 确定所述相对深度先验特 征。 5.根据权利要求3所述的人体模型构建方法， 其特征在于， 所述基于所述人体参数化模 型， 确定所述骨架结构先验特 征， 包括： 基于所述人体参数化模型对应的多个顶点坐标， 确定所述人体参数化模型对应的多个 关节点； 对各所述关节点及所述人体参数化模型的表面进行采样， 得到多个采样点； 针对任一所述采样点， 计算所述采样点与各所述关节点的相对位置， 得到所述采样点 相对于所述各关节点的特 征表达； 基于各所述特征表达， 确定所述骨架结构先验特 征。 6.根据权利要求1所述的人体模型构建方法， 其特征在于， 所述基于所述目标先验特 征， 构建目标 人体模型， 包括： 基于所述目标先验特征及隐式函数， 确定所述目标先验特征对应的目标先验隐式表达权　利　要　求　书 1/2 页 2 CN 115393510 A 2特征； 基于所述目标 先验隐式表达特 征， 利用等 值面提取算法， 构建所述目标 人体模型。 7.根据权利要求2所述的人体模型构建方法， 其特征在于， 在所述基于单视角人体图像 及所述单视角人体图像对应的人体参数化模型， 确定所述人体参数化模型对应的目标人体 法向图之后， 所述方法还 包括： 基于所述第 一人体法向图及所述目标人体法 向图， 确定所述第 一人体法 向图与所述目 标人体法向图之间目标损失， 其中， 所述目标损失包括法向图损失及轮廓图损失； 根据所述目标损失对所述人体参数化模型的参数进行优化。 8.一种人体模型构建装置， 其特 征在于， 包括： 第一确定模块， 用于基于单视角人体图像及所述单视角人体图像对应的人体参数化模 型， 确定所述人体参数化模型对应的目标 人体法向图； 第二确定模块， 用于基于所述目标人体法向图及所述人体参数化模型， 确定所述人体 参数化模型对应的目标先验特征， 所述 目标先验特征是将法向图先验特征、 相对深度先验 特征及骨架结构先验特 征进行特征融合后得到的； 构建模块， 用于基于所述目标 先验特征， 构建目标 人体模型。 9.一种电子设备， 包括存储器、 处理器及存储在所述存储器上并可在所述处理器上运 行的计算机程序， 其特征在于， 所述处理器执行所述程序时实现如权利要求1至7任一项所 述人体模型构建方法。 10.一种非暂态计算机可读存储介质， 其上存储有计算机程序， 其特征在于， 所述计算 机程序被处 理器执行时实现如权利要求1至7任一项所述人体模型构建方法。 11.一种计算机程序产品， 包括计算机程序， 其特征在于， 所述计算机程序被处理器执 行时实现如权利要求1至7任一项所述人体模型构建方法。权　利　要　求　书 2/2 页 3 CN 115393510 A 3