(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111674777.2 (22)申请日 2021.12.31 (71)申请人 北京旷视科技有限公司 地址 100096 北京市海淀区西三 旗建材城 内建中路12幢一层1268号 申请人 北京迈格威科技有限公司 　 深圳旷视金智科技有限公司 (72)发明人 孙宇超　金宇林　 (74)专利代理 机构 北京润泽恒知识产权代理有 限公司 1 1319 代理人 王婷婷 (51)Int.Cl. G06T 7/11(2017.01) G06T 7/90(2017.01) G06N 3/04(2006.01)G06N 3/08(2006.01) (54)发明名称 训练数据 的生成方法、 试妆方法、 电子设备 及存储介质 (57)摘要 本申请实施例公开一种训练数据的生成方 法、 试妆方法、 电子设备及存储介质， 该训练数据 的生成方法包括： 获取第一人脸图像和第一遮挡 物图像， 其中， 第一人脸图像中的上妆部位未被 遮挡， 第一遮挡物图像为用于对 上妆部位进行遮 挡的遮挡对象所对应的 图像； 获取第一人脸图像 中上妆部位对应的第一分割掩码图， 获取第一遮 挡物图像中遮挡对象对应的第二 分割掩码图； 使 用第二分割掩码图， 将第一人脸图像和第一遮挡 物图像进行融合， 生成上妆部位被遮挡对象覆盖 的第二人脸图像； 根据第一分割掩码图和第二分 割掩码图， 生成第二人脸图像中上妆区域对应的 第三分割掩码图， 其中， 上妆区域包括： 上妆部位 所在区域中未被遮挡对象覆盖的区域。 权利要求书2页 说明书13页 附图4页 CN 114387285 A 2022.04.22 CN 114387285 A 1.一种训练数据的生成方法， 其特 征在于， 所述方法包括： 获取第一人脸图像和第一遮挡物图像， 其中， 所述第一人脸图像中的上妆部位未被遮 挡， 所述第一遮挡物图像为用于对所述上妆部位进行遮挡的遮挡对象所对应的图像； 获取所述第 一人脸图像中所述上妆部位对应的第 一分割掩码图， 以及获取所述第 一遮 挡物图像中所述遮挡对象对应的第二分割掩码图； 使用所述第二分割掩码图， 将所述第一人脸图像和所述第一遮挡物图像进行融合， 生 成所述上妆部位被所述遮挡对象覆盖的第二人脸图像； 根据所述第 一分割掩码图和所述第 二分割掩码图， 生成所述第 二人脸图像中上妆区域 对应的第三分割掩码图， 其中， 所述上妆区域包括： 所述上妆部位所在区域中未被所述遮挡 对象覆盖的区域。 2.根据权利要求1所述的方法， 其特征在于， 在所述使用所述第二分割掩码图， 将所述 第一人脸图像和所述第一遮挡物图像进行融合， 生成所述上妆部位被所述遮挡对象覆盖的 第二人脸图像的步骤之前， 还 包括： 根据所述第 一人脸图像中皮肤 区域的颜色值， 对所述第 一遮挡物图像中所述遮挡对象 的颜色值进 行调节， 得到第二遮挡物图像， 其中， 所述第二遮挡物图像中所述遮挡对象的颜 色值与所述第一人脸图像中皮肤区域的颜色值的差值小于第一数值。 3.根据权利要求2所述的方法， 其特征在于， 所述根据所述第 一人脸图像中皮肤 区域的 颜色值， 对所述第一遮挡物图像中所述遮挡对象的颜色值进 行调节， 得到第二遮挡物图像， 包括： 获取所述第一人脸图像中皮肤区域的第一平均颜色值和所述第一遮挡物图像中所述 遮挡对象所在区域的第二平均颜色值； 根据所述第 一平均颜色值、 所述第 二平均颜色值以及所述遮挡 对象所在区域中各像素 点所对应的初始颜色值， 确定所述遮挡对象所在区域中各像素点所对应的目标颜色值； 将所述第一遮挡物图像中所述遮挡对象所在区域中各像素点所对应的初始颜色值替 换为对应的目标颜色值， 得到第二遮挡物图像。 4.根据权利要求1 ‑3任一项所述的方法， 其特征在于， 所述使用所述第二分割掩码图， 将所述第一人脸图像和所述第一遮挡物图像进行融合， 生成所述上妆部位被所述遮挡对象 覆盖的第二人脸图像， 包括： 对所述第二分割 掩码图中所述遮挡 对象的轮廓进行边缘平滑 处理， 得到第四分割掩码 图； 使用所述第四分割掩码图， 将所述第一人脸图像和所述第一遮挡物图像进行Alpha融 合， 生成所述上妆部位被所述遮挡对象覆盖的第二人脸图像； 所述根据 所述第一分割掩码图和所述第 二分割掩码图， 生成所述第 二人脸图像中上妆 区域对应的第三分割掩码图， 包括： 对所述第一分割 掩码图与 所述第四分割掩码图进行相减运算， 得到所述第 二人脸图像 中上妆区域对应的第三分割掩码图。 5.根据权利要求1 ‑4任一项所述的方法， 其特 征在于， 所述方法还 包括： 构建初始分割模型； 将多个不同的第 二人脸图像分别输入至所述初始分割模型进行处理， 输出对应的预测权　利　要　求　书 1/2 页 2 CN 114387285 A 2分割掩码图， 基于所述多个不同的第二人脸图像所对应的第三分割掩码图和预测分割掩码 图， 对所述初始分割模型进行训练， 直至模型收敛， 得到目标分割模型。 6.一种试妆方法， 其特 征在于， 所述方法包括： 获取待上妆的目标 人脸图像和目标 上妆产品的颜色值； 将所述目标人脸图像输入至目标分割 模型进行处理， 得到所述目标人脸图像中目标上 妆区域对应的第五分割掩码图， 其中， 所述目标分割模型是基于权利要求 1‑5任一项所述方 法所生成的训练数据训练得到的； 根据目标颜色生成策略、 所述目标上妆区域所对应的初始颜色值和所述目标上妆产品 的颜色值， 生成所述目标上妆区域所对应的目标上妆颜色值， 其中， 所述目标颜色生成策略 包括： 所述目标上妆区域中初始颜色值不高于第二数值的区域使用正片叠底的方式生成对 应的目标上妆颜色值， 高于所述第二数值的区域采用滤色的方式生成对应的目标上妆颜色 值； 根据所述第五分割掩码图和所述目标上妆区域所对应的目标上妆颜色值， 生成试妆人 脸图像。 7.根据权利要求6所述的方法， 其特征在于， 所述根据所述第五分割掩码图和所述目标 上妆区域所对应的目标 上妆颜色值， 生成试妆人脸图像， 包括： 根据所述第五分割掩码图和所述目标上妆区域所对应的目标上妆颜色值， 生成用于对 所述目标 上妆区域进行 上妆的试妆 模板图； 将所述试妆模板图覆盖至所述目标人脸图像的所述目标上妆区域上， 得到试妆人脸图 像。 8.根据权利要求7所述的方法， 其特征在于， 所述将所述试妆模板图覆盖至所述目标人 脸图像的所述目标 上妆区域上， 得到试妆人脸图像， 包括： 获取用于调节上妆 颜色深浅效果的透明系数； 根据所述透 明系数， 分别对所述试妆模板图和所述目标人脸图像的所述目标上妆区域 的透明度进行调节； 将调节后的试妆模板图覆盖至调节后的目标人脸图像的目标上妆区域上， 得到试妆人 脸图像。 9.一种电子设备， 包括存储器、 处理器及存储在存储器上的计算机程序， 其特征在于， 所述处理器执行所述计算机程序以实现权利要求 1‑5任一项所述的方法， 或者， 所述处理器 执行所述计算机程序以实现权利要求6 ‑8任一项所述的方法。 10.一种计算机可读存储介质， 其上存储有计算机程序/指令， 其特征在于， 该计算机程 序/指令被处理器执行时实现权利要求 1‑5任一项所述的方法， 或者， 该计算机程序/指 令被 处理器执行时实现权利要求6 ‑8任一项所述的方法。 11.一种计算机程序产品， 包括计算机程序/指令， 其特征在于， 该计算机程序/指令被 处理器执行时实现权利要求1 ‑5任一项所述的方法， 或者， 该计算机程序/指令被处理器执 行时实现权利要求6 ‑8任一项所述的方法。权　利　要　求　书 2/2 页 3 CN 114387285 A 3