(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210237993.9 (22)申请日 2022.03.10 (71)申请人 厦门美图之家科技有限公司 地址 361000 福建省厦门市 火炬高新区软 件园华讯楼C区B1F- 089 (72)发明人 何恕预　上官娴　 (74)专利代理 机构 厦门仕诚联合知识产权代理 事务所(普通 合伙) 35227 专利代理师 陈蓓蓓 (51)Int.Cl. G06T 5/00(2006.01) G06T 7/11(2017.01) G06K 9/62(2022.01) G06V 10/44(2022.01) G06V 10/80(2022.01)G06V 40/16(2022.01) (54)发明名称 基于图像处理的唇纹去除方法、 系统、 设备 及存储介质 (57)摘要 本发明属于图像处理技术领域， 具体涉及基 于图像处理的唇纹去除方法、 系统、 设备及存储 介质。 该方法包括： 获取待 修图的原始图像， 基于 唇部关键点的外包围盒裁剪得到唇部图像； 对获 取的原始图像进行唇部分割， 得到标记唇部区域 的蒙版图像， 在蒙版图像范围内进行唇纹检测， 得到单通道的唇纹蒙版； 将所述唇部图像划分为 若干相同尺寸的梯度块， 并进行唇纹标记； 采用 无唇纹区域梯度块替换标记有唇纹的修复区域 的梯度块， 泊松重建后得到唇纹去除图像； 对所 述唇部图像和唇纹去除图像进行中值滤波， 得到 保留原图的颜色特征信息的结果图， 并对所述结 果图进行局部高光恢复， 得到高光恢复后的最终 图像。 本发 明实现了在去除唇 纹的同时保持唇彩 的质感。 权利要求书2页 说明书9页 附图3页 CN 114820340 A 2022.07.29 CN 114820340 A 1.一种基于图像处 理的唇纹去除方法， 其特 征在于， 包括以下步骤： 获取待修图的原 始图像， 基于唇部关键点的外包围盒裁 剪得到唇部图像； 对获取的原始图像进行唇部分割， 得到标记唇部区域的蒙版图像， 在蒙版图像范围内 进行唇纹检测， 得到单通道的唇纹蒙版； 计算所述唇部 图像梯度， 将所述唇部 图像划分为若干相同尺寸的梯度块， 并根据所述 唇纹蒙版对划分的梯度块进行唇纹标记； 采用无唇纹 区域梯度块替换标记有 唇纹的修复区 域的梯度块， 泊松重建后得到唇纹去除图像； 对所述唇部图像和唇纹去除图像进行中值滤波， 得到保留原图的颜色特征信 息的结果 图， 并对所述结果图进行局部高光恢复， 去除唇纹导致的局部光影变化， 保留高光区域， 得 到高光恢复后的最终图像。 2.如权利要求1所述的基于图像处理 的唇纹去除方法， 其特征在于： 所述基于唇部关键 点的外包围盒裁剪得到唇部图像之前， 还包括计算唇部关键点的外包围盒， 所述计算唇部 关键点的外包围盒的方法为： 根据人脸检测得到原 始图像中的人脸关键点； 遍历所述人脸关键点， 通过索引查找唇部的关键点 集； 将唇部的关键点 集中顶点组成矩形框即为唇部关键点的外包围盒。 3.如权利要求2所述的基于图像处理 的唇纹去除方法， 其特征在于： 划分的每个梯度块 的尺寸为所述唇部图像的尺寸等比例划分， 在计算所述唇部图像梯度时， 梯度用来衡量相 邻像素的像素值变化 量， 像素点(x,y)处的梯度值G(x,y)的大小为： G(x,y)＝sqr t(Gx(x,y)2+Gy(x,y)2) 其中， Gx和Gy分别表示像素点(x,y)在x方向和y方向的梯度值。 4.如权利要求3所述的基于图像处理 的唇纹去除方法， 其特征在于： 根据 所述唇纹蒙版 对划分的梯度块进行 唇纹标记的方法， 包括： 获取划分的若干相同尺寸的梯度块， 每个梯度块对应唇部图像以及唇纹蒙板图中相同 位置的像素块； 逐一判断每个梯度块， 若梯度块对应唇纹蒙板图的像素块中若存在像素值大于0， 即存 在唇纹， 该梯度块标记为 修复区域； 若梯度块中不存在被 检测为唇纹的像素点， 则该梯度块 为无皱纹区域。 5.如权利要求4所述的基于图像处理 的唇纹去除方法， 其特征在于： 采用无唇纹区域梯 度块替换标记有 唇纹的修复区域的梯度块时， 采用在未标记的且满足筛选条件的无唇纹 区 域梯度块中随机 选择的方式进行替换。 6.如权利要求5所述的基于图像处理 的唇纹去除方法， 其特征在于： 所有待修复区域的 梯度块替换完毕后， 对唇部图像进行泊松重建， 得到唇纹去除图像； 对所述唇纹去除图像和唇部图像分别进行一 次相同半径的中值滤波， 得到滤波后的所 述唇纹去除图像和唇部图像的低频特征图， 并计算得到所述唇纹去除图像和唇部图像的高 频特征图； 将所述唇纹去除图像和唇部图像的低频特征图与高频特征图融合得到保留原图的颜 色特征信息的结果图。 7.如权利要求6所述的基于图像处理 的唇纹去除方法， 其特征在于： 对所述结果图进行权　利　要　求　书 1/2 页 2 CN 114820340 A 2局部高光恢复的方法， 包括： 对所述唇部图像进行高斯滤波将滤波后图像比唇部图像暗的像素值置为255， 其他区 域的像素值置为0， 得到高光区域 蒙版图像； 对高光区域蒙版图像进行连通域检测并分类， 依据长宽比将连通域标记为唇纹区域和 高光区域， 在高光区域内基于所述唇部图像 计算高光特 征混合图； 将高光特征混合图以柔光混合模式与保留原图的颜色特征信 息的结果图混合， 得到 高 光恢复后的图像， 作为 最终图像。 8.一种基于 图像处理的唇纹去除系统， 其特征在于： 所述基于图像处理的唇纹去除系 统采用权利要求 1‑7中任意一项所述基于图像处理的唇纹去除方法对唇纹去除并保持唇彩 的质感； 所述基于图像处 理的唇纹去除系统包括： 唇纹检测模块， 用于对获取的待修图的原始图像裁剪得到唇部 图像， 对获取的原始图 像进行唇部 分割， 得到标记唇部区域的蒙版图像， 在蒙版图像范围内进 行唇纹检测， 得到单 通道的唇纹蒙版； 唇纹去除模块， 用于计算所述唇部 图像梯度， 将所述唇部 图像划分为若干相同尺寸的 梯度块， 并根据所述唇纹蒙版对划分的梯度块进行唇纹标记； 采用无唇纹区域梯度块替换 标记有唇纹的修复区域的梯度块， 泊松重建后得到唇纹去除图像； 原图特征保留模块， 用于对所述唇部 图像和唇纹去 除图像进行中值滤波， 得到保留原 图的颜色特 征信息的结果图； 局部高光恢复模块， 用于对所述结果图进行局部高光恢复， 去 除唇纹导致的局部光影 变化， 保留 高光区域， 得到高光恢复后的最终图像。 9.一种唇纹去除设备， 包括存储器和处理器， 所述存储器存储有计算机程序， 其特征在 于， 所述处 理器执行所述计算机程序时实现权利要求1至7中任一项所述的方法的步骤。 10.一种存储介质， 存储有计算机程序， 其特征在于， 所述计算机程序被处理器执行时 实现权利要求1至7中任一项所述的方法的步骤。权　利　要　求　书 2/2 页 3 CN 114820340 A 3