(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111640868.4 (22)申请日 2021.12.2 9 (71)申请人 山东大学 地址 250013 山东省青岛市 即墨区滨 海路 72号 (72)发明人 郑艳伟　江文　于东晓　 (74)专利代理 机构 青岛华慧泽专利代理事务所 (普通合伙) 37247 代理人 马千会 (51)Int.Cl. G06T 5/00(2006.01) G06V 40/16(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 一种对视频特定目标人物进行打码处理的 方法 (57)摘要 本发明属于图像处理技术领域， 特别涉及一 种对视频特定目标人物进行打码处理的方法。 该 方法包括： （1） 构建目标人物人脸数据库； （2） 从 视频流中提取视频帧， 对其进行人脸检测， 位置 标记及利用训练好的模型进行人脸矫正； （3） 利 用改进的残差网络从矫正的人脸图像中提取特 征向量， 将其与人脸数据库中目标人物的特征向 量进行比对， 若相似度大于预设阈值， 则将该人 脸图像标记为需要打码的目标人物； （4） 对标记 的目标人物进行打码处理； （5） 对视频的每一帧 图像重复 （2）~（4） 的操作后， 逐帧合成视频流输 出。 本发明改进生成面部特征向量的残差网络， 通过改变第一步卷积， 更好地保存图像细节， 显 著提升图像中小尺寸人脸的识别准确度。 权利要求书2页 说明书4页 附图4页 CN 114359088 A 2022.04.15 CN 114359088 A 1.一种对视频 特定目标 人物进行打码处 理的方法， 其特 征在于， 包括： (1)构建目标 人物人脸数据库； (2)从视频流中提取视频帧， 对其进行人脸检测， 位置标记及利用训练好的模型进行人 脸矫正； (3)利用改进的残差网络从矫正的人脸图像中提取特征向量， 将其与人脸数据库中目 标人物的特征向量进行比对， 若相似度大于预设阈值， 则将该人脸图像标记为需要打码的 目标人物； (4)对标记的目标 人物进行打码处 理； (5)对视频的每一帧图像重复(2)～(4)的操作后， 逐帧合成视频流输出。 2.根据权利要求1所述的对视频特定目标人物进行打码处理 的方法， 其特征在于， 所述 步骤(1)中目标 人物人脸数据库的构建方法包括： 对目标人物进行样本图像采集； 利用训练好的模型检测样本图片的68个特 征点， 并利用特 征点对图片进行矫 正； 通过改进的残差网络从矫 正的图片中提取128 D特征向量； 对所有样本图片生成的特征向量计算平均值， 将该向量平均值作为目标人物的特征向 量存储在数据库中。 3.根据权利要求1所述的对视频特定目标人物进行打码处理 的方法， 其特征在于， 所述 步骤(2)中， 对传 入的视频帧进 行灰度化处理， 对处理后的图像采用分层检测网络进 行人脸 检测， 确定人脸样本在图像中的位置 。 4.根据权利要求3所述的对视频特定目标人物进行打码处理 的方法， 其特征在于， 所述 的分层检测网络为包含三个检测模块的Y OLO网络， 所述检测模块由卷积二分类器和回归器 组成， 三个 检测模块的步长分别设置为32、 16、 8， 用以检测不同尺寸大小的人脸。 5.根据权利要求4所述的对视频特定目标人物进行打码处理 的方法， 其特征在于， 所述 三个检测模块中， 检测较大人脸尺寸的两个模块之间通过Max ‑Pooling增加感受野， 以检测 更大尺度的人脸； 检测较小人脸尺寸的模块将两个卷积层得到的特征通过上采样的方式进 行融合， 以检测小尺寸人脸。 6.根据权利要求2所述的对视频特定目标人物进行打码处理 的方法， 其特征在于， 所述 训练好的模型为Dl ib级联回归树模型。 7.根据权利要求2所述的对视频特定目标人物进行打码处理 的方法， 其特征在于， 所述 改进的残差网络为在残差网络前端增加特征增强层， 用于增强特征 的表达能力， 并完成下 采样； 所述特征增强层由一个通道数为16的7*7卷积和一个通道数为16的BasicBlock组成， 其后衔接一个步长为2， 通道数为32的BasicBl ock。 8.根据权利要求1所述的对视频特定目标人物进行打码处理 的方法， 其特征在于， 所述 步骤(3)中具体包括： 将视频帧中人物的人脸128 D特征向量转换为列向量， 记为b； 将人脸库中的人脸特征 向量作为行向量， 按人物标签排序， 构成特征矩阵An×128， 其中n 为特征库中人物数量； 计算向量相似度：权　利　要　求　书 1/2 页 2 CN 114359088 A 2其中： dia g()表示对矩阵取对角线元 素， 组成列向量； sim是n ×1向量； 获取最相似人物： 当sim(j)大于设定的阈值时， 即认为是需要打码的目标 人物。 9.根据权利要求1 ‑8任一项所述的对视频特定目标人物进行打码处理的方法， 其特征 在于， 所述打码处 理包括选择 给定图片遮挡于面部或对面部进行模糊处 理。权　利　要　求　书 2/2 页 3 CN 114359088 A 3