(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210216478.2 (22)申请日 2022.03.07 (71)申请人 杭州国芯科技股份有限公司 地址 310012 浙江省杭州市文三路90号 东 部软件园创新大厦A座5 -6层 (72)发明人 陈凯　闫文志　欧阳次山 　 (74)专利代理 机构 杭州君度专利代理事务所 (特殊普通 合伙) 33240 专利代理师 陈炜 (51)Int.Cl. H04N 9/73(2006.01) H04N 5/232(2006.01) G06V 10/50(2022.01) G06K 9/62(2022.01) G06N 3/04(2006.01) (54)发明名称 摄像机人脸区域白平衡的优化方法 (57)摘要 本发明公开了摄像机人脸区域白平衡的优 化方法。 现有方法没有针对图像整体， 更倾向于 全局校正， 就导致人脸容易偏色。 本发明方法中， 将CMOS传感器采集的 图像送入图像处理器， 得到 处理后图像， 通过人脸检测网络检测出人脸区域 信息； 根据人脸区域信息提取人脸图， 拆分成人 脸左图和人脸右图； 对人脸左、 右图进行直方图 统计， 判断人脸区域光线环境， 得到人脸区域的 白平衡权重； 将人脸区域的白平衡权重与系统原 始权重混合得到最终白平衡权重， 并设置到系统 中。 本发明方法结合神经网络技术， 充分考虑了 摄像机人脸的颜色受到环境复杂场景的影响， 可 以在不同的环境光线、 场景下， 自适应校正到人 脸区域的颜色， 提高了摄像机的人脸区域白平衡 效果。 权利要求书1页 说明书3页 附图3页 CN 114598852 A 2022.06.07 CN 114598852 A 1.摄像机人脸区域白平衡的优化方法， 其特 征在于： 步骤(1)将C MOS传感器采集的图像送入图像处 理器， 得到处 理后图像P； 步骤(2)将处理后图像P送入神经网络处理器进行处理， 通过人脸检测网络检测出人脸 区域信息I； 步骤(3)从处 理后图像P中通过 人脸区域信息I 提取人脸图F； 步骤(4)将人脸图F进行左右等宽拆分， 得到人脸左图L和人脸右图R； 步骤(5)对人脸左图L和人脸右图R进行直方图统计， 判断人脸区域光线环境， 得到人脸 区域的白平衡权 重W； 步骤(6)将处理后图像P中人脸图F所在区域的白平衡权重W与系统原始权重S进行混合 计算， 得到人脸图F 所在区域的最终白平衡权 重E， 并设置 到系统中： E＝(W+1) ×S。 2.如权利要求1所述的摄像机人脸区域白平衡的优化方法， 其特征在于： 所述的神经网 络处理器为NPU神经网络加速器， 运行进行 人脸检测的神经网络模型。 3.如权利要求1所述的摄像机人脸区域白平衡的优化方法， 其特征在于： 步骤(5)具体 方法是： (5‑1)分别对人脸左图L和人脸右图R分别 进行直方图统计， 并进行0～ 1的归一化计算， 得到直方图统计结果； 人脸左图L的直方图统计结果H_L[n]， n＝0,1, …,N‑1； 人脸右图R的 直方图统计结果H_R[n]， n ＝0,1,…,N‑1； 灰度级个数N ＝256； (5‑2)计算H_L[n]和H_R[n]的欧式距离 H_L(i)表示H_ L[n]中的第i个值， H_R(i)表示H_R[n]中的第i个值； (5‑3)如D＞Tmax， 判断人脸区域光线环境较差， 则设置人脸区域的白平衡权重W＝0； 如D ＜Tmin， 判断人脸区域光线环境较好， 则设置人脸区域的白平衡权重W＝1； 如Tmin≤D≤Tmax， 则人脸区域的白平衡权重 最大光线偏差阈值Tmax和最小光线 偏差阈值Tmin由用户配置， 且0＜ Tmin＜Tmax≤5。权　利　要　求　书 1/1 页 2 CN 114598852 A 2摄像机人脸区域白平衡的优化方 法 技术领域 [0001]本发明属于图像处理技术领域， 具体涉及一种摄像机人脸区域白平衡的优化方 法。 背景技术 [0002]由于CMOS传感器输出的是Bayer图， 颜 色本身是处于非平衡状态， 故所输出的图像 颜色非自然界所呈现出来的色彩， 导致人看到图像非常的怪异， 解决图像颜色问题就成了 一个无法避免的问题。 目前， 摄像机在图像处理中， 会进 行自动白平衡， 对颜色进 行校正。 传 统白平衡方法均是： 整 幅图像采用全局统计或者局部找白点的方式进行图像分析， 通过灰 度世界的理论来对图像进 行全局校正。 由于图像中的细节较为复杂， 且图像中的内容较多， 颜色的全局校正的方法不能保证每一处颜色均正确的校正； 且观察者所关注的内容不一， 对于人脸相 机来说， 观察者关注的内容主体为人脸， 传统的白平衡校正可能会导致人脸区 域的颜色偏色， 就极大的影响了 真实性判断， 不利于有效信息的存储和 后期查看， 导致观 察 者对监控信息的接收产生偏差 。 [0003]专利号为201710557602.0的发明专利提出一种白平衡处理方法和装置。 该方法首 先对活体的被摄物进行成像， 得到待处理的图像， 根据包含人脸的目标区域在图像中所占 面积， 计算白平衡增益值， 目标区域包括人脸区域或人像区域， 根据白平衡增益值， 对图像 进行白平衡处理。 通过对人体进行活体识别， 避免了当检测到非活体的被拍摄物包含人脸 时， 即启动基于活体人脸的自动白平衡对图像进行调节。 [0004]专利号为201910 120250.1的发明专利公开了一种图像的白平衡处理方法、 装置和 终端设备。 该方法首先通过对图像中的背 景区域， 提取色彩特征， 这里的色彩特征用于指示 背景区域色彩分布情况。 根据色彩特征， 匹配人脸白平衡算法的适用条件， 若 该色彩特征与 适用条件匹配， 则根据用于将图像中的人脸调整至肤色的人脸白平衡算法， 对图像进行白 平衡处理。 [0005]申请号为201510896549.8的发明专利申请公开了一种 具有人脸的图像处理方法 和装置。 方法包括： 获取当前拍摄场景中具有人脸的图像； 对具有人脸的图像进行人脸识 别， 得到人脸区域以及除人脸区域之外的环境光区域； 确定人脸区域的人脸决定点以及环 境光区域的环境光决定点； 根据人脸决定点、 环 境光决定点以及设定距离阀值， 调整 所述白 平衡参数； 根据白平衡参数对具有人脸的图像进行调整。 发明内容 [0006]本发明的目的是针对现有技术的不足， 为了让人脸区域的白平衡得到更为精准的 校正， 提供一种摄 像机人脸区域白平衡的优化方法。 [0007]本发明方法需要找到人脸区域的准确白点信息， 以提供人脸部分的白平衡校正， 使得在相机对图像在策略上可选择人脸区域白平衡的权重， 使得图像的 白平衡校正更为准 确。说　明　书 1/3 页 3 CN 114598852 A 3