(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111666234.6 (22)申请日 2021.12.31 (71)申请人 北京旷视科技有限公司 地址 100096 北京市海淀区西三 旗建材城 内建中路12幢一层1268号 申请人 北京迈格威科技有限公司 (72)发明人 吴戈　 (74)专利代理 机构 北京超凡宏宇专利代理事务 所(特殊普通 合伙) 11463 代理人 唐正瑜 (51)Int.Cl. G06T 5/00(2006.01) G06T 3/00(2006.01) G06T 7/11(2017.01) G06T 7/194(2017.01) (54)发明名称 一种目标对象虚化方法、 装置、 存储介质及 电子设备 (57)摘要 本申请实施例提供一种目标对象虚化方法、 装置、 存储介质及电子设备， 该目标对象虚化方 法包括： 获取待虚化的图像； 基于所述图像得到 所述目标对象的分割图和背景分割图； 对所述背 景分割图进行光斑点检测得到光斑点检测图， 并 根据所述光斑点检测图得到光斑点权重图； 基于 所述光斑点权重图得到背景光斑虚化渲染图； 将 所述背景光斑虚化渲染图和所述目标对象的分 割图进行融合， 得到目标对象光斑虚化渲染图。 通过本申请的一些实施例的目标对象虚化方法 可以使得虚化效果更加自然、 光斑更清晰使 得模 拟的光斑效果逼近单反的拍摄效果。 权利要求书3页 说明书16页 附图5页 CN 114372931 A 2022.04.19 CN 114372931 A 1.一种目标对象虚化方法， 其特 征在于， 所述目标对象虚化方法包括： 获取待虚化的图像， 其中， 所述图像包括目标对象； 基于所述图像得到所述目标对象的分割图和背景分割图； 对所述背景分割图进行光斑点检测得到光斑点检测图， 并根据 所述光斑点检测图得到 光斑点权重图， 其中， 所述光斑点检测图包括光斑点和非光斑点， 所述光斑点权重图用于表 征任一光斑点的权重值和非光斑点的权重值， 所述任一光斑点的权重值大于与所述任一光 斑点对应邻域内的各非光斑点的权 重值； 基于所述 光斑点权 重图得到背景光斑虚化 渲染图； 将所述背景光斑虚化渲染图和所述目标对象的分割图进行融合， 得到目标对象光斑虚 化渲染图。 2.如权利要求1所述的目标对象虚化方法， 其特征在于， 所述对所述背景分割图进行光 斑点检测得到光斑点检测图， 包括： 基于所述背景分割图中的每 个像素点的多个通道中的最大值得到单通道图； 对所述单通道图进行光斑点检测， 得到所述光斑点检测图， 其中， 所述光斑点检测图上 与光斑点对应像素点的像素值为所述单通道图上对应像素点的像素值， 所述光斑点检测图 上非光斑点对应 像素点的像素值 为0。 3.如权利要求2所述的目标对象虚化方法， 其特征在于， 所述对所述单通道图进行光斑 点检测得到所述 光斑点检测图， 包括： 若所述单通道图上任一像素点的属性值大于或等于第 一阈值， 且所述单通道图上与 所 述任一像素点对应的邻域内各像素点的属性值小于或等于第二阈值， 则确认所述任一像素 点属于检测得到的光斑点， 其中， 所述第二阈值小于所述第一阈值， 所述属性值包括像素值 或者归一化像素值， 所述归一化像素值是将整幅图像上所有像素点的像素值进行归一化处 理后得到的各像素点的值。 4.如权利要求2所述的目标对象虚化方法， 其特征在于， 所述对所述单通道图进行光斑 点检测得到所述 光斑点检测图， 包括： 对所述单通道图上 各像素点的像素值进行模糊化处 理， 得到模糊单通道图像； 若所述单通道图上任一像素点的属性值大于第 三阈值， 且所述模糊单通道图像上所述 任一像素点的属性值小于第四阈值， 则确认所述任一像素点属于检测得到的光斑点， 其中， 所述第三阈值大于第四阈值， 所述属 性值包括像素值或者归一化像素值， 所述归一化像素 值是将整幅图像上 所有像素点的像素值进行归一 化处理后得到的各像素点的值。 5.如权利要求1 ‑4任一项所述的目标对象虚化方法， 其特征在于， 所述根据所述光斑点 检测图得到所述 光斑点权 重图， 包括： 对所述光斑点检测图进行稀疏化操作， 得到稀疏化 光斑点检测图； 根据所述稀疏化 光斑点检测图得到所述 光斑点权 重图。 6.如权利要求5所述的目标对象虚化方法， 其特征在于， 所述对所述光斑点检测图进行 稀疏化操作， 包括： 对所述 光斑点检测图包括的稠密区域进行稀疏化操作。 7.如权利要求6所述的目标对象虚化方法， 其特征在于， 在对所述光斑点检测图包括的 稠密区域进行稀疏化操作之前， 所述目标对象虚化方法还 包括： 将所述光斑点检测图分成多个子图；权　利　要　求　书 1/3 页 2 CN 114372931 A 2获取所述多个子图中各子图上质心的坐标； 在所述光斑点检测图上分别以各质心为中心， 求解与 各中心对应设置邻域内包括的非 零值像素点的总数目； 根据所述总数目从所述多个子图中确定所述稠密区域。 8.如权利要求5 ‑7任一项所述的目标对象虚化方法， 其特征在于， 所述根据所述稀疏化 光斑点检测图得到所述 光斑点权 重图， 包括： 根据所述光斑点检测图至少对所述稀疏化光斑点检测图上的离散稀疏点进行像素值 或者归一 化像素值的增大操作， 得到孤立 点增大光斑点检测图； 根据所述孤立 点增大光斑点检测图得到所述 光斑点权 重图。 9.如权利要求8所述的目标对象虚化方法， 其特征在于， 所述根据 所述光斑点检测图至 少对所述稀疏化光斑点检测图上的离散稀疏点进 行像素值或者归一化像素值的增大操作， 包括： 若确认所述光斑点检测图上至少一个像素点属于离散稀疏点， 则增大所述稀疏化光斑 检测图上与所述离散稀疏点对应的像素点的值， 并增大所述稀疏化光斑检测图上与所述离 散稀疏点对应的邻域内各像素点的值， 其中， 所述像素点的值包括像素值或者归一化像素 值。 10.如权利要求9所述的目标对象虚化方法， 其特 征在于， 针对任一离散稀疏点， 所述增大所述稀疏化光斑检测图上与 所述离散稀疏点对应的像 素点的值， 包括： 将所述稀疏化光斑检测图上与所述任一离散稀疏点对应的像素点的值替 换为中心增大值， 其中， 所述中心增大值是在所述光斑点检测图上与所述任一离散稀疏点 对应的像素点的值， 其中， 所述像素点的值包括像素值或者归一 化像素值。 11.如权利要求10所述的目标对象虚化方法， 其特征在于， 所述增大所述稀疏化光斑检 测图上与所述离 散稀疏点对应的邻域内各像素点的值， 包括： 将所述稀疏化光斑点检测图上与所述任一离散稀疏点对应邻域内的各像素点的值替 换为边缘增大值， 其中， 所述 边缘增大值 为小于所述中心增大值且大于零的值。 12.如权利要求1 ‑11任一项所述的目标对象虚化方法， 其特征在于， 所述基于光斑点权 重图得到背景光斑虚化 渲染图， 包括： 将所述图像进行饱和度增强得到 饱和度增强图像； 对所述饱和度增强图像进行分割得到 饱和度增强背景分割图； 对所述饱和度增强背景分割图进行背景拉伸得到拉伸背景分割图； 根据所述拉伸背景分割图进行光斑区域亮度增益处 理得到待渲染的背景图像； 获取深度估计图； 根据所述待渲染的背景图像、 所述光斑点权重图以及所述深度估计图得到所述背景光 斑虚化渲染图。 13.一种计算机可读存储介质， 其上存储有计算机程序， 其特征在于， 所述程序被处理 器执行时可实现权利要求1 ‑12中任意 一项权利要求所述的方法。 14.一种电子设备， 包括存储器、 处理器以及存储在所述存储器上并可在所述处理器上 运行的计算机程序， 其中， 所述处理器执行所述程序时可实现权利要求1 ‑12中任意一项权 利要求所述的方法。权　利　要　求　书 2/3 页 3 CN 114372931 A 3