(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210859248.8 (22)申请日 2022.07.21 (71)申请人 零束科技有限公司 地址 201805 上海市嘉定区安亭镇墨玉南 路888号2201室JT1740 (72)发明人 王彤　 (74)专利代理 机构 北京合智同创知识产权代理 有限公司 1 1545 专利代理师 李杰 (51)Int.Cl. G06F 21/62(2013.01) G06V 40/16(2022.01) G06V 10/26(2022.01) G06V 10/40(2022.01) G06V 10/74(2022.01)G06V 10/774(2022.01) G06V 10/80(2022.01) G06V 10/82(2022.01) (54)发明名称 智能驾驶和智能座舱图像的人脸隐私保护 方法及装置 (57)摘要 本申请实施例提供了一种智能驾驶和智能 座舱图像的人脸隐私保护方法及装置， 属于智能 驾驶数据处理和 智能座舱数据处理技术领域， 该 方法包括： 分别对从待处理图像中识别的待脱 敏 人脸图像和从虚拟人脸图像集中获取待脱敏人 脸图像对应的虚拟人脸图像进行特征提取获得 图像特征； 将相对应的待脱 敏人脸图像和虚拟人 脸图像的图像特征进行特征融合获得融合脸图 像； 从各融合脸图像确定目标融合脸图像， 其中 目标融合脸图像与对应的虚拟人脸图像之间的 第一相似度大于第一相似度阈值且目标融合脸 图像与对应的待脱敏人脸图像的第二相似度小 于第二相似度阈值； 通过目标融合脸图像替换待 处理图像中相对应的待脱 敏人脸图像。 本方案能 提高图像 检测和语义分割的精度。 权利要求书2页 说明书10页 附图3页 CN 115238307 A 2022.10.25 CN 115238307 A 1.一种智能驾驶和智能座 舱图像的人脸隐私保护方法， 包括： 从待处理图像中识别至少一个待 脱敏人脸图像； 从虚拟人脸图像集中获取每 个所述待 脱敏人脸图像对应的虚拟人脸图像； 分别对每 个所述待 脱敏人脸图像和所述虚拟人脸图像进行 特征提取， 获得图像特 征； 分别将每组相对应的所述待脱敏人脸图像和所述虚拟人脸图像的图像特征进行特征 融合， 获得融合 脸图像； 根据各所述融合脸图像确定至少一个目标融合脸图像， 其中， 所述目标融合脸图像与 相对应的所述虚拟人脸图像之 间的第一相似度大于第一相似度阈值， 且所述目标融合脸图 像与相对应的所述待 脱敏人脸图像的第二相似度小于第二相似度阈值； 分别通过每个所述目标融合脸图像替换所述待处理图像中相对应的所述待脱敏人脸 图像。 2.根据权利要求1所述的方法， 其中， 所述方法还 包括： 通过获取到的训练样本集对神经网络模型进行训练， 获得图像生成模型， 其中， 所述训 练样本集包括多个人脸图像； 通过所述图像生成模型生成至少一个符合人脸 域的虚拟人脸图像； 获得包括所生成的各 所述虚拟人脸图像的所述虚拟人脸图像集。 3.根据权利要求1所述的方法， 其中， 所述分别对每个所述待脱敏人脸图像和所述虚拟 人脸图像进行 特征提取获得图像特 征， 包括： 通过预先训练的编码器， 分别对每个所述待脱敏人脸图像进行特征提取， 获得每个所 述待脱敏人脸图像的图像特 征； 通过所述编码器， 分别对每个所述虚拟人脸图像进行特征提取， 获得每个所述虚拟人 脸图像的图像特 征。 4.根据权利要求1所述的方法， 其中， 所述根据各所述融合脸图像确定至少一个目标融 合脸图像， 包括： 针对每个所述融合 脸图像均执 行： 计算该融合 脸图像与相对应的所述虚拟人脸图像的第一相似度； 若该融合脸图像对应的所述第 一相似度大于预设的第 一相似度阈值， 则对该融合脸图 像的轮廓进 行调整， 获得调优融合脸图像， 其中， 所述调优融合脸图像与相对应的所述待脱 敏人脸图像的轮廓损失值小于预设的损失值阈值； 计算所述调优融合 脸图像与相对应的所述待 脱敏人脸图像的第二相似度； 若所述调优融合脸图像对应的所述第 二相似度小于预设的第 二相似度阈值， 则将所述 调优融合 脸图像确定为所述目标融合 脸图像。 5.根据权利要求 4所述的方法， 其中， 所述方法还 包括： 针对每个所述融合脸图像， 若该融合脸图像对应的所述第 一相似度小于或等于所述第 一相似度阈值， 则为该融合脸图像对应的所述待脱敏人脸图像重新确定相对应的所述虚拟 人脸图像， 并针对重新确定的所述待脱敏人脸图像和相对应的所述虚拟人脸图像， 执行特 征提取和特 征融合的处 理， 获得新的融合 脸图像。 6.根据权利要求 4所述的方法， 其中， 所述方法还 包括： 针对每个所述调优融合脸图像， 若该调优融合脸图像对应的所述第 二相似度 大于或等权　利　要　求　书 1/2 页 2 CN 115238307 A 2于所述第二相似度阈值， 则为该调优融合脸图像对应的所述待脱敏人脸图像重新确定相对 应的所述虚拟人脸图像， 并针对重新确定的所述待脱敏人脸图像和相对应的所述虚拟人脸 图像， 执行特征提取和特 征融合的处 理， 获得新的融合 脸图像。 7.根据权利要求1所述的方法， 其中， 所述从待处理图像中识别 至少一个待脱敏人脸图 像， 包括： 通过人脸识别算法检测所述待处理图像中的人脸， 将所述待处理图像中对应置信度 大 于预设置信度阈值的图像区域确定所述待脱敏人脸图像， 其中， 所述置信度用于指示所述 图像区域包括人脸图像的概 率。 8.根据权利要求1 ‑7中任一所述的方法， 其中， 在从待处理图像中识别至少一个待脱敏 人脸图像后， 通过并行进程确定各所述待脱敏人脸图像对应的所述虚拟人脸图像， 并通过 并行进程对相对应的所述待 脱敏人脸图像和所述虚拟人脸图像进行处 理。 9.一种智能驾驶和智能座 舱图像的人脸隐私保护装置， 包括： 获取模块， 用于从待处 理图像中识别至少一个待 脱敏人脸图像； 匹配模块， 用于从虚拟人脸图像集中获取每个所述待脱敏人脸图像对应的虚拟人脸图 像； 提取模块， 用于分别对每个所述待脱敏人脸图像和所述虚拟人脸图像进行特征提取， 获得图像特 征； 融合模块， 用于分别将每组相对应的所述待脱敏人脸图像和所述虚拟人脸图像的图像 特征进行特征融合， 获得融合 脸图像； 筛选模块， 用于根据 各所述融合脸图像确定至少一个目标融合脸图像， 其中， 所述目标 融合脸图像与相对应的所述虚拟人脸图像之间的第一相似度大于第一相似度阈值， 且所述 目标融合 脸图像与相对应的所述待 脱敏人脸图像的第二相似度小于第二相似度阈值； 处理模块， 用于分别通过每个所述目标融合脸图像替换所述待处理图像中相对应的所 述待脱敏人脸图像。 10.一种电子设备， 包括， 处理器、 存储器、 通信 接口和通信总线， 所述处理器、 所述存储 器和所述 通信接口通过 所述通信总线完成相互间的通信； 所述存储器用于存放至少一可执行指令， 所述可执行指令使所述处理器执行如权利要 求1‑8中任一项所述的方法对应的操作。 11.一种计算机存储介质， 其上存储有计算机程序， 该程序被处理器执行时实现如权利 要求1‑8中任一所述方法。 12.一种计算机程序产品， 所述计算机程序产品被有形地存储在计算机可读介质上并 且包括计算机可执行指 令， 所述计算机可执行指 令在被执行时使至少一个处理器执行根据 权利要求1 ‑8中任一项所述方法。权　利　要　求　书 2/2 页 3 CN 115238307 A 3