(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211377018.4 (22)申请日 2022.11.04 (71)申请人 浙江大华 技术股份有限公司 地址 310051 浙江省杭州市滨江区滨安路 1187号 (72)发明人 任宇鹏　金恒　周宏宾　李乾坤　 殷俊　 (74)专利代理 机构 深圳市威世博知识产权代理 事务所(普通 合伙) 44280 专利代理师 严翠霞 (51)Int.Cl. G06V 20/17(2022.01) G06V 20/10(2022.01) G06V 10/25(2022.01) G06V 10/26(2022.01)G06V 10/762(2022.01) G06V 10/82(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 违建检测方法、 违 建检测装置以及计算机存 储介质 (57)摘要 本申请公开了一种违 建检测方法、 违 建检测 装置以及计算机存储介质， 该违建检测方法包 括： 获取基于目标区域采集的无人机图像； 按照 无人机图像， 获取对应的正射地图切片； 获取正 射地图切片重投影到无人机图像的坐标系的重 投影图像； 基于重投影图像和无人机图像的图像 差异信息， 获取目标区域在第一时刻和第二时刻 的变化检测区域结果； 根据变化检测区域结果， 形成违建检测信息， 其中， 违建检测信息包括违 建行为位置， 违建行为时间和/或违建行为类型。 本申请的违建检测方法能够通过正射地图与无 人机影像的变化检测结果， 实现目标区域的违建 行为全流 程监管。 权利要求书2页 说明书11页 附图7页 CN 115424155 A 2022.12.02 CN 115424155 A 1.一种违建检测方法， 其特 征在于， 所述违建检测方法包括： 获取基于目标区域采集的无 人机图像； 按照所述无 人机图像， 获取对应的正 射地图切片； 获取所述正射地图切片重投影到所述无 人机图像的坐标系的重投影图像； 基于所述重投影图像和所述无人机图像的图像差异信 息， 获取所述目标区域的变化检 测区域结果； 根据所述变化检测区域结果， 形成违建检测信 息， 其中， 所述违建检测信息包括违建行 为位置， 违建行为时间和/或违建行为类型。 2.根据权利要求1所述的违建检测方法， 其特 征在于， 所述基于所述重投影图像和所述无人机图像的图像差异信 息， 获取所述目标区域的变 化检测区域结果， 包括： 将所述重投影图像作为孪生变化检测网络的第 一输入， 将所述无人机图像作为所述孪 生变化检测网络的第二输入； 获取所述孪生变化检测网络比对所述重投影图像的遥感图像特征和所述无人机图像 的遥感图像特 征， 根据比对结果输出的变化检测区域结果。 3.根据权利要求2所述的违建检测方法， 其特 征在于， 所述孪生变化检测网络包括结果输出模块， 特征比对网络， 以及共享权重的第一孪生 网络和第二孪生网络； 所述第一孪生网络用于提取所述重投影图像的遥感图像特征， 所述第 二孪生网络用于 提取所述无人机图像的遥感图像特征， 所述特征比对网络用于比对所述重投影图像的遥感 图像特征和所述无人机图像的遥感图像特征， 所述结果输出模块融合所述特征比对网络的 比对输出， 并形成变化检测区域结果。 4.根据权利要求3所述的违建检测方法， 其特 征在于， 所述结果输出模块包括多层感知器和上采样层， 所述多层感知器用于统一所述特征比 对网络的输出通道个数， 所述上采样层用于将所述特征比对网络的输出上采样到所述重投 影图像和/或所述无人机图像的预设尺寸， 将上采样结果输入 所述多层感知器， 所述多层感 知器还用于根据所述上采样结果输出分类置信度， 其中， 分类包括检测区域变化和检测区 域未变化。 5.根据权利要求1所述的违建检测方法， 其特 征在于， 所述变化检测区域结果包括预测变化检测框； 所述根据所述变化检测区域结果， 形成违建检测信息， 包括： 基于所述变化检测区域结果中的若干预测变化检测框； 对所述无人机图像的违建建筑进行实例分割， 获取所述无人机图像的若干违建检测 框； 计算若干所述预测变化检测框与若干所述违建检测框的重叠率， 去除重叠率大于预设 阈值的预测变化检测框或违建检测框， 由剩下的预测变化检测框与违建检测框形成违建检 测信息。 6.根据权利要求1所述的违建检测方法， 其特 征在于， 所述获取 所述正射地图切片重投影到所述无 人机图像的坐标系的重投影图像， 包括：权　利　要　求　书 1/2 页 2 CN 115424155 A 2获取所述正射地图切片的若干平面分块， 其中， 所述平面分块为所述正射地图切片中 处于同一高度平面的正 射地图切片区域； 获取每一平面分块与所述无 人机图像的单应矩阵； 按照每一平面分块的单应矩阵， 将所述正射地图切片的平面分块分别 重投影到所述无 人机图像的坐标系上， 形成所述重投影图像。 7.根据权利要求6所述的违建检测方法， 其特 征在于， 所述获取 所述正射地图切片的若干平面分块， 包括： 按照所述 正射地图切片获取对应的数字表面模型切片； 对所述数字表面模型切片中所有模型点按照高度信息进行聚类， 得到若干模型点分 组； 利用若干所述模型点分组形成若干掩膜， 并利用若干所述掩膜对所述正射地图切片进 行处理， 得到所述 正射地图切片的若干平面分块。 8.根据权利要求6所述的违建检测方法， 其特 征在于， 所述获取 所述正射地图切片的若干平面分块， 包括： 对所述正射地图切片进行实例分割， 获取所述正射地图切片中的屋顶实例区域和地面 实例区域； 按照所述屋顶实例区域和所述地面实例区域对所述正射地图切片进行划分， 得到所述 正射地图切片的若干平面分块。 9.根据权利要求1所述的违建检测方法， 其特 征在于， 所述按照所述无 人机图像， 获取对应的正 射地图切片， 包括： 读取所述无人机图像的定位信息； 按照所述定位信息从正 射地图中裁切出与所述无 人机图像范围相同的正 射地图切片。 10.根据权利要求9所述的违建检测方法， 其特 征在于， 所述按照所述定位信息从正射地图中裁切出与所述无人机图像范围相同的正射地图 切片， 包括： 获取所述无人机图像的第一图像尺寸； 按照所述定位信息确定所述 正射地图切片在所述 正射地图的定位范围； 按照所述第一图像尺寸确定所述正射地图切片的第二图像尺寸， 其中， 所述第二图像 尺寸大于所述第二图像尺寸； 按照所述第二图像尺寸以及所述定位范围从所述正射地图中裁剪出所述正射地图切 片。 11.一种违建检测装置， 其特征在于， 所述违建检测装置包括存储器以及与 所述存储器 耦接的处 理器； 其中， 所述存储器用于存储程序数据， 所述处理器用于执行所述程序数据以实现如权 利要求1至10任一项所述的违建检测方法。 12.一种计算机存储介质， 其特征在于， 所述计算机存储介质用于存储程序数据， 所述 程序数据在被 计算机执 行时， 用以实现如权利要求1至10任一项所述的违建检测方法。权　利　要　求　书 2/2 页 3 CN 115424155 A 3