(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210239600.8 (22)申请日 2022.03.11 (71)申请人 北京达佳互联信息技 术有限公司 地址 100085 北京市海淀区上地西路6号1 幢1层101D1-7 (72)发明人 王伟农　戴宇荣　 (74)专利代理 机构 北京铭硕知识产权代理有限 公司 11286 专利代理师 王艳茹　苏银虹 (51)Int.Cl. G06V 10/26(2022.01) G06V 10/80(2022.01) G06V 10/74(2022.01) G06V 10/82(2022.01) G06K 9/62(2022.01)G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 图像分割方法及装置 (57)摘要 本公开关于一种图像 分割方法及装置， 所述 图像分割方法包括： 将待处理图像输入到第一图 像特征提取网络中， 得到第一图像特征； 基于所 述第一图像特征， 提取出第一图像语义特征和第 二图像语义特征； 将所述待处理图像和针对所述 待处理图像的图像分割信息输入到第二图像特 征提取网络中， 得到第二图像特征； 基于所述第 一图像语义特征、 所述第二图像语义特征和所述 第二图像特征， 得到针对待分割对象的目标掩 码； 基于所述目标掩码对所述待处理图像进行分 割处理， 得到针对待分割对象的图像分割结果。 根据本公开的图像分割方法及装置可以解决图 像分割导致的计算开销大和运行耗时的问题， 可 以在保证分割速度的同时基于得到的掩码获取 准确的分割结果。 权利要求书2页 说明书14页 附图8页 CN 114565768 A 2022.05.31 CN 114565768 A 1.一种图像分割方法， 其特 征在于， 所述图像分割方法包括： 将待处理图像输入到第一图像特 征提取网络中， 得到第一图像特 征； 基于所述第 一图像特征， 提取出第 一图像语义特征和第 二图像语义特征， 其中， 所述第 一图像语义特征和所述第二图像语义特征分别包含所述待处理图像中的待分割对 象的信 息且彼此不同； 将所述待处理图像和针对所述待处理图像的图像分割信息输入到第二图像特征提取 网络中， 得到第二图像特征， 其中， 所述第二图像特征提取网络从图像中提取的图像特征的 信息量小于所述第一图像特征提取网络从所述图像中提取的图像特征的信息量， 所述图像 分割信息用于指示所述待处 理图像中的所述待分割对象的位置信息； 基于所述第一图像语义特征、 所述第二图像语义特征和所述第二图像特征， 得到针对 所述待分割对象的目标掩码； 基于所述目标掩码对所述待处理图像进行分割处理， 得到针对所述待分割对象的图像 分割结果。 2.如权利要求1所述的图像分割方法， 其特征在于， 所述图像分割信 息通过以下方式获 取： 获取用户针对本次图像分割的指示所述待处理图像中所述待分割对象的交互信息以 及上一次图像分割得到的所述待分割对象的目标掩码； 将所述交互信息和上一次图像分割得到的所述待分割对象的目标掩码作为本次图像 分割的图像分割信息 。 3.如权利要求1或2所述的图像分割方法， 其特征在于， 基于所述第一图像语义特征、 所 述第二图像语义特征和所述第二图像特征， 得到针对所述待分割对象的目标掩码的步骤包 括： 基于所述第 一图像语义特征和所述第 二图像语义特征， 得到所述第 一图像语义特征和 所述第二图像 语义特征之间的相似性特 征； 将所述相似性特 征与所述第二图像特 征进行融合， 得到融合图像特 征； 基于所述融合图像特 征， 得到所述目标掩码。 4.如权利要求3所述的图像分割方法， 其特征在于， 将所述相似性特征与所述第 二图像 特征融合， 得到融合图像特 征的步骤 包括： 将所述相似性特 征与所述第二图像特 征融合， 得到初始融合图像特 征； 将所述初始融合图像特 征与所述第二图像特 征进行拼接， 得到拼接后的特 征； 将所述拼接后的特 征输入到残差网络中， 得到所述融合图像特 征。 5.如权利要求3所述的图像分割方法， 其特征在于， 基于所述第 一图像语义特征和所述 第二图像语义特征， 得到所述第一图像语义特征和所述第二图像语义特征之间的相似性特 征的步骤 包括： 根据针对所述待处理图像预设的包括所述待分割 对象的感兴趣区域， 分别对所述第 一 图像语义特征和所述第二图像 语义特征进行区域标记； 基于区域标记后的所述第 一图像语义特征和所述第 二图像语义特征的相似性， 得到所 述相似性特 征。 6.如权利要求3所述的图像分割方法， 其特征在于， 所述第 二图像特征提取网络基于所权　利　要　求　书 1/2 页 2 CN 114565768 A 2述待处理图像和所述图像分割信息提取 出多个第二图像特 征， 其中， 将所述相似性特征与所述第二图像特征进行融合， 得到融合图像特征的步骤包 括： 将所述相似性特征与 所述多个第 二图像特征中分辨率最小的第 二图像特征进行融合， 得到融合图像特 征， 其中， 基于所述融合图像特 征， 得到所述目标掩码的步骤 包括： 将所述融合图像特征和所述多个第二图像特征中的除了所述分辨率最小的第二图像 特征之外的第二图像特征输入到图像掩码提取网络中， 得到针对所述待分割对象的目标掩 码。 7.一种图像分割装置， 其特 征在于， 所述图像分割装置包括： 第一图像特征获取单元， 被配置为将待处理图像输入到第一图像特征提取网络中， 得 到第一图像特 征； 图像语义特征获取单元， 被配置为基于所述第一图像特征， 提取出第一图像语义特征 和第二图像语义特征， 其中， 所述第一图像语义特征和所述第二图像语义特征分别包含所 述待处理图像中的待分割对象的信息且彼此不同； 第二图像特征获取单元， 被配置为将所述待处理图像和针对所述待处理图像的图像分 割信息输入到第二图像特征提取网络中， 得到第二图像特征， 其中， 所述第二图像特征提取 网络从图像中提取的图像特征的信息量小于所述第一图像特征提取网络从所述图像中提 取的图像特征的信息量， 所述图像分割信息用于指示所述待处理图像中的所述待分割对象 的位置信息； 掩码获取单元， 被配置为基于所述第一图像语义特征、 所述第二图像语义特征和所述 第二图像特 征， 得到针对所述待分割对象的目标掩码； 分割单元， 被配置为基于所述目标掩码对所述待处理图像进行分割处理， 得到针对所 述待分割对象的图像分割结果。 8.一种电子设备， 其特 征在于， 包括: 处理器； 用于存储所述处 理器可执行指令的存 储器； 其中， 所述处理器被配置为执行所述指令， 以实现如权利要求1至6中任一项所述的图 像分割方法。 9.一种计算机可读存储介质， 其特征在于， 当所述计算机可读存储介质中的指令被至 少一个处理器运行时， 促使 所述至少一个处理器执行如权利要求 1至6中任一项 所述的图像 分割方法。 10.一种计算机程序产品， 包括计算机指令， 其特征在于， 所述计算机指令被处理器执 行时实现如权利要求1至 6中任一项所述的图像分割方法。权　利　要　求　书 2/2 页 3 CN 114565768 A 3