(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202210183367.6 (22)申请日 2022.02.28 (65)同一申请的已公布的文献号 申请公布号 CN 114266794 A (43)申请公布日 2022.04.01 (73)专利权人 华南理工大 学 地址 510640 广东省广州市天河区五山路 381号 专利权人 桂林医学院 (72)发明人 唐杰　肖鸿昭　宋弘健　李清华　 胡俊承　王丽萍　 (74)专利代理 机构 广州市华学知识产权代理有 限公司 4 4245 专利代理师 郑秋松 (51)Int.Cl. G06T 7/11(2017.01)G06V 10/80(2022.01) G06K 9/62(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) G06T 7/00(2017.01) G06T 7/136(2017.01) G06V 10/82(2022.01) (56)对比文件 CN 112435246 A,2021.0 3.02 CN 112419286 A,2021.02.26 CN 110322435 A,2019.10.1 1 Saruar Alam1 et al. .Automatic Po lyp Segmentati on using U-Net-ResNet5 0. 《arXiv: 2012.15247 v1》 .2020, Xiang Li et al. .Selective K ernel Networks. 《arXiv:190 3.06586v2》 .2019, 审查员 曹春晓 (54)发明名称 基于全卷积神经网络的病理切片图像癌症 区域分割 系统 (57)摘要 本发明公开了一种基于全卷积神经网络的 病理切片图像癌症区域分割系统， 该系统的实现 包括： 提取病理切片图像中组织区域的掩码， 去 除空白背景； 将组织区域与病理切片图像中标注 的癌症区域结合， 对全视野的病理切片图像切割 获得训练样本数据； 对样本数据进行扩充； 构建 以Resnet 50为编码器的U net分割网络， 将第一级 编码器的卷积单元替换成组合卷积单元， 提取输 入图像中不同尺度的信息， 在解码器引入特征融 合模块， 充分利用每一级解码器输出的信息； 分 割网络在经过数据增强的数据集上训练并调优； 采用网格处理算法对整张病理切片图像进行预 测， 识别其中的癌症区域。 本发明在特征提取阶 段引入多尺度信息， 提高了对癌症区域的分割精 度。 权利要求书2页 说明书6页 附图4页 CN 114266794 B 2022.06.10 CN 114266794 B 1.一种基于全卷积神经网络的病理切片图像癌症区域分割系统， 其特征在于， 包括： 组 织区域提取模块、 样本数据构建模块、 样本数据扩充模块、 分割网络构建模块、 网络训练模 块、 癌症区域识别模块； 所述组织区域提取模块用于提取病理切片图像中的组织区域， 得到组织区域的掩码， 去除空白背景； 所述样本数据构建模块用于将提取的组织区域与病理切片图像中标注的癌症区域结 合， 对全视野的病理切片图像进行切割， 获得训练用的样本数据； 将所述组织区域的掩码与原始标注的癌症区域掩码按位相与， 得到整张病理切片图像 组织区域的最终标注掩码； 将原病理切片和最终标注掩码同时进行切割获得图像块及其标注； 所述样本数据扩充模块用于采用图像增强对样本数据进行扩充； 所述分割网络构建模块用于构建以Resnet50为编码器的Unet分割网络， 将编码器 Resnet50的第一级编码 器的卷积单元替换成组合卷积单元， 所述组合卷积单元设有多种不 同大小卷积核的卷积， 提取输入图像中不同尺度的信息， 并在解码器部分引入特征融合模 块， 充分利用每一级解码器输出的信息； 将每级解码器输出的特征图进行上采样操作后经过参数不同的卷积， 并在通道上拼接 得到整体特 征图T； 整体特征图 T分别经过一个最大池化层和一个平均池化层得到两个向量 V1和V2， 两个向 量V1和V2通过一个共享 参数的多层感知机后相加得到一个向量 C； 将Sigmoid函数应用于向量 C并和整体特征图 T相乘得到包含通道注意力信息的特征图 T’； 将整体特 征图T和特征图T’相加之后经 过输出卷积模块得到最终的分割结果； 所述网络训练模块用于将所述分割网络在经 过数据增强的数据集上训练并调优； 所述癌症区域识别模块用于采用训练好的模型并基于网格处理算法对整张病理切片 图像进行 预测， 识别其中的癌症区域。 2.根据权利要求1所述的基于全卷积神经网络的病理切片图像癌症区域分割系统， 其 特征在于， 所述组织区域 提取模块用于提取病理切片图像中的组织区域， 具体步骤 包括： 将原病理切片图像从RGB颜色空间转 化至HSV颜色空间； 采用大津算法得到转换后的HSV图像的S分量的分割阈值； 基于分割阈值对图像进行二 值化处理， 得到组织区域的掩码。 3.根据权利要求1所述的基于全卷积神经网络的病理切片图像癌症区域分割系统， 其 特征在于， 所述样本数据扩充模块用于采用图像增强对样本数据进行扩充， 具体步骤 包括： 将病理切片图像本身及其标注图像进行图像变换， 所述图像变换包括水平翻转、 随机 角度旋转、 颜色变化、 噪声干扰和模糊中的任意 一种或多种。 4.根据权利要求1所述的基于全卷积神经网络的病理切片图像癌症区域分割系统， 其 特征在于， 所述组合卷积单元采用4种不同大小的卷积， 包括3*3,5*5,7*7和1*1 的卷积核， 输入图像分别经过这4种卷积， 之后将4个卷积结果在通道上拼接， 作为最后整个组合卷积 的输出。 5.根据权利要求1所述的基于全卷积神经网络的病理切片图像癌症区域分割系统， 其权　利　要　求　书 1/2 页 2 CN 114266794 B 2特征在于， 所述输出 卷积模块包括 一个3*3的卷积和Sigmo id激活函数。 6.根据权利要求1所述的基于全卷积神经网络的病理切片图像癌症区域分割系统， 其 特征在于， 所述多层感知机包括一层1*1卷积层、 ReLu激活函数和另一层1*1卷积层， 用于压 缩信息， 生成通道上的注意力结果。 7.根据权利要求1所述的基于全卷积神经网络的病理切片图像癌症区域分割系统， 其 特征在于， 所述癌症区域识别模块用于采用训练好的模型并基于网格处理算法对整张病理 切片图像进行 预测， 识别其中的癌症区域， 具体步骤 包括： 采用网格算法将整张病理切片图像分块形成网格， 每 个网格作为 一个预测样本； 采用滑动窗口每次取网格中的图像块输入分割网络获得分割结果； 将每个滑动窗口 的分割结果进行拼接， 得到整张病理切片图像的分割结果。权　利　要　求　书 2/2 页 3 CN 114266794 B 3