(19)国家知识产权局
(12)发明 专利申请
(10)申请公布号
(43)申请公布日
(21)申请 号 202210133933.2
(22)申请日 2022.02.14
(71)申请人 腾讯科技 (深圳) 有限公司
地址 518000 广东省深圳市南 山区高新区
科技中一路腾讯大厦3 5层
(72)发明人 洪志鹰 许奂杰 吴恒冠 李岳光
严计升 董浩 芦清林
(74)专利代理 机构 深圳市隆天联鼎知识产权代
理有限公司 4 4232
专利代理师 徐明霞
(51)Int.Cl.
G06T 7/11(2017.01)
G06T 7/187(2017.01)
G06V 10/764(2022.01)
G06V 10/80(2022.01)G06V 10/82(2022.01)
G06N 3/04(2006.01)
G06N 3/08(2006.01)
G06K 9/62(2022.01)
(54)发明名称
图像处理方法、 装置、 设备及存 储介质
(57)摘要
本申请的实施例提供了一种图像处理方法、
装置、 设备及存储介质, 方法包括: 获取待处理图
像, 待处理图像中包括填充实例和非填充实例;
提取待处理图像的像素特征图和连接特征图, 像
素特征图用于表征填充图像中的目标像素是否
属于填充实例, 连接特征图用于表征目标像素与
目标像素的邻居像素是否属于同一实例; 根据像
素特征图和连接特征图构建连通域, 得到非填充
实例对应的目标检测框; 根据目标检测框截取待
处理图像, 得到待处理图像对应的去填充图像。
本申请实施例基于像素的特性确定待处理图像
中非填充实例对应的目标检测框, 可以提高填充
实例识别的精度, 进而可以保证截 取得到准确的
非填充实例, 有利于提升去除填充区域后的图像
效果。
权利要求书2页 说明书12页 附图7页
CN 114494302 A
2022.05.13
CN 114494302 A
1.一种图像处 理方法, 其特 征在于, 所述方法包括:
获取待处理图像, 所述待处理图像中包括填充实例和非填充实例, 所述填充实例表示
所述待处理图像中填充区域的图像, 所述非填充实例表示所述待处理图像中非填充区域的
图像; 提取所述待处理图像的像素特征图和连接特征图, 所述像素特征图用于表征所述填
充图像中的目标像素是否属于所述填充实例, 所述连接特征图用于表征所述目标像素与所
述目标像素的邻居像素 是否属于同一实例;
根据所述像素特征图和所述连接特征图构建连通域, 得到所述非填充实例对应的目标
检测框;
根据所述目标检测框截取 所述待处 理图像, 得到所述待处 理图像对应的去填充图像。
2.根据权利要求1所述的图像处理方法, 其特征在于, 所述提取所述待处理图像的像素
特征图和连接特 征图, 包括:
对所述待处 理图像进行多层级卷积编码, 得到多层级的特 征图;
将预设的多个层级的特征图分别与第 一预设通道的卷积核进行第 一卷积操作, 并将第
一卷积操作后的特 征图进行 特征融合, 得到所述像素 特征图;
将所述预设的多个层级的特征图分别与第 二预设通道的卷积核进行第 二卷积操作, 并
将第二卷积 操作后的特 征图进行 特征融合, 得到所述连接特 征图。
3.根据权利要求2所述的图像处理方法, 其特征在于, 所述预设的多个层级的特征图包
括所述多层级的特征图中最后层级的特征图, 所述方法还包括在进行第一卷积操作和 第二
卷积操作之前:
对所述最后层级的特征图以第 一预设数量的空洞卷积进行并行采样, 得到第 一预设数
量的采样后特 征图;
级联所述第一预设数量的采样后特 征图, 得到更新后的最后层级的特 征图。
4.根据权利要求1所述的图像处 理方法, 其特 征在于, 所述方法还 包括:
抽取待处 理视频中的多帧待处 理图像;
对所述多帧待处 理图像进行处 理, 分别得到所述多帧待处 理图像的目标检测框;
根据所述多帧待处理图像的目标检测框, 确定所述待处理视频中各帧图像的目标检测
框;
根据所述待处理视频中各帧图像的目标检测框对应截取所述待处理视频中各帧图像,
得到所述待处 理视频对应的去填充视频。
5.根据权利要求4所述的图像处理方法, 其特征在于, 所述抽取待处理视频中的多帧待
处理图像, 包括:
若所述待处理视频的时长大于第 一预设时长, 则截取所述待处理视频中第 二预设时长
的视频, 得到截取后视频;
从所述截取后视频中等间隔抽取多帧图像, 得到所述多帧待处 理图像。
6.根据权利要求4所述的图像处理方法, 其特征在于, 所述根据 所述多帧待处理图像的
目标检测框, 确定所述待处 理视频中各帧图像的目标检测框, 包括:
若所述多帧待处理图像中至少两帧待处理图像的目标检测框的位置坐标相同, 则将所
述至少两帧待处 理图像的目标检测框确定为置信目标检测框;
根据所述置信目标检测框的数量, 确定所述视频中各帧图像的目标检测框 。权 利 要 求 书 1/2 页
2
CN 114494302 A
27.根据权利要求6所述的图像处理方法, 其特征在于, 所述根据 所述置信目标检测框的
数量, 确定所述视频中各帧图像的目标检测框包括:
若所述多帧待处理图像中仅包括一个所述置信目标检测框, 则将所述置信目标检测框
确定为所述视频中各帧图像的目标检测框;
若所述多帧待处理图像中包括至少两个所述置信目标检测框, 则分别截取所述待处理
视频所包含的各个镜 头的视频,得到各个镜 头对应的截取后视频;
从所述各个镜头对应的截取后视频中分别抽取多帧待处理图像, 得到各个镜头对应的
待处理图像;
对所述各个镜头对应的待处理图像进行处理, 确定所述各个镜头对应的待处理图像的
目标检测框;
根据所述各个镜头对应的待处理图像的目标检测框, 确定所述各个镜头的视频中各帧
图像的目标检测框 。
8.一种图像处 理装置, 其特 征在于, 所述装置包括:
图像获取单元, 用于获取待处理图像, 所述待处理图像 中包括填充实例和非填充实例,
所述填充实例表示所述待处理图像中填充区域的图像, 所述 非填充实例表示所述待处理图
像中非填充区域的图像;
特征提取单元, 用于提取所述待处理图像的像素特征图和连接特征图, 所述像素特征
图用于表征所述填充图像中的目标像素是否属于所述填充实例, 所述连接特征图用于表征
所述目标像素与所述目标像素的邻居像素 是否属于同一实例;
目标检测框获取单元, 用于根据所述像素特征图和所述连接特征图构建连通域, 得到
所述非填充实例对应的目标检测框;
图像截取单元, 用于根据所述目标检测框截取所述待处理图像, 得到所述待处理图像
对应的去填充图像。
9.一种电子设备, 包括: 一个或多个处理器; 存储装置, 用于存储一个或多个程序, 使得
所述一个或多个程序被所述电子设备 执行时实现如上述权利要求1 ‑7任一项所述的方法。
10.一种计算机可读介质, 其特征在于, 其上存储有计算机程序, 所述计算机程序被执
行时实现如上述权利要求1 ‑7任一项所述的方法。权 利 要 求 书 2/2 页
3
CN 114494302 A
3
专利 图像处理方法、装置、设备及存储介质
文档预览
中文文档
22 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
温馨提示:本文档共22页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
本文档由 人生无常 于 2024-03-18 01:20:25上传分享