(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202211231204.7 (22)申请日 2022.10.10 (65)同一申请的已公布的文献号 申请公布号 CN 115314684 A (43)申请公布日 2022.11.08 (73)专利权人 中国科学院计算机网络信息中心 地址 100083 北京市海淀区东升南路2号院 专利权人 中铁上海工程局集团第七工程有 限公司　 中铁工程设计咨询集团有限公司 (72)发明人 赵青　张崇斌　单桂华　李晓兴　 崔文凯　雷磊　孙辉　易达　 (74)专利代理 机构 北京集智东方知识产权代理 有限公司 1 1578 专利代理师 陈亚斌　关兆辉(51)Int.Cl. H04N 7/18(2006.01) H04N 5/232(2006.01) G07C 1/20(2006.01) (56)对比文件 US 20193185 35 A1,2019.10.17 CN 113110733 A,2021.07.13 US 2019236373 A1,2019.08.01 US 2022317766 A1,202 2.10.06 CA 2209886 A1,19 98.01.15 US 20162 92884 A1,2016.10.0 6 CN 1071685 37 A,2017.09.15 CN 108879440 A,2018.1 1.23 审查员 龚锦玲 (54)发明名称 一种铁路桥梁的巡检方法、 系统、 设备及可 读存储介质 (57)摘要 本发明提供了一种铁 路桥梁的巡检方法、 系 统、 设备及可读存储介质， 涉及铁路桥梁智 能化 施工巡检领域， 所述方法包括获取第一信息和第 二信息， 第一信息包括本地端采集的实时音视频 数据， 第二信息包括远程端采集的实时音视频数 据； 将第一信息和第二信息发送至后台服务器进 行配对， 得到配对信息； 根据配对信息分别将配 对后的第一信息发送至对应的远程端生成第一 视角场景和配对后的第二信息发送至对应的本 地端生成第二视角场景； 根据第一视角场景和第 二视角场景对本地端进行巡检， 本发 明可以实现 远程端对现场工作人员的第二视角场景进行实 时的语音指导， 并结合眼动追踪技术， 进一步获 取现场作业人员的视角聚焦点， 提高专家对现场 的感知。 权利要求书2页 说明书8页 附图2页 CN 115314684 B 2022.12.27 CN 115314684 B 1.一种铁路桥梁的巡检方法， 其特 征在于， 包括： 获取第一信息和第二信息， 所述第一信息包括本地端采集的实时音视频数据， 所述第 二信息包括远程端采集的实时音视频 数据； 将所述第一信息和所述第二信息发送至后台服 务器进行配对， 得到配对信息； 根据所述配对信息分别将配对后的第一信息发送至对应的远程端生成第一视角场景 和配对后的第二信息发送至对应的本地端生成第二视角场景； 根据所述第一视角场景和所述第二视角场景对本地端 进行巡检； 其中， 根据所述第一视角场景和所述第二视角场景对本地端 进行巡检,包括： 获取现场信 息， 所述现场信 息为本地端工作人员在所述第 二视角场景中所观察到的铁 路桥梁的缺陷位置； 根据所述现场信 息在所述第 一视角场景中对应的位置进行标注， 得到标注后的第 一视 角场景； 根据所述标注后的第 一视角场景对所述第 二视角场景进行同步， 得到标注后的第 二视 角场景。 2.根据权利要求1所述的铁路桥梁的巡检方法， 其特 征在于， 所述获取现场信息， 包括： 建立本地端工作人员的眼球位置与所述第二视角场景之间的映射关系； 利用眼动追踪技 术捕捉本地端工作人员的眼球位置， 得到眼球的位置信息； 根据所述眼球的位置信息与眼球位置与所述第二视角场景之间的映射关系得到本地 端工作人员在所述第二视角场景中所观察到的铁路桥梁的缺陷位置 。 3.根据权利要求2所述的铁路桥梁的巡检方法， 其特征在于， 所述利用眼动追踪技术捕 捉本地端工作人员的眼球位置， 得到眼球的位置信息， 包括： 利用眼动追踪技术追踪所述工作人员的眼球位置并判断所述工作人员的眼球位置是 否移动， 其中， 若 所述工作人员的眼球位置停留时间超过预设的时间阈值， 则判断所述工作 人员在巡检时观察到铁路桥梁的缺陷； 若工作人员的眼球位置停留时间小于预设的时间阈 值， 则判断工作人员正在对铁路桥梁进行巡检。 4.一种铁路桥梁的巡检系统， 其特 征在于， 包括： 获取模块， 用于获取第一信息和第二信息， 所述第一信息包括本地端采集的实时音视 频数据， 所述第二信息包括远程端采集的实时音视频 数据； 配对模块， 用于将所述第一信息和所述第二信息发送至后台服务器进行配对， 得到配 对信息； 发送模块， 用于根据 所述配对信 息分别将配对后的第 一信息发送至对应的远程端生成 第一视角场景和配对后的第二信息发送至对应的本地端生成第二视角场景； 巡检模块， 用于根据所述第一视角场景和所述第二视角场景对本地端 进行巡检； 其中， 所述巡检模块包括： 第二获取单元， 用于获取现场信息， 所述现场信息为本地端工作人员在所述第二视角 场景中所观察到的铁路桥梁的缺陷位置； 标注单元， 用于根据所述现场信息在所述第一视角场景中对应的位置进行标注， 得到 标注后的第一视角场景； 同步单元， 用于根据所述标注后的第一视角场景对所述第二视角场景进行同步， 得到权　利　要　求　书 1/2 页 2 CN 115314684 B 2标注后的第二视角场景。 5.根据权利要求 4所述的铁路桥梁的巡检系统， 其特 征在于， 所述第二获取 单元， 包括： 第二建立单元， 用于建立本地端工作人员的眼球位置与 所述第二视角场景之间的映射 关系； 第五处理单元， 用于利用眼动追踪技术捕捉本地端工作人员的眼球位置， 得到 眼球的 位置信息； 第六处理单元， 用于根据所述眼球的位置信 息与眼球位置与 所述第二视角场景之间的 映射关系得到 本地端工作人员在所述第二视角场景中所观察到的铁路桥梁的缺陷位置 。 6.根据权利要求5所述的铁路桥梁的巡检系统， 其特 征在于， 所述第五处 理单元， 包括： 第二判断单元， 用于利用眼动追踪技术追踪所述工作 人员的眼球位置并判断所述工作 人员的眼球位置是否移动， 其中， 若所述工作人员的眼球位置停留时间超过预设的时间阈 值， 则判断所述工作人员 在巡检时观察到铁路桥梁的缺陷； 若工作人员的眼球位置停留时 间小于预设的时间阈值， 则判断工作人员正在对铁路桥梁进行巡检。 7.一种铁路桥梁的巡检设备， 其特 征在于， 包括： 存储器， 用于存储计算机程序； 处理器， 用于执行所述计算机程序时实现如权利要求1 至3任一项所述铁路桥梁的巡检方法的步骤。 8.一种可读存储介质， 其特征在于： 所述可读存储质上存储有计算机程序， 所述计算机 程序被处 理器执行时实现如权利要求1至 3任一项所述铁路桥梁的巡检方法的步骤。权　利　要　求　书 2/2 页 3 CN 115314684 B 3