(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210427418.5 (22)申请日 2022.04.21 (71)申请人 中企链信 （北京） 科技有限公司 地址 100088 北京市西城区新 街口外大街 28号C座5层510号 (72)发明人 王玉娟　 (74)专利代理 机构 北京国谦专利代理事务所 (普通合伙) 11752 专利代理师 肖应国 (51)Int.Cl. G06F 11/36(2006.01) G06V 30/14(2022.01) G06V 30/19(2022.01) G06F 9/451(2018.01) (54)发明名称 ukey自动化识别并操作方法、 系统和存储介 质 (57)摘要 本申请涉及一种ukey自动化识别并操作方 法、 系统、 计算机设备和存储介质， 方法包括： 对 识别到的u key选择弹框进行截图， 得到桌面弹窗 截图， 对桌面弹窗截图中包含序列号的区域进行 区域截图， 得到若干序列号截图， 对若干序列号 截图进行识别， 得到若干字符串， 将预设的序列 号与若干字符串进行匹配， 确定与预设的序列号 匹配的目标字符串， 对包含目标字符串对应的桌 面区域进行点击操作， 实现了对windows操作系 统弹窗中的目标ukey进行准确的选择和点击操 作， 解决了基于selenium实现的web自动化测试 项目中有关u key操作场景的自动化实现， 提升自 动化测试 范围， 降低了 手动回归测试的成本 。 权利要求书2页 说明书9页 附图4页 CN 114817026 A 2022.07.29 CN 114817026 A 1.一种ukey自动化识别并操作方法， 其特征在于， 所述ukey自动化识别并操作方法包 括： 对识别到的ukey选择弹框进行截图， 得到桌 面弹窗截图； 对所述桌面弹窗截图中包 含序列号的区域进行区域截图， 得到若干序列号截图； 对所述若干序列号截图进行识别， 得到若干 字符串； 将预设的序列号与 所述若干字符串进行匹配， 确定与 所述预设的序列号匹配的目标字 符串； 对包含所述目标字符串对应的桌 面区域进行点击操作。 2.根据权利要求1所述的ukey自动化识别并操作方法， 其特征在于， 所述对识别到的 ukey选择弹框进行截图， 得到桌 面弹窗截图， 之前还 包括： 通过预设弹窗标题捕获所述ukey选择弹框 。 3.根据权利要求1所述的ukey自动化识别并操作方法， 其特征在于， 所述对识别到的 ukey选择弹框进行截图， 得到桌 面弹窗截图， 包括： 对所述ukey选择弹框， 先进行解析， 得到坐标信息； 将所述坐标信息存 储到配置文件中； 从所述配置文件中读取所述坐标信息， 根据所述坐标信息对所述ukey选择弹框进行截 图， 得到所述 桌面弹窗截图。 4.根据权利要求1所述的ukey自动化识别并操作方法， 其特征在于， 所述将预设的序列 号与所述若干 字符串进行匹配， 确定与所述预设的序列号匹配的目标字符串， 包括： 将预设的序列号与所述若干 字符串进行匹配； 若存在与所述预设的序列号相匹配的字符串， 则将相匹配的字符串确定为所述目标字 符串； 若不存在于所述预设的序列号相匹配的字符串， 则更新所述ukey选择弹框 中包含的序 列号； 返回执行所述对识别到的ukey选择弹框进行截图， 得到桌面弹窗截图的步骤， 直到匹 配出所述目标字符串。 5.根据权利要求3所述的ukey自动化识别并操作方法， 其特征在于， 所述对包含所述目 标字符串对应的桌 面区域进行点击操作， 包括： 根据所述 坐标信息， 获取 所述目标字符串所在的桌 面区域； 对包含所述目标字符串对应的桌 面区域进行点击操作。 6.根据权利要求5所述的ukey自动化识别并操作方法， 其特征在于， 所述目标字符串所 在的桌面区域的截图为包 含所述目标字符串的序列号截图。 7.根据权利要求2所述的ukey自动化识别并操作方法， 其特 征在于， 所述方法还 包括： 当自动化测试项目脚本执行到ukey确认场景， 系统弹出ukey选择弹框时， 响应于输入 操作， 获取输入的所述预设的序列号。 8.一种ukey自动化识别并操作系 统， 其特征在于， 所述ukey自动化识别并操作系 统包 括： 弹框截图模块， 用于对识别到的ukey选择弹框进行截图， 得到桌 面弹窗截图； 序列号截图模块， 用于对所述桌面弹窗截图中包含序列号的区域进行区域截图， 得到权　利　要　求　书 1/2 页 2 CN 114817026 A 2若干序列号截图； 识别模块， 用于对所述若干序列号截图进行识别， 得到若干 字符串； 匹配模块， 用于将预设的序列号与所述若干字符串进行匹配， 确定与所述预设的序列 号匹配的目标字符串； 点击模块， 用于对 包含所述目标字符串对应的桌 面区域进行点击操作。 9.一种计算机设备， 包括存储器、 处理器及存储在存储器上并可在处理器上运行的计 算机程序， 其特征在于， 所述处理器执行所述计算机程序时实现权利要求1至7中任一项所 述方法的步骤。 10.一种计算机可读存储介质， 其上存储有计算机程序， 其特征在于， 所述计算机程序 被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。权　利　要　求　书 2/2 页 3 CN 114817026 A 3