应用程序界面测试方法、设备、存储介质及装置.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN116010235A(43)申请公布日2023.04.25(21)申请号202111237358.2(22)申请日2021.10.22(71)申请人北京奇虎科技有限公司地址100088北京市西城区新街口外大街28号D座112室（德胜园区）(72)发明人周航宇(74)专利代理机构深圳市世纪恒程知识产权代理事务所44287专利代理师高莎(51)Int.Cl.G06F11/36(2006.01)权利要求书2页说明书15页附图4页(54)发明名称应用程序界面测试方法、设备、存储介质及装置(57)摘要本发明涉及移动端测试技术领域，公开了一种应用程序界面测试方法、设备、存储介质及装置，该方法包括：接收移动终端在执行当前测试指令后反馈的当前屏幕截图和当前页面数据，从当前页面数据中提取树状结构数据，并根据树状结构数据确定页面动作事件，通过预设强化学习模型对当前屏幕截图进行热度分析，获得热图，热图用于表征当前屏幕截图中各位置被执行测试动作的概率，根据热图和页面动作事件选取目标动作事件，并根据目标动作事件对当前测试指令进行更新，将更新后的当前测试指令发送至移动终端，以使移动终端根据更新后的当前测试指令进行测试，从而能够提高界面测试效率和准确性。CN116010235ACN116010235A权利要求书1/2页1.一种应用程序界面测试方法，其特征在于，所述应用程序界面测试方法包括以下步骤：接收移动终端在执行当前测试指令后反馈的当前屏幕截图和当前页面数据；从所述当前页面数据中提取树状结构数据，并根据所述树状结构数据确定页面动作事件；通过预设强化学习模型对所述当前屏幕截图进行热度分析，获得热图，所述热图用于表征所述当前屏幕截图中各位置被执行测试动作的概率；根据所述热图和所述页面动作事件选取目标动作事件，并根据所述目标动作事件对所述当前测试指令进行更新；将更新后的当前测试指令发送至所述移动终端，以使所述移动终端根据更新后的当前测试指令进行测试。2.如权利要求1所述的应用程序界面测试方法，其特征在于，所述通过预设强化学习模型对所述当前屏幕截图进行热度分析，获得热图的步骤，包括：对所述当前屏幕截图进行预处理，获得初始输入图像；根据所述树状结构数据确定操作动作事件的位置，并根据所述位置生成掩码；根据所述掩码和所述初始输入图像生成目标输入图像；通过所述预设强化学习模型对所述目标输入图像进行热度分析，获得热图。3.如权利要求2所述的应用程序界面测试方法，其特征在于，所述对所述当前屏幕截图进行预处理，获得初始输入图像的步骤，包括：对所述当前屏幕截图进行缩放处理，获得待转化图像；对所述待转化图像进行灰度化处理，获得初始输入图像。4.如权利要求2所述的应用程序界面测试方法，其特征在于，所述根据所述树状结构数据确定操作动作事件的位置，并根据所述位置生成掩码的步骤，包括：根据所述树状结构数据确定操作动作事件的位置；将所述位置映射在预设矩阵上，获得掩码。5.如权利要求2所述的应用程序界面测试方法，其特征在于，所述根据所述掩码和所述初始输入图像生成目标输入图像的步骤，包括：将所述初始输入图像与所述掩码相乘，并进行归一化处理，获得目标输入图像。6.如权利要求1所述的应用程序界面测试方法，其特征在于，所述将更新后的当前测试指令发送至所述移动终端，以使所述移动终端根据更新后的当前测试指令进行测试的步骤之后，还包括：获取页面测试次数，并判断所述页面测试次数是否大于或等于预设阈值；若是，则生成结束测试指令，并将所述结束测试指令发送至所述移动终端。7.如权利要求1‑6中任一项所述的应用程序界面测试方法，其特征在于，所述根据所述热图和所述页面动作事件选取目标动作事件，并根据所述目标动作事件对所述当前测试指令进行更新的步骤，包括：获取所述页面动作事件的坐标信息，并根据所述坐标信息和所述热图确定所述页面动作事件的概率值；根据所述概率值选取目标动作事件，并根据所述目标动作事件对所述当前测试指令进2CN116010235A权利要求书2/2页行更新。8.一种应用程序界面测试设备，其特征在于，所述应用程序界面测试设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的应用程序界面测试程序，所述应用程序界面测试程序被所述处理器执行时实现如权利要求1至7中任一项所述的应用程序界面测试方法。9.一种存储介质，其特征在于，所述存储介质上存储有应用程序界面测试程序，所述应用程序界面测试程序被处理器执行时实现如权利要求1至7中任一项所述的应用程序界面测试方法。10.一种应用程序界面测试装置，其特征在于，所述应用程序界面测试装置包括：数据接收模块、动作确定模块、热度分析模块、动作选取模块以及指令发送模块；所述数据接收模块，用于接收移动终端在执