数据获取方法、装置、终端设备及可读存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113609366A(43)申请公布日2021.11.05(21)申请号202110891566.8(22)申请日2021.08.04(71)申请人深圳市元征科技股份有限公司地址518000广东省深圳市龙岗区坂田街道五和大道北4012号元征工业园(72)发明人刘新秦文礼(74)专利代理机构深圳中一联合知识产权代理有限公司44414代理人甘莹(51)Int.Cl.G06F16/951(2019.01)G06F21/60(2013.01)权利要求书2页说明书9页附图4页(54)发明名称数据获取方法、装置、终端设备及可读存储介质(57)摘要本申请适用于计算机技术领域，提供了一种数据获取方法、装置、终端设备及可读存储介质，该方法包括：当接收到用户发送的数据获取请求时，生成接口集合对应的目标参数密文，接口集合包括至少两个数据接口，数据接口包括数据获取请求对应的第一目标接口；将目标参数密文发送至服务器进行校验；当目标参数密文校验通过时，接收服务器返回的目标数据。本申请可以一定程度上解决目前的反爬虫技术容易被破解的问题。CN113609366ACN113609366A权利要求书1/2页1.一种数据获取方法，其特征在于，应用于客户端，包括：当接收到用户发送的数据获取请求时，生成接口集合对应的目标参数密文，所述接口集合包括至少两个数据接口，所述数据接口包括所述数据获取请求对应的第一目标接口；将所述目标参数密文发送至服务器进行校验；当所述目标参数密文校验通过时，接收所述服务器返回的目标数据。2.如权利要求1所述的数据获取方法，其特征在于，所述生成接口集合对应的目标参数密文，包括：获取所述接口集合中的各个数据接口对应的初始参数密文；按照预设规则对所述初始参数密文进行排列，得到所述目标参数密文。3.如权利要求2所述的数据获取方法，其特征在于，在所述获取所述接口集合中的各个数据接口对应的初始参数密文之前，还包括：若所述接口集合中存在未设置初始参数密文的第二目标接口，则生成预设数量的随机字符，并将所述预设数量的随机字符作为所述第二目标接口的初始参数密文。4.如权利要求2所述的数据获取方法，其特征在于，在所述获取所述接口集合中的各个数据接口对应的初始参数密文，包括：获取所述接口集合中的各个数据接口对应的参数明文；采用各个所述数据接口对应的加密算法对所述数据接口的参数明文进行加密，得到初始参数密文，各个所述数据接口对应的加密算法不相同。5.如权利要求4所述的数据获取方法，其特征在于，还包括：周期性地改变各个所述数据接口对应的加密算法的密钥。6.如权利要求2‑5任一项所述的数据获取方法，其特征在于，所述按照预设规则对所述初始参数密文进行排列，得到所述目标参数密文，包括：按照预设规则对所述初始参数密文进行排列，得到随机密文；将校验字符添加至所述随机密文上，得到目标参数密文，所述校验字符用于校验所述目标参数密文的有效性。7.如权利要求6所述的数据获取方法，其特征在于，还包括：周期性地改变所述校验字符的内容和/或所述校验字符在所述随机密文上的位置。8.一种数据获取方法，其特征在于，应用于服务器，包括：当接收到接口集合对应的目标参数密文时，对所述目标参数密文进行校验，所述接口集合包括至少两个数据接口，所述数据接口包括数据获取请求对应的第一目标接口；若所述目标参数密文校验通过，则通过所述第一目标接口获取所述数据获取请求对应的目标数据，并将所述目标数据返回至客户端；若所述目标参数密文校验不通过，则不进行响应。9.一种数据获取装置，其特征在于，应用于客户端，包括：生成模块，用于当接收到用户发送的数据获取请求时，生成接口集合对应的目标参数密文，所述接口集合包括至少两个数据接口，所述数据接口包括所述数据获取请求对应的第一目标接口；发送模块，用于将所述目标参数密文发送至服务器进行校验；接收模块，用于当所述目标参数密文校验通过时，接收所述服务器返回的目标数据。2CN113609366A权利要求书2/2页10.一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1‑7任一项或权利要求8所述的方法。3CN113609366A说明书1/9页数据获取方法、装置、终端设备及可读存储介质技术领域[0001]本申请属于计算机技术领域，尤其涉及一种数据获取方法、装置、终端设备及可读存储介质。背景技术[0002]随着互联网的快速发展，网上存在海量的数据。为了抓取各个网站上有价值的数据，出现了爬虫技术。然而，同时，也衍生了各种各样的恶意爬虫技术。[0003]恶意爬虫技术不仅会占用大量的网站流量，影响真正有需求的用户的访问，并且会导致