内容提供者
数据抓取方法、装置、存储介质及电子设备.pdf
2023-07-24
10金币
583KB
15页
春景****23
实名认证
内容提供者
1/10
2/10
3/10
4/10
5/10
6/10
7/10
8/10
9/10
10/10
亲，该文档总共15页，到这已经超出免费预览范围，如果喜欢就直接下载吧～
相关资料
数据抓取方法、装置、存储介质及电子设备.pdf
本公开涉及一种数据抓取方法、装置、存储介质及电子设备，以使用户可以根据需求配置数据抓取任务，无需针对不同网站进行定制开发，就能够抓取所需的数据，耗时短、灵活性高。所述方法包括：获取用户配置的目标数据抓取任务，并从所述目标数据抓取任务中获取目标抓取地址以及所述目标抓取地址对应的目标解析模板；访问所述目标抓取地址对应的目标网页，并获取所述目标网页的页面信息；根据所述目标解析模板解析所述目标网页的页面信息，得到目标数据，并存储所述目标数据。
2023-07-24
10
583KB
物料抓取方法、装置、电子设备和存储介质.pdf
本发明提供一种物料抓取方法、装置、电子设备和存储介质，所述方法包括：确定目标工位的物料深度图，并基于物料深度图，确定各物料的区域图；基于各物料的边界尺寸信息，在预设模板库中进行模板匹配，确定各物料的匹配模板；基于各物料的高度信息，确定各物料的抓取顺序，以及基于各物料的匹配模板，确定各物料的抓取位姿；基于各物料的抓取顺序以及各物料的抓取位姿，对各物料进行抓取。本发明不仅能够自动且准确从预设模板库中获取匹配模板，进而能够准确确定物料的抓取位姿，抓取精度和效率较高。而且可以对多个物料进行抓取，相较于传统方法中仅
2023-07-25
10
580KB
物体抓取方法、装置、电子设备及可读存储介质.pdf
本申请涉及一种物体抓取方法、装置、电子设备及可读存储介质，所述方法包括步骤：获取目标物体的点云数据，并获取所述点云数据中的精特征点云数据，所述精特征点云数据为所述目标物体中最平整平面对应的点云数据；根据所述精特征点云数据得到所述目标物体的平整姿态；根据所述平整姿态执行抓取操作。通过获取目标物体的最平整平面对应的精特征点云数据，并基于精特征点云数据得到平整姿态，使得即便在目标物体无标准模型图纸的情况下，也能够基于平整姿态对目标物体进行抓取操作。
2023-07-21
10
400KB
新闻资讯抓取方法、装置、电子设备及存储介质.pdf
本发明涉及大数据技术领域，提供一种新闻资讯抓取方法、装置、电子设备及存储介质，所述方法包括：获取多个种子URL生成目标新闻资讯抓取树；启动主线程读取目标新闻资讯抓取树中每个抓取节点的目标种子URL及对应的抓取策略；在读取了预设数量的目标种子URL时，启动多个子线程，将预设数量的目标种子URL分给多个子线程；控制每个子线程使用Puppeteer打开每个目标种子URL进行抓取处理；通过主线程对多个子线程的抓取结果进行统计得到目标新闻资讯的目标抓取结果。本发明通过使用Puppeteer启动无头浏览器打开每个目标
2024-01-06
10
902KB
数据存储方法、装置、电子设备及存储介质.pdf
本发明实施例公开了一种数据存储方法、装置、电子设备及存储介质，其中，该方法包括：从目标数据库中获取与目标事件对应的主数据表以及与所述主数据表关联的至少一个数据维度的副数据表；将所述主数据表以及各个数据维度的副数据表中的数据进行数据聚合，得到与所述目标事件对应的目标数据表；将所述目标数据表写入目标搜索引擎中，并基于所述目标数据表生成所述目标搜索引擎的索引信息。本实施例的技术方案，解决了无法对多个数据表进行多维度快速高效检索的技术问题，达到了对多个数据表进行关联融合进而完成多维度快速高效检索的技术效果。
2023-07-24
10
629KB