内容提供者
数据采集方法、装置、电子设备及存储介质.pdf
2023-07-24
10金币
760KB
15页
书生****12
实名认证
内容提供者
1/10
2/10
3/10
4/10
5/10
6/10
7/10
8/10
9/10
10/10
亲，该文档总共15页，到这已经超出免费预览范围，如果喜欢就直接下载吧～
相关资料
数据采集方法、装置、电子设备及存储介质.pdf
本发明实施例公开了一种数据采集方法、装置、电子设备及存储介质，该方法包括：在接收到关联数据采集请求时，确定与所述关联数据采集请求对应的关联数据采集指令；根据所述关联数据采集指令确定至少两个数据查询语句，并将各数据查询语句定位至相应的待采集数据库，其中，各待采集数据库包括至少两种类型的数据库；获取与各待采集数据库查询结果对应的待处理数据，并将各待处理数据整合后存储至目标数据库中。本发明实施例的技术方案，在单次采集任务中实现了对多类型数据库关联数据的采集，降低了数据采集成本，提高了采集作业的效率。
2023-07-24
10
760KB
数据采集方法、装置、存储介质及电子设备.pdf
本申请公开了一种数据采集方法、装置、存储介质及电子设备，涉及互联网技术领域，该方法包括：当接收到数据采集指令，向云端发送代码获取请求，以触发所述云端确定所述目标应用匹配的爬虫代码；接收所述云端返回的字符串形式的所述爬虫代码；将所述爬虫代码转换为匹配目标网页的脚本代码块；将所述脚本代码块注入所述目标网页中进行数据采集。本申请有效避免网页规则变动时导致的数据采集失效问题，提升数据采集可靠性。
2023-07-24
10
436KB
数据采集方法、装置、存储介质及电子设备.pdf
本公开涉及一种数据采集方法、装置、存储介质及电子设备，以在不安装管汇传感器的前提下，实现工业管汇数据的采集。该方法包括：接收管汇场景下目标设备发送的工业数据，所述工业数据包括所述目标设备通过传感器采集的数据；获取所述管汇场景对应的管汇拓扑结构，所述管汇拓扑结构是通过扫描所述管汇场景中的实际管汇得到的；基于所述工业数据和所述管汇拓扑结构，确定所述管汇场景下管汇节点和除所述目标设备外的设备节点的工业数据；将所述管汇节点和所述设备节点的工业数据转发至云平台。
2023-07-24
10
632KB
数据采集优化方法、装置、存储介质及电子设备.pdf
本公开提供了一种数据采集优化方法、装置、存储介质及电子设备，涉及网络通信技术领域。该方法应用于网络数据分析功能NWDAF，包括：将从数据源采集的数据根据数据信息保留百分比进行预处理，生成预处理数据；将预处理数据使用降维方法进行相关性分析，计算数据维度参数；发送数据维度参数及降维方法给数据收集协调功能DCCF，以便DCCF将从数据源采集的数据根据数据维度参数及降维方法进行降维后发送至NWDAF。本公开实施例能够对数据进行降维有效地减少冗余信息所造成的误差，降低计算维度及计算资源成本。
2023-11-06
10
648KB
数据采集方法、装置、电子设备和存储介质.pdf
本发明实施例公开了一种数据采集方法、装置、电子设备和存储介质，该数据采集方法包括：根据目标仓库的物品的历史需求量特征数据构建样本，得到原始样本集；根据原始样本集中的每个样本对应的数据产生时间将原始样本集中的样本分类；获取为分类得到的每类样本集设置的样本采集策略；按照样本采集策略从对应类别的样本集中采集样本，得到目标样本集。目标样本集用于模型训练，可以提高模型训练效率、提高训练出的模型的预测准确度。
2023-07-24
10
626KB