基于浏览器进行数据存储与计算的系统及方法.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN116010379A(43)申请公布日2023.04.25(21)申请号202310050978.8(22)申请日2023.02.02(71)申请人上海蓝凡网络科技股份有限公司地址201799上海市青浦区徐泾镇青平路1919弄3号101室(72)发明人罗园园程玉坤倪传松龚凯凯(51)Int.Cl.G06F16/21(2019.01)G06F16/28(2019.01)权利要求书2页说明书5页附图4页(54)发明名称基于浏览器进行数据存储与计算的系统及方法(57)摘要本发明涉及基于浏览器进行数据存储与计算的系统及方法，此系统包括数据扩展单元、关系数据扩展类型切分单元以及数据存储管理访问单元；数据扩展单元利用数据特征类型对数据特征进行拓展描述，并结合数据抽象计算方法对结构化数据进行扩展和转化，以便进行信息存储和压缩；关系数据扩展类型切分单元在完成数据扩展分类的基础上，根据数据特征进一步进行数据类型切分，当数据扩展范围超过限定阀值时，扩展出来的虚拟类数据信息被视为普通子类信息进行存储处理；数据存储管理访问单元利用非关系型数据特点为缓存数据进行特征分类，来实现数据的扩展和转换，以便优化客户端的数据通信模式。此系统及方法有效提高了对海量数据进行查询的工作效率。CN116010379ACN116010379A权利要求书1/2页1.基于浏览器进行数据存储与计算的系统，其特征在于：包括数据扩展单元、关系数据扩展类型切分单元以及数据存储管理访问单元；所述数据扩展单元利用数据特征类型对数据特征进行拓展描述，并结合数据抽象计算方法对结构化数据进行扩展和转化，以便进行信息存储和压缩；所述关系数据扩展类型切分单元在完成数据扩展分类的基础上，根据数据特征进一步进行数据类型切分，当数据扩展范围超过限定阀值时，扩展出来的虚拟类数据信息被视为普通子类信息进行存储处理；所述数据存储管理访问单元利用非关系型数据特点为缓存数据进行特征分类，来实现数据的扩展和转换，以便优化客户端的数据通信模式。2.根据权利要求1所述的基于浏览器进行数据存储与计算的系统及方法，其特征在于，所述数据扩展单元包括数据抽象计算模块以及分别与所述数据抽象计算模块连接的数据解压模块及数据转化模块；所述数据解压模块与所述数据转化模块均连接有数据筛选模块、数据存储模块、数据查询模块、数据采集模块、数据更新模块以及数据调度模块，用户数据信息传输至数据抽象计算模块中进行处理分析，分析完成后再将数据计算结果归并至用户数据信息中。3.根据权利要求2所述的基于浏览器进行数据存储与计算的系统及方法，其特征在于，所述关系数据扩展类型切分单元包括数据切分子系统、数据解析模块以及数据分发模块，所述数据切分子系统分别与所述数据查询模块以及所述数据解析模块连接，所述数据分发模块与所述数据解析模块连接。4.根据权利要求3所述的基于浏览器进行数据存储与计算的系统及方法，其特征在于，所述数据切分子系统包括依次连接的数据类型映射模块、数据类型扩展模块、数据关系计算模块、数据信息判断模块以及数据特征切分模块。5.根据权利要求1所述的基于浏览器进行数据存储与计算的系统及方法，其特征在于，所述数据存储管理访问单元包括数据管理入口、大数据访问统一接口、数据关系映射层以及数据库，所述大数据访问统一接口连接有数据计算处理平台，所述数据计算处理平台内设置有用户输入模块、结果展示模块以及数据预处理模块。6.根据权利要求1所述的基于浏览器进行数据存储与计算的系统及方法，其特征在于，还包括数据并行处理系统，所述数据并行处理系统用于对任务进行并行处理，并通过监控系统和数据监听模块对并行任务处理情况进行监督和管理，最后对数据的存储结果进行有效的分析和检测。7.根据权利要求6所述的基于浏览器进行数据存储与计算的系统及方法，其特征在于，所述数据并行处理系统分别连接有信息采集任务更新模块与系统管理模块，所述信息采集任务更新模块连接有信息计算资源调度模块，所述信息计算资源调度模块连接有信息采集任务处理模块，所述信息采集任务处理模块与所述系统管理模块共同连接有任务采集获取模块，所述任务采集获取模块连接有采集任务划分模块；所述采集任务划分模块分别连接有参数采集获取模块与资源参数计算模块，所述参数采集获取模块连接有采集子任务参数获取模块，所述资源参数计算模块连接有可并行子任务获取模块，所述采集子任务参数获取模块与所述可并行子任务获取模块共同连接有数据检测告警模块，所述数据检测告警模块连接有子任务采集映射模块。2CN116010379A权利要求书2/2页8.基于浏览器进行数据存储与计算的方法，其特征在于，包括以下步骤：初始化后，向服务器发送处理请求，再获取客户端数据处理器请求，通过系统对数据进行计算处理；