基于复杂产品投产规划的快速分析系统.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN105608539A(43)申请公布日2016.05.25(21)申请号201511027641.7(22)申请日2015.12.30(71)申请人芜湖乐锐思信息咨询有限公司地址241000安徽省芜湖市镜湖区莲塘新村瑞丰园B幢07号(72)发明人高辉尚成辉(74)专利代理机构北京轻创知识产权代理有限公司11212代理人谈杰(51)Int.Cl.G06Q10/06(2012.01)权利要求书1页说明书2页附图1页(54)发明名称基于复杂产品投产规划的快速分析系统(57)摘要本发明涉及产品网络化运营技术领域，具体地说是一种基于复杂产品投产规划的快速分析系统，其特征在于设有信息处理中心服务器，所述信息处理中心服务器上设有数据获取单元、数据预处理单元、数据挖掘单元以及处理结果输出单元；所述数据获取单元中设有结构化数据获取单元和非结构化数据获取单元；所述数据预处理模块包括属性增/删模块、属性位置交换模块、添加ID属性模块、多表合并模块、属性规约模块、数据冗余处理模块、数据抽样模块、数据噪声处理模块；所述数据挖掘模块包括聚类模块、分类模块、关联规则模块、社会关系网分析模块；有效提高了系统分析准确性和可靠性，具有工作效率高、输出结果准确等显著的优点。CN105608539ACN105608539A权利要求书1/1页1.一种基于复杂产品投产规划的快速分析系统，其特征在于设有信息处理中心服务器，所述信息处理中心服务器上设有数据获取单元、数据预处理单元、数据挖掘单元以及处理结果输出单元；所述数据获取单元中设有结构化数据获取单元和非结构化数据获取单元；所述数据预处理模块包括属性增/删模块、属性位置交换模块、添加ID属性模块、多表合并模块、属性规约模块、数据冗余处理模块、数据抽样模块、数据噪声处理模块；所述数据挖掘模块包括聚类模块、分类模块、关联规则模块、社会关系网分析模块；所述聚类模块中设有K‐means算法模型。2.根据权利要求1所述的一种基于复杂产品投产规划的快速分析系统，其特征在于所述数据预处理模块采用并行数据预处理模块，设有Map/Reduce处理模型，通过调用Map函数，将每个处理任务由多个Map任务并行处理，这些Map任务被分配到所属处理任务分配的执行节点上执行，再通过调用Reduce函数，分别对每个处理任务的各Map任务的处理结果进行合并操作，完成数据预处理。3.根据权利要求1所述的一种基于复杂产品投产规划的快速分析系统，其特征在于数据挖掘模块为采用Map/Reduce机制的并行数据挖掘模块，设有Map/Reduce处理模型，通过调用Map函数，将每个处理任务由多个Map任务并行处理，这些Map任务被分配到所属处理任务分配的执行节点上执行，再通过调用Reduce函数，分别对每个处理任务的各Map任务的处理结果进行合并操作，完成并行数据挖掘。2CN105608539A说明书1/2页基于复杂产品投产规划的快速分析系统技术领域：[0001]本发明涉及产品网络化运营技术领域，具体地说是一种基于复杂产品投产规划的快速分析系统。背景技术：[0002]随着网络的高速发展，网络作为最大的信息载体和交流平台，已成为当前进行信息宣传的重要途径。常规的信息(如新闻、广告、商品等)是制定媒介策略，透过媒体定位覆盖目标受众，为实现精准，也不过在投放后再以数据去验证、调整，很难实现考虑受众是否感兴趣和接收。而对于互联网实时信息推送(如个性新闻发布，实时广告竞价，个性商品展示等)，在投放前就已寻找到合适的受众，真正实现互联网化广告的精准投放、个性营销。[0003]目前，对企业中如何把业务数据迅速转化成为对市场、对运营状况的认知，从而辅助企业决策，不断优化决策管理流程，提升对市场变化的响应能力，已经成为销售部门迫切需要解决的问题。[0004]现有的大数据系统处理数据时仍采用单机节点上的串行方式实现，其数据处理量以及算法的负载度依赖于单个执行节点的性能，而由于大数据处理系统往往要对海量数据进行处理，现有的单机节点串行机制显然存在效率低、运算量低的问题。发明内容：[0005]本发明针对现有技术中存在的缺点和不足，提出了一种效率高、准确率高的基于复杂产品投产规划的快速分析系统。[0006]本发明可以通过一下措施达到：[0007]一种基于复杂产品投产规划的快速分析系统，其特征在于设有信息处理中心服务器，所述信息处理中心服务器上设有数据获取单元、数据预处理单元、数据挖掘单元以及处理结果输出单元；所述数据获取单元中设有结构化数据获取单元和非结构化数据获取单元；所述数据预处理模块包括属性增/删模块、属性位置交换模块、添加ID属性模块、多表合并模块、属性规约模块、数据冗余处理模块、数据抽样模块、数据噪声处