迪比特数据仓库方案书.docx

第一章系统规划1.1系统目标系统的目标是建立面向业务（宏观）战略的商务智能平台，整合迪比特集团各业务系统。整个系统分为四个阶段来完成：第一阶段：灵活报表系统第二阶段：大MIS系统：流程再造第三阶段：统一数据平台：决策支持第四阶段：优化第四阶段：优化1.2灵活报表系统1.2.1系统目标迪比特在长期的生产经营中，已经积累了大量的历史数据；由于这些数据分布在不同的系统中，以及缺乏良好的工具手段，导致公司在日常的生产管理中，却常常感到信息不够，或数据提出非常困难。如何将这些历史数据变成有价值的信息，如何提高信息的快速反馈能力，使企业有足够的、及时的信息，来面对迅速变化的市场，以成为迪比特信息应用的一个课题。通过灵活的报表与数据查询功能，运用先进的绩效和企业管理手段，力求搭建完整、稳健、高效的自动化综合统计信息展现平台。灵活报表系统的具体设计目标主要有：1、最大限度地科学管理信息资源，以先进的数据库管理系统为基础，完成数据采集、整理、存储、利用，提高信息资源的管理水平；2、充分挖掘信息的价值，借助计算机及网络通信技术，通过系统自动生成各类管理报表和经营管理统计分析指标，并提供强大的查询系统，辅助管理人员动态监控的业务状况、财务状况；3、提高工作效率，帮助公司各层级管理人员摆脱烦琐的数据整理工作，实现管理水平和管理质量的飞跃；4、减少工作误差，提供更加完善的指标校验功能，自动验证用户数据输入是否正确，保证输入数据的正确性、完整性。1.2.2系统特点1数据抽取ETL分别是三个单词的首字母缩写（ExtractTransformLoad）也就是抽取、转换、装载，但我们日常往往简称其为数据抽取。ETL包含了三方面，首先是‘抽取’：将数据从各种原始的业务系统中读取出来，这是所有工作的前提。其次‘转换’：按照预先设计好的规则将抽取得数据进行转换，使本来异构的数据格式能统一起来。最后的‘装载’：将转换完的数据按计划增量或全部的导入到数据仓库中。ETL完成的工作主要包括三方面，其在数据仓库和业务系统之间搭建了一座桥梁，确保新的业务数据能源源不断进入数据仓库，同时用户的分析和应用也能反应出最新的业务动态。如果从整体角度来看，ETL主要作用在于其屏蔽了复杂的业务逻辑从而为各种基于数据仓库的分析和应用提供了统一的数据接口，这也可以说是构建数据仓库最重要的意义所在。2数据存储系统数据存储采用关系型数据库技术和ROLAP技术。存储分为ODS层（操作型细节数据层）和数据集市层。具有以下特点：关系数据存储模型直接ETL装载保留数据细节同时建立必要的数据预聚合不丢弃业务信息3业务特性：作为世界一流的商务智能平台产品，MicroStrategy具有以下一些特点：1)完美的客户化展现:查询、报表和图表MicroStrategy产品具有非常强大的报表定制功能。通过GUI方式，只需简单鼠标拖拽方式就可以实现复杂报表的定制，并且报表的定义逻辑可以保存，以便于以后在此基础上再次编辑加工。如下图所示报表：MicroStrategyReportService支持中国式报表格式2)可实现OLAP分析提供多维视图的数据组织、管理与多维分析。提供增量汇总技术。提供分析作业调度管理。提供最优/最差分析、例外分析、排名分析、比较分析等分析功能。具有丰富的图形展现功能。能够灵活地建立、定制不同的分析指标和各种指标计算公式，实现OLAP分析的动态化处理。并具有切片、切块、旋转、钻取和钻透等多维分析操作。能直接钻取到详细数据，也能进行多维数据和详细数据的混合分析。提供丰富的函数，可自由扩展，便于二次开发。OLAP分析结果可输出为Excel、HTML、文本文件等多种类型的文件。对分析指标指定警告值的，在分析报表或图形中以突出方式进行显示。3)可实现即席查询通过定义业务逻辑到数据库结构映射层，使最终用户无需了解数据库和SQL的复杂性，只需按业务逻辑规则即可快速简洁地定义查询需求，系统自动完成连接操作、条件定义等复杂的SQL定义操作。提供各种向导式界面、图形查询生成器、提示窗口等，通过简单的鼠标拖拉操作即可实现即席查询、报告生成、图表生成、深入分析和发布等功能。具备多表之间的钻取访问、具备主表与子表之间的钻取访问功能。提供资源控制机制。它能够监控查询的运行进程，并停止长时间运行的查询，控制资源使用效率。而且还提供查询预测能力，使分析人员在运行查询之前，能够预测查询所需时间。能访问各种数据源的数据，访问结果也能输出到多种通用文件格式中。可以对用户设立不同的查询优先级，实现数据仓库资源的合理分配。信