大数据概念技术与应用.ppt

目录大数据时代的背景20世纪90年代，数据仓库之父的BillInmon就经常提及BigData
全球每秒钟发送2.9百万封电子邮件，一分钟读一篇的话，足够一个人昼夜不息的读5.5年…
每天会有2.88万个小时的视频上传到Youtube，足够一个人昼夜不息的观看3.3年…
推特上每天发布5千万条消息，假设10秒钟浏览一条信息，这些消息足够一个人昼夜不息的浏览16年…
每天亚马逊上将产生6.3百万笔订单…
每个月网民在Facebook上要花费7千亿分钟，被移动互联网使用者发送和接收的数据高达1.3EB…
Google上每天需要处理24PB的数据…大数据的4V特征大数据的构成

大数据技术将被设计用于在成本可承受（economically）的条件下，通过非常快速（velocity）的采集、发现和分析，从大量化（volumes）、多类别（variety）的数据中提取价值（value），将是IT领域新一代的技术与架构
分析技术：

数据处理：自然语言处理技术
统计和分析：A/Btest;topN排行榜；地域占比；文本情感分析
数据挖掘：关联规则分析；分类；聚类
模型预测：预测模型；机器学习；建模仿真

大数据技术：

数据采集：ETL工具
数据存取：关系数据库；NoSQL；SQL等
基础架构支持：云存储；分布式文件系统等
计算结果展现：云计算；标签云；关系图等技术领域的挑战大数据与云计算2012云计算，2013大数据？行业拓展者，打造大数据行业基石：政府职能变革

重视应用大数据技术，盘活各地云计算中心资产：把原来大规模投资产业园、物联网产业园从政绩工程，改造成智慧工程；

在安防领域，应用大数据技术，提高应急处置能力和安全防范能力；

在民生领域，应用大数据技术，提升服务能力和运作效率，以及个性化的服务，比如医疗、卫生、教育等部门；

解决在金融，电信领域等中数据分析的问题：一直得到得极大的重视，但受困于存储能力和计算能力的限制，只局限在交易数型数据的统计分析；

政府投入将形成示范效应，大大推动大数据的发展。大数据的应用
——热点：智慧城市大数据的应用
——未来，改变一切大数据赋予我们洞察未来的能力挑战数据汇集传统解决方案业务厂商开发周期长
标准变更，频繁调试
无工具支撑，厂商能力有限，数据质量难以保证锐易特数据采集与交换解决方案卫生数据采集与交换一体机(卫生一体机)功能架构数据采集过程工作内容对比应用收益解决方案核心优势