云计算和大数据现状分析.ppt

信息技术加速中国发展新技术，新机遇：问IT产业谁主沉浮？信息技术：润物细无声互联网用户增速迅猛智能终端：一切应用及服务的入口中国IT产业：更丰富的内容和服务中国IT产业高速发展：天时、地利、人和中国IT产业：未来发展阵型什么是云计算：云的业务模式什么是云计算:业务模式云计算的定义与特征（12345）虚拟化技术硬件虚拟化系统虚拟化应用虚拟化并行运算技术映射（Map)归约（Reduce)IAAS云：虚拟机统一调度和管理提高资源效率云的四大效能：对客户的价值云最大的优势有效解决资源、信息孤岛问题全球广泛建立云数据中心世界领先IT公司服务器持有量云计算产业市场前景截止到2012年8月，国内众多省市、行业都规划、启动、应用了云计算服务。北京“祥云”计划上海“云海”计划深圳“鲲云”计划重庆“云端”计划宁波“星云”计划、无锡“云谷”计划苏州“彩云”计划哈尔滨“云飞扬”计划惠州“惠云”计划广州“天云”计划内蒙古“蓝天白云”计划……中国的云要自己建去IOE和八大金刚，及去开源云平台的规划：总体技术架构云操作系统：整个云平台的管理者云操作系统：资源的全局监控电子政务云实施：传统电子政务建设面临的问题电子政务云的定义及目标电子政务云的价值电子政务云的总体部署架构电子政务云的总体逻辑架构电子政务云的主要建设内容典型案例典型案例东莞电子政务云总体网络部署架构一期网络部署架构二期网络部署架构电子政务云平台案例用户：东莞市中小学、学生、家长；产品&服务：G-Cloud云操作系统、教育云在线平台、国云中间件服务东莞200万学生，10万教师教育云平台云计算国防应用：军民融合云计算平台智慧城市规划“一张网”、“一张图”、“一片云”、“一套库”、“一张表”5个统一的信息化建设，提升城市基础设施的集约化、系统化和承载能力；以互联互通和共享协同为主线，建设智慧城市。我们来到大数据时代全球每秒钟发送2.9百万封电子邮件，一分钟读一篇的话，足够一个人昼夜不息的读5.5年…每天会有2.88万个小时的视频上传到Youtube，足够一个人昼夜不息的观看3.3年…推特上每天发布5千万条消息，假设10秒钟浏览一条信息，这些消息足够一个人昼夜不息的浏览16年…每天亚马逊上将产生6.3百万笔订单…每个月网民在Facebook上要花费7千亿分钟，被移动互联网使用者发送和接收的数据高达1.3EB…Google上每天需要处理24PB的数据…大数据时代的爆炸增长20世纪90年代，数据仓库之父的BillInmon就经常提及BigData什么是大数据（NO-SQL,NotOnlySQL)不同“看”数据的方式大数据=海量数据+复杂类型数据如果自然界中的事件完全不可预测地随机发生，人们的生活将无法忍受；与此相反，如果每一件事情都是确定的、完全可以预测的，则生活将是无趣的。利用因果关系解释观测的现象或预测未来存在逻辑和实际上的困难。大数据要上升为国家战略大数据不仅仅是数据“大”大数据与传统数据库的区别云计算与大数据大数据市场分析国际企业角力大数据大数据的产业价值链分析技术：数据处理：自然语言处理技术统计和分析：A/Btest;topN排行榜；地域占比；文本情感分析数据挖掘：关联规则分析；分类；聚类模型预测：预测模型；机器学习；建模仿真大数据技术：数据采集：ETL工具数据存取：关系数据库；NoSQL；SQL等基础架构支持：云存储；分布式文件系统等计算结果展现：云计算；标签云；关系图等大数据核心技术需求大数据的分析模型大数据变革既有数据观：以变革始大数据是组织的一种资产大数据处理行为技术特征大数据系统的定义大数据系统的设计目标大数据系统的逻辑架构大数据库系统界面与现有系统的关系HADOOPMaHout主流大数据库大数据系统体系建设规划搭平台-系统布署规划采数据-数据采集模型建模型-建立四大模型建模型-建模所需基础知识建模型-十大精典算法建模型-算法的典型应用建模型-算法的典型应用编代码-开发环境的安装图呈现：图形设计技术图呈现：一图胜千言图呈现-图形开发工具舆情系统：大数据应用舆情监控社会传感网络舆情系统：突发事件分析关键词配置时空大数据聚合应用案例大数据支撑行为分析案例实时大数据案例大数据异构政府信息系统集成应用案例跨系统数据异常比对大数据精典案例大数据精典案例大数据精典案例Cloudera正在与西奈山医学院合作开发新的生物数据分析方法和系统。Cloudera还与FDA合作侦测多种药物组合的副作用，与埃默里大学合作帮助病历学家更准确地分析医疗影像。Cloudera的客户之一——Explorys的业务主要是聚合并分析医疗记录，而英特尔和NextBio则合作使用Hadoop处理基因数据。Apixio利用Hadoop平台开发了语义分析服务，可以对病人的健康提供医生、护士、及其他相关人士的回答。Apixio试图通