阿里巴巴离线大数据处理平台概述.pptx
胜利****实阿
亲,该文档总共30页,到这已经超出免费预览范围,如果喜欢就直接下载吧~
相关资料
阿里巴巴离线大数据处理平台概述.pptx
个人介绍提纲大数据时代大数据时代的挑战阿里巴巴的大数据产品探索淘宝贷款阿里巴巴大数据事业部阿里巴巴离线大数据处理平台我们面临的主要问题高效稳定的计算模型准实时查询图编程利用图编程实现SSSP算法(1)利用图编程实现SSSP算法(2)利用图编程实现SSSP算法(3)矩阵和算法运算支持多集群架构多集群架构多租户模型多租户模型ODPS安全架构云帐号云帐号灵活的授权方式数据上传下载服务数据上传下载服务利用ODPSTunnel上传数据结语30
阿里巴巴离线大数据处理平台.pptx
阿里巴巴离线大数据处理平台提纲大数据时代大数据时代的挑战阿里巴巴的大数据产品探索淘宝贷款阿里巴巴大数据事业部阿里巴巴离线大数据处理平台我们面临的主要问题高效稳定的计算模型准实时查询图编程利用图编程实现SSSP算法(1)利用图编程实现SSSP算法(2)利用图编程实现SSSP算法(3)矩阵和算法运算支持多集群架构多集群架构多租户模型多租户模型ODPS安全架构云帐号云帐号灵活的授权方式数据上传下载服务数据上传下载服务利用ODPSTunnel上传数据结语30
某科技离线大数据处理平台.pptx
阿里巴巴离线大数据处理平台提纲大数据时代大数据时代的挑战阿里巴巴的大数据产品探索淘宝贷款阿里巴巴大数据事业部阿里巴巴离线大数据处理平台我们面临的主要问题高效稳定的计算模型准实时查询图编程利用图编程实现SSSP算法(1)利用图编程实现SSSP算法(2)利用图编程实现SSSP算法(3)矩阵和算法运算支持多集群架构多集群架构多租户模型多租户模型ODPS安全架构云帐号云帐号灵活的授权方式数据上传下载服务数据上传下载服务利用ODPSTunnel上传数据结语30演讲完毕,谢谢观看!
基于大数据的离线和实时流计算的数据处理平台.pdf
本发明公开了基于大数据的离线和实时流计算的数据处理平台,涉及大数据平台技术领域。该基于大数据的离线和实时流计算的数据处理平台,包括存储模块、数据输入流模块和服务模块,所述数据输入模块和服务模块均与存储模块系统连接,所述存储模块,用于数据处理平台内部历史全量信息和新入系统信息进行存储,所述数据输入模块,用于数据处理平台与外界大数据的信息交换,进行数据采集,所述服务模块,用于用于将批处理层和快速处理层的结果合并起来。本大明解决了传统数据处理平台对于同一个查询目标,需要分别为批处理层和快速处理层开发不同的算法实
离线编程平台的服务层和离线编程平台.pdf
本发明提供了一种离线编程平台的服务层和离线编程平台。其中,离线编程平台的服务层包括基于分布式数据库构造的服务;服务层的服务包括:路径匹配服务、模式服务、数据池服务、监听服务和发布服务;路径匹配服务用于将离线编程请求经过规则映射后进行路由;模式服务用于识别离线编程请求对应的模式,基于离线编程请求对应的模式将离线编程请求转发至对应的服务进行处理;数据池服务用于将离线编程请求的数据通过数据池进行管理;监听服务用于监听指定的主题,接受主题发出的消息对应的功能;发布服务用于向主题发送消息。可以脱离DDC设备,通过离