收藏 分享(赏)

大数据平台的设计与实现--四川大学研究生答辩ppt.pptx

上传人:saw518 文档编号:4002766 上传时间:2018-12-04 格式:PPTX 页数:27 大小:17.23MB
下载 相关 举报
大数据平台的设计与实现--四川大学研究生答辩ppt.pptx_第1页
第1页 / 共27页
大数据平台的设计与实现--四川大学研究生答辩ppt.pptx_第2页
第2页 / 共27页
大数据平台的设计与实现--四川大学研究生答辩ppt.pptx_第3页
第3页 / 共27页
大数据平台的设计与实现--四川大学研究生答辩ppt.pptx_第4页
第4页 / 共27页
大数据平台的设计与实现--四川大学研究生答辩ppt.pptx_第5页
第5页 / 共27页
点击查看更多>>
资源描述

1、答 辩 人: 红军 专 业: * 指导老师: *,论文题目:大数据平台的设计与实现,目录,大数据,国内,国外,开源-收集,开源-存储,开源-计算,开源-工具,ambari 支持数据服务集群的供应、管理和监控。支持应用扩展。 Hive 是面向Hadoop生态系统的数据仓库。支持类SQL语言。 Oozie 管理调度Hadoop任务。 Mahout 基于MapReduce算法库,初步支持spark。,整体业务视图,平台 开发,平台维护,场景-工程师,合理分配资源 数据可管可查 算法被合理执行 简单实现可视化 异常问题可知,场景-用户,用户查看权限可被管理 查找数据关系描述 数据内容可被搜索 可以查看

2、订阅数据图表,场景-系统,获取数据成果 输送数据 数据暂存 数据计算,17,设计-架构,设计-部署,设计-收集,应用-关系,应用-调度,应用-可视化,服务 业务系统 管理后台 可视引擎 Mysql集群、Redis集群 关键术语 业务系统、桌面、报表,总结,不足 不能实现一键平台整体部署; 操作复杂,学习门槛高; 存在一些bug待修改,存在功能不足待完善; 部分流程之前还存在断层; 成果 所有系统实现分布式并支持多机房部署; 完成收集、存储、计算、展现、管理的打通; 实现机构化、非结构化、实时和离线的数据收集;,展望,技术方向 结合云计算、资源弹性使用; 增加算法库和开放算法平台; 开放平台,引入自由开发者; 提供离线和在线模式。 行业方向 行业领域的分析工具和分析服务; 建立数据交易共享规则。,谢谢!,

展开阅读全文
相关资源
猜你喜欢
相关搜索

当前位置:首页 > 国家公务 > 综合

本站链接:文库   一言   我酷   合作


客服QQ:2549714901微博号:道客多多官方知乎号:道客多多

经营许可证编号: 粤ICP备2021046453号世界地图

道客多多©版权所有2020-2025营业执照举报