登录 注册
本次课程主要讲解了hadoop HA 高可用集群原理,全分布式手动部署。
本次课程详细讲解了什么是消息系统,kafka体系结构:producer broker consumer ,消息队列分类:点对点(Queue) 发布与订阅(Topice)。zookeeper协调服务的应用及工作原理,全分布式部署zookeeper,zoo.cfg主配置文件详解。zookeeper基本命令。kafka全分布式部署。
本次课程详细讲解了hadoop生态圈之hue UI 界面部署与管理,通过web界面管理hadoop组件。flume日志收集以及flume与hdfs整合,flume与web服务器apache整合。
详细讲解hadoop生态圈:hdfs分布式计算框架,mapreduce计算模型 yarn资源管理器 sqoop数据导入导出工具 flume日志收集工具 hbase分布式数据库 zookeeper协调服务 ,hue web ui界面管理 ambari web 界面部署监控工具,spark storm计算模型,实现全分布式手动部署hadoop平台。hadoop配置文件详解。hdfs上传下载数据过程,什么是元信息,什么是hadoop联盟,namenode HA高可用集群。mapreduce在yarn上运行过程。