其他分享
首页 > 其他分享> > 大数据运维架构师培训(4):Oozie,Flume,Sqoop,Azkaban,Ranger

大数据运维架构师培训(4):Oozie,Flume,Sqoop,Azkaban,Ranger

作者:互联网

一、风哥大数据运维架构师实战培训专题2.0介绍


课程背景:

为满足想学习和掌握大数据运维与体系架构的学员,风哥特别设计的一套比较系统的大数据库运维培训课程。

 

课程目标:

本套风哥大数据运维架构师实战培训课程,分5个阶段,分别是大数据Hadoop核心架构运维实战、大数据存储管理与查询分析实战、大数据计算框架与消息搜索实战、大数据安全调度与数据采集实战、大数据集群管理平台运维实战。学完本套风哥大数据课程可以熟悉Hadoop大数据生态技术框架,包括Cloudera CM/CDH/CDP、HDFS、Yarn、HBase、Hive、Phoenix、Zookeeper、Kafka、Solr、Spark、Flink、Storm、Flume、Sqoop、ETL/Kettle、ELK、Azkaban、Oozie、Ranger等组件安装配置与日常维护管理,同时熟悉ElasticSearch、ClickHouse、GreenPlum、TiDB等OLAP分布式大数据平台的建设与维护。


风哥大数据运维架构师实战培训专题2.0
专题链接:https://edu.51cto.com/topic/4539.html
阶段列表课程大纲 单个课程学习地址
第一阶段
大数据Hadoop核心架构运维实战
大数据基础与解决方案https://edu.51cto.com/course/27367.html
大数据平台运行环境规划
Zookeeper
Hadoop(HDFS,MR,Yarn)
第二阶段
大数据存储管理与查询分析实战
Hbasehttps://edu.51cto.com/course/27368.html
Phoenix
Hive
Pig
Impala
Kudu
专题2.0附1:MySQL基础https://edu.51cto.com/course/17895.html
专题2.0附2:GreenPlumhttps://edu.51cto.com/course/23050.html
专题2.0附3:TiDBhttps://edu.51cto.com/course/25659.html
专题2.0附4:ClickHousehttps://edu.51cto.com/course/26149.html 
第三阶段
大数据计算框架与消息搜索实战
Sparkhttps://edu.51cto.com/course/27366.html
Flink
Storm
Tez
Kafka
Solr
专题2.0附5:ElasticSearchhttps://edu.51cto.com/course/25184.html
专题2.0附6:ELKhttps://edu.51cto.com/course/25183.html
第四阶段
大数据安全调度与数据采集实战
Flumehttps://edu.51cto.com/course/27365.html
Sqoop
Azkaban
Oozie
Ranger
专题附7:ETL/Kettlehttps://edu.51cto.com/course/25920.html
第五阶段
大数据集群管理平台运维实战
Cloudera CMhttps://edu.51cto.com/course/27364.html
Cloudera CDH/CDP


二、大数据运维架构师培训(4):Flume,Sqoop,Azkaban,Oozie,Ranger


本课程学习下载地址:https://edu.51cto.com/course/27365.html
欢迎加入:
Oracle/MySQL/大数据学习专用QQ群:199 479 729、189 07 0296

4.1.Flume大数据采集实战

    4.1.1.Flume基础知识

    4.1.2.Flume安装部署

    4.1.3.Flume采集日志文件到Hadoop

    4.1.4.Flume采集目录数据到Hadoop

    4.1.5.Flume数据采集级联架构实战

    4.1.6.Flume高可用配置

    4.1.7.Flume静态拦截器

    4.1.8.Flume使用总结

4.2.Sqoop大数据迁移实战

    4.2.1.Sqoop基础知识

    4.2.2.Sqoop安装部署与基本命令

    4.2.3.Sqoop数据迁移(MySQL to HDFS/HBase/Hive)

    4.2.4.Sqoop数据迁移(Oracle to HDFS/HBase/Hive)

    4.2.5.Sqoop数据迁移(Hadoop to MySQL)

    4.2.6.Sqoop数据迁移(Hadoop to Oracle)

    4.2.7.Sqoop作业管理

4.3.Azkaban大数据任务调度管理实战

    4.3.1.Azkaban基础知识

    4.3.2.Azkaban安装部署

    4.3.3.Azkaban任务调度实战

4.4.Oozie大数据任务调度管理实战

    4.4.1.Oozie基础知识

    4.4.2.Oozie安装部署

    4.4.3.Oozie任务调度实战

4.5.Ranger大数据权限安全管理实战

    4.5.1.Ranger基础知识

    4.5.2.Ranger安装部署

    4.5.3.Ranger权限管理实战

bigdata4.png

标签:Flume,实战,运维,数据,Sqoop,course,cto,com,edu.51
来源: https://blog.51cto.com/oracle18c/2665759