Hadoop环境搭建 Hadoop集群搭建、Hadoop新特性
可掌握的核心能力:
能够理解Shell命令选项;
能够理解NameNode与DataNode;
能够实现Shell定时采集数据至HDFS;
能够理解MapReduce处理流程解析;
能够熟练使用Flume;
掌握数据仓库的基本使用;
能够熟练使用Hive;
能够实现数据采集搜集和数据预处理;
熟练Azkaban的使用;
掌握维度建模的三种方式;
掌握网站流量的统计分析;
掌握Hadoop3的新特性。
可解决的现实问题:
掌握大数据转型必备技能,为需要转型的JavaEE工程师提供新的转型基础。
HDFS HDFS基本原理、HDFS应用开发
MapReduce&Flume MapReduce核心机制、MapReduce深入、Flume
数据管理与数据仓库
数据管理、数据仓库、数据仓库
网站日志分析系统
数据采集搜集、数据预处理、Azkaban、维度建模、Sqoop
|