大数据培训体系

LINUX

Unit01： Linux概述 、 系统安装与分区 、 常用命令 视频

Unit02： 磁盘物理结构 、 文件系统原理 、 网络基本知识 、 网络操作 视频

Unit03： 进程概述 、 rpm安装软件 、 yum安装删除软件 、 yum进阶 视频

Unit04： vim命令 、 常见的shell命令 以及实战练习 视频

Unit05： shell script 、 条件判断 、 循环 视频

测试阶段 进入考试

 

ZEBRA

Unit01： NIO 、 BIO 、 Buffer 、 Channel 视频

Unit02： BlockingQueue 、 CountDownLatch 、 ExecutorService_Lock 、 GoogleProtoBuffer 视频

Unit03： zookeeper介绍_原理 、 zookeeper的安装配置 、 zookeeper操作 视频

Unit04： Zebra项目分析 、 Zebra文件处理 、 Zebra总结 视频

Unit05： Zebra业务实现 视频

Unit06： Zebra引擎开发 、 Zebra测试 视频

测试阶段 进入考试

 

HADOOP

Unit01： Hadoop伪分布式搭建 、 HDFS入门 视频

Unit02： HDFS API 、 HDFS 工作原理解析 、 HDFS 源码剖析 视频

Unit03： MapReduce介绍 、 案例 、 Hadoop 序列化机制 、 Hadoop 分区机制 视频

Unit04： 案例 、 Hadoop combine机制 、 Shuffle中间过程解析 视频

Unit05： MapReduce源码解析 、 Hadoop常见参数控制 、 Hadoop性能调优 、 Hadoop2.0 高可用集群搭建 视频

Unit06： 自定义格式输入输出 、 MultipleInputs 多输入源输出源 、 Hadoop 压缩机制 、 Hadoop JVM重用机制 视频

测试阶段 进入考试

 

FLUME

Unit01： Flume概述 、 Flume之Source 、 Flume之Sink 、 Flume之Schannel 、 Flume高级 、 Flume企业级应用 视频

测试阶段 进入考试

 

HIVE

Unit01： Hive入门 、 Hive切换元数据库 、 Hive的外部表 、 Hive语法 视频

Unit02： Zebra实现分析 、 Zebra实现利用Flume收集日志 、 Zebra实现hive处理 、 Sqoop 视频

测试阶段 进入考试

 

HBASE&PHOENIX

Unit01： Hbase入门 、 Hbase原理解析 、 Hbase的JavaAPI操作 、 Hbase表设计原则 、 Hbase案例 、 Phoenix入门 、 Phoenix详解 视频

测试阶段 进入考试

 

STORM&KAFKA

Unit01： Storm概述 、 Storm安装配置 、 Storm入门 、 Storm详解之并发控制，数据流分组，可靠性保证 视频

Unit02： Storm集群配置 、 Storm之drpc 、 Storm之trident 、 重分区操作操作 、 聚合操作 视频

Unit03： 分组操作之合并和连接 、 TridentState 、 StormDrpc 、 Kafka入门 、 Kafka安装配置 、 Kafka的API操作 视频

测试阶段 进入考试

 

WEBANALYPROJECT

Unit01： 需求分析 、 埋点实现 、 nginx反向代理服务器 、 日志收集 、 Flume汇聚日志 、 Flume存储数据到hdfs 视频

Unit02： 数据清洗&Hive处理 、 Hive离线数据处理 、 Kafka存储数据 、 Storm处理 视频

Unit03： 数据展示 、 综合复习 视频

测试阶段 进入考试

 

SCALA

Unit01： Scala基础 视频

Unit02： Scala高级及AKKA框架 视频

测试阶段 进入考试

 

SPARK

Unit01： Spark安装及HDFS&RDD 视频

Unit02： RDD及计算模型 视频

Unit03： Spark集群及提交Job 视频

Unit04： SparkSQL 视频

Unit05： SparkStreaming&Kafka 视频

Unit06： 机器学习MLLib 视频

测试阶段 进入考试

结业测试