课程目录

• 1

  初识 Hadoop

•   课时 1 初识Hadoop 可试学
•   课时 2 大数据简介 可试学
•   课时 3 大数据技术的核心需求
•   课时 4 Hadoop简介
•   课时 5 离线数据分析流程介绍
•   课时 6 大数据学习流程
• 2

  搭建 Hadoop 集群

•   课时 7 Linux概念介绍
•   课时 8 Vmware安装、虚拟机创建、Linux操作系统安装
•   课时 9 Linux的目录结 构、连接网络模式、配置网络
•   课时 10 帮助命令、 Xshell安装-1
•   课时 11 Linux的系统级别命令（上）
•   课时 12 Linux的系统级别命令（下）
•   课时 13 Linux中磁盘相关简单操作
•   课时 14 Linux中用户和组操作
•   课时 15 Hadoop 单机版安装及应用
•   课时 16 文件创建
•   课时 17 Linux中的文件操作
•   课时 18 Linux中的打包解包、查找、别名设置
•   课时 19 特殊符号、防火墙启停、sudoer的配置
•   课时 20 Linux中二进制包安装(Linux中jdk的安装)
•   课时 21 Linux的rpm的介绍和安装
•   课时 22 Linux连接公网
•   课时 23 在线yum源安装
•   课时 24 Linux本地yum源的自作
•   课时 25 源码安装和nginx的安装
•   课时 26 克隆服务器
•   课时 27 Hadoop的集群配置
•   课时 28 Hadoop的集群配置
•   课时 29 Hadoop集群的启动和测试
•   课时 30 ssh免登陆配置
•   课时 31 克隆虚拟机
• 3

  HDFS分布式文件系统.

•   课时 32 hdfs的相关内容介绍
•   课时 33 hdfs的文件读写流程
•   课时 34 Yarn概念的讲解
•   课时 35 Yarn的流程介绍
•   课时 36 hdfs的常用shell
•   课时 37 Java操作hdfs文件系统
•   课时 38 Maven的安装
•   课时 39 Rpc协议介绍
•   课时 40 Java读取hdfs的文件
•   课时 41 Rpc的案例
• 4

  MapReduce 分布式计算框架

•   课时 42 Mapreduce的相关概念的介绍
•   课时 43 Wordcount框架搭建
•   课时 44 Wordcount的map和reduce函数的实现
•   课时 45 Wordcount的驱动类的编写
•   课时 46 Wordcount的测试
•   课时 47 Hive分区表创建-1
•   课时 48 Mapreduce的数学运算案例
•   课时 49 Awk和mapreduce的处理方式比较
•   课时 50 Hive的分区
•   课时 51 Shuffle概念介绍
•   课时 52 Shuffle的细节图描述
•   课时 53 分区案例
•   课时 54 倒排索引案例
•   课时 55 Mr中自定义数据类型
•   课时 56 Mr中的top-n
•   课时 57 Mr的二次排序-1
•   课时 58 多表的join连接1
•   课时 59 多表的join连接2
•   课时 60 Mr中的依赖执行
•   课时 61 Mr的老版本的api
•   课时 62 Mr参数传递
•   课时 63 Mr中的压缩
• 5

  Zookeeper分布式协调服务

•   课时 64 Zookeeper的基本概念
•   课时 65 Zookeeper集群的搭建
•   课时 66 Zookeeper的shell命令-1
• 6

  Hadoop 2.0 新特性

•   课时 67 hdfs的ha的介绍
•   课时 68 hdfs的ha配置
•   课时 69 hdfs的ha的测试
•   课时 70 Yarn的ha配置和测试
• 7

  Hive

•   课时 71 Hive的概念介绍
•   课时 72 Hive的安装
•   课时 73 Hive的基本命令
•   课时 74 Hive的join相关的查询
•   课时 75 Hive的sort、union等查询
•   课时 76 Hive的基础数据类型和复杂数据类型
•   课时 77 Hive的常用内部函数和排名函数
•   课时 78 Hive的内部函数入门
•   课时 79 Hive的udf的使用
•   课时 80 Hive文件的存储格式
•   课时 81 Hive的serde的记录格式
•   课时 82 Hive的索引
•   课时 83 Hive的视图
•   课时 84 Hive的执行方式
•   课时 85 Hive的远程模式
•   课时 86 Hive的优化explain的查询、job个数控制等
• 8

  HBase分布式存储系统

•   课时 87 HBase是什么
•   课时 88 HBase的作用
•   课时 89 HBase的表结构
•   课时 90 HBase的内部结构原理
•   课时 91 HBase各个节点之间的关联
•   课时 92 HBase各个节点之间的映射关系
•   课时 93 HBase的单机节点安装前准备
•   课时 94 HBase的单机测试与启动
•   课时 95 HBase的伪分布式安装介绍
•   课时 96 HBase的伪分布式安装以及配置说明
•   课时 97 HBase的全分布式安装说明
•   课时 98 HBase的全分布式安装以及配置说明
•   课时 99 HBase全分布式启动与测试
•   课时 100 ddl：namespace
•   课时 101 ddl建表
• 9

  Flume

•   课时 102 flume的产生
•   课时 103 flume的client
•   课时 104 flume的source
•   课时 105 flume的channel
•   课时 106 flume的sink
•   课时 107 flume的interceptor
•   课时 108 flume的selector
•   课时 109 flume的event
•   课时 110 flume的agent
•   课时 111 flume的数据模型
•   课时 112 flume的安装
•   课时 113 flume的版本区别
•   课时 114 flume的avro_source
•   课时 115 flume的exec_source
•   课时 116 spooldir source
•   课时 117 thrift source
•   课时 118 hdfs sink
•   课时 119 avro sink
•   课时 120 HBase sink
•   课时 121 file channel
•   课时 122 flume memory channel
•   课时 123 flume interceptor
•   课时 124 flume的扇出机制
•   课时 125 flume的扇出机制
•   课时 126 flume的多层代理
•   课时 127 flume的负载均衡
•   课时 128 案例一
•   课时 129 案例二
•   课时 130 案例三
•   课时 131 案例四
• 10

  Sqoop

•   课时 132 Sqoop的概念及安装
•   课时 133 Sqoop的语句
•   课时 134 Sqoop使用query导入和export导出

学习资料

暂无学习资料