Hadoop生态圈

课程介绍：课程包含linux基础和shell脚本，hadoop、hdfs、zookeeper和hadoop的高可用，分布式并行离线计算框架Mapreduce，数据仓库工具hive以及分布式数据库Hbase，从简单到复杂命令逐步深入，高级架构师实战养成计划。

章节目录及简介：
大数据+人工智能免费视频教程《linux基础和shell脚本》

从安装到linux系统配置，从简单命令到复杂命令，逐步深入；对比windows操作系统学习linux系统，文件操作、用户操作、权限操作、服务软件安装等；对比java编程语言，轻松学习基于linux的shell脚本编程、awk脚本编程。

千锋大数据01
linux概念介绍01
vmware安装虚拟机创建linux操作系统安装1
vmware安装虚拟机创建linux操作系统安装2
linux的目录结 连接网络模式 配置网络
帮助命令 xshell安装
linux的系统级别命令
linux的系统级别命令02
linux中磁盘相关简单操作
linux中用户和组操作
文件创建
linux中的文件操作02
linux中的打包解包、查找、别名设置
特殊符号、防火墙启停、sudoer的配置
linux中二进制包安装(linux中jdk的安装)
linux的rpm的介绍和安装1
linux的rpm的介绍和安装2
linux连接公网
在线yum源安装
linux本地yum源的自作
源码安装和nginx的安装
shell介绍和变量
shell中的字符串
shell中的数组和注释
shell中的运算符
shell中的ifelse
shell中的循环、casein、continue、break
shell中的方法
shell中的文件引入
shell中脚本的调试


大数据+人工智能免费视频教程《hadoop、hdfs、zookeeper和hadoop的高可用》

对hadoop的核心概念，核心模块hdfs和yarn详细讲解;对hadoop进行本地、分布式模式和高可用(HA)进行搭建；讲解hdfs的shell命令、rpc机制和java对hdfs的API操作；对zookeeper作全面讲解和zookeeper集群搭建。

hadoop的简单介绍
hadoop的简单介绍1
hadoop 单机版安装及应用
hdfs的相关内容介绍
hdfs的文件读写流程
yarn概念的讲解
yarn的流程介绍
克隆虚拟机
克隆服务器1
克隆服务器2
hadoop的集群配置01
hadoop的集群配置02
hadoop集群的启动和测试1
hadoop集群的启动和测试2
ssh免登陆配置
hdfs的常用shell
maven的安装
java读取hdfs的文件
java操作hdfs文件系统
rpc协议介绍
rpc的案例
zookeeper的基本概念
zookeeper集群的搭建
zookeeper的shell命令
hdfs的HA的介绍
hdfs的HA配置
hdfs的HA的测试
yarn的HA配置和测试


大数据+人工智能免费视频教程《分布式并行离线计算框架Mapreduce》

mapreduce的重要知识点、运行方式和shuffle的复杂过程讲解；mapreduce的入门案例wordcount详解，经典案例倒排索引、分区、二次排序、join等详解；mapreduce和awk脚本的对比案例展示；mapreduce自定义数据类型；高级案例之mapreduce的自定义输入输出数据格式编写。

mapreduce的相关概念的介绍
wordcount框架搭建
wordcount的map和reduce函数的实现
wordcount的驱动类的编写
wordcount的测试
mapreduce的数学运算案例
awk和mapreduce的处理方式比较
shuffle的概念介绍
shuffle的细节图描述
分区案例
倒排索引案例
mr中自定义数据类型
mr中的top-n
mr的二次排序
多表的join连接01
多表的join连接02
mr中的依赖执行
mr的老版本的API
mr参数传递
mr中的压缩


大数据+人工智能免费视频教程《数据仓库工具hive》

hbase的详细介绍和分布式的搭建详细讲解；java操作hbase的API和高级过滤器filter的编写；hbase和hive、hbase和mapreduce的整合案例；flume概念介绍、flume的安装、flume基础脚本和高级脚本的编写。

hive的概念介绍
hive的安装
hive的基本命令1
hive的基本命令2
hive的join相关的查询
hive的sort、union等查询
hive分区表创建
hive的分区
hive的基础数据类型和复杂数据类型
hive的常用内部函数和排名函数
hive的内部函数入门
hive的udf的使用
hive文件的存储格式
hive的serde的记录格式
hive的索引
hive的视图
hive的执行方式
hive的执行方式
hive的优化explain的查询、job个数控制等1
hive的优化explain的查询、job个数控制等2
sqoop的概念及安装01-1
sqoop的概念及安装01-2
sqoop的语句
sqoop使用query导入和export导出