Hadoop生态圈视频

Hadoop生态圈视频

课程介绍 从安装到linux系统配置,从简单到复杂命令逐步深入;对比windows操作学习linux系统。扣丁学堂大数据学习群:209080834。

同学人数:468人 时长:27小时27分钟

Hadoop生态圈视频



        付费课程要提取码的同学请关注“扣丁学堂”微信公众号,如果对课程有什么疑问的同学 加文文老师QQ【扣丁学堂—文文老师:3204446042】




第一章 linux基础和shell脚本



        从安装到linux系统配置,从简单命令到复杂命令,逐步深入;

        对比windows操作系统学习linux系统,文件操作、用户操作、权限操作、服务软件安装等;对比java编程语言,轻松学习基于linux的shell脚本编程、awk脚本编程。

        Day01:linux介绍和环境搭建

        Day02:linux相关命令介绍1

        Day03:linux相关命令介绍2

        Day04:linux系统下软件安装

        Day05:shell编程



第二章 hadoop、hdfs、zookeeper和hadoop的高可用


        对hadoop的核心概念,核心模块hdfs和yarn详细讲解;对hadoop进行本地、分布式模式和高可用(HA)进行搭建;

        讲解hdfs的shell命令、rpc机制和java对hdfs的API操作;对zookeeper作全面讲解和zookeeper集群搭建。

        Day06:hadoop的简介和单机版安装

        Day07:hdfs的理论讲解

        Day08:yarn的理论讲解

        Day09:hadoop的伪分布式和分布式搭建

        Day10:hdfs的shell命令和hdfs api01

        Day11:hdfs的api02和rpc

        Day12:zookeeper的讲解

        Day13:hadoop的高可用



第三章 分布式并行离线计算框架Mapreduce


        mapreduce的重要知识点、运行方式和shuffle的复杂过程讲解;mapreduce的入门案例wordcount详解,经典案例倒排索引、分区、二次排序、join等详解;

        mapreduce和awk脚本的对比案例展示;mapreduce自定义数据类型;高级案例之mapreduce的自定义输入输出数据格式编写。

        Day14:mr的理论讲解和wordcount案例

        Day15:mr的基本数学运算和awk脚本案例比较

        Day16:mr的shuffle过程、partitioner、combiner、去重、倒排索引

        Day17:mr的secondarySort、topN、自定义数据类型、单表连接、多表连接

        Day18:mr的chain、oldAPI、简单案例

        Day19:mr自定输入输出数据类型编写



第四章 数据仓库工具hive


        hive的架构讲解、多种模式的安装和hive的hql语句;hive中的高级查询语句使用;hive中常用内部函数详解;

        hive的企业真实udf案例编写;hive的存储格式、serde、索引和优化的详解;sqoop的安装和不同数据源的相互整合。

        Day20:hive的介绍、安装和简单命令

        Day21:hive的高级查询

        Day23:hive的复杂类型和内部函数

        Day24:hive的udf编写

        Day25:hive的存储格式、serde、索引、视图、优化

        Day26:sqoop介绍、安装和sqoop语句编写



第五章 分布式数据库Hbase

        

        Hbase的详细介绍和分布式的搭建详细讲解;java操作Hbase的API和高级过滤器filter的编写;

        Hbase和hive、Hbase和mapreduce的整合案例;flume概念介绍、flume的安装、flume基础脚本和高级脚本的编写。

        Day27:Hbase介绍、伪分布式安装、全分布式安装和简单命令

        Day28:Hbase的api和filter

        Day29:Hbase和hive的整合、Hbase和mapreduce的整合

        Day30:flume的介绍、安装、和flume脚本编写

        Day31:flume高级脚本编写



扣丁学堂微信公众号                


【关注微信公众号更多学习资料】 【关注小程序观看在线视频】




课程进阶
课程进阶
HTML5大前端开发
201位学生正在学习
加入QQ群
大数据交流群
群号:769591751

打开微信,点击底部的“发现”,
使用 “扫一扫” 即可将网页分享到我的朋友圈。

微信
微博
15311698296

全国免费咨询热线

邮箱:codingke@1000phone.com

官方群:148715490

北京千锋互联科技有限公司版权所有   北京市海淀区宝盛北里西区28号天丰利商场4层
京ICP备12003911号-6   Copyright © 2013 - 2019

关注扣丁学堂微信

回复"297"
获取该课程提取码

微信扫一扫