个人介绍
Hadoop平台部署与运维

主讲教师:赵建伟

教师团队:共9

  • 郑桂昌
  • 赵建伟
  • 吴英宾
  • 陈春华
  • 马洁
  • 白伟杰
  • 白圆圆
  • 李静
  • 李培岭
学校: 聊城职业技术学院
开课院系: 信息工程系
学分: 6
课时: 96
XY课程介绍
      本课程主要内容:Hadoop集群搭建、HDFS分布式文件系统、MapReduce分布式计算系统、Hive数据仓库、 Flume日志采集系统等教学内容。通过课程学习,能使学生掌握大数据平台的部署与运维知识。本课程适合有一定linux基础的计算机相关专业的人学习。
教师团队

郑桂昌

职称:教授

单位:聊城职业技术学院

部门:信息工程系

赵建伟

职称:讲师

单位:聊城职业技术学院

部门:信息工程系

吴英宾

职称:教授

单位:聊城职业技术学院

部门:信息工程系

陈春华

职称:副教授

单位:聊城职业技术学院

部门:信息工程系

马洁

职称:副教授

单位:聊城职业技术学院

部门:信息工程系

白伟杰

职称:副教授

单位:聊城职业技术学院

部门:信息工程系

职位:教师

白圆圆

职称:讲师

单位:聊城职业技术学院

部门:信息工程系

职位:教师

李静

职称:讲师

单位:聊城职业技术学院

部门:信息工程系

职位:教师

李培岭

职称:教师

XY课程简介

本课程设计思路是依据大数据技术方向所涵盖的岗位进行任务与职业能力分析而进行知识点选取的,形成了Hadoop集群搭建HDFS分布式文件系统、MapReduce分布式计算系统、Zookeeper分布式协调服务、Hive数据仓库、 Flume日志采集系统等教学内容。并以实际工作任务为引领,以创新能力培养为主线,将课程知识体系进行整合。


XY课程收获

通过学习课程使得学生掌握大数据平台搭建基本过程,并通过实践操作加深了解;同时对Hadoop平台应用与开发的一般理论有所了解,如分布式数据收集、分布式数据存储、分布式数据计算、分布式数据展示学生掌握如何搭建大数据平台及运维大数据平台完成本程学后能大数据技术解决企业中的实际生产问题 

XY学习人群
本课程适合有一定linux基础的计算机相关专业的人学习。

课程评价

教学资源
课程章节 | 文件类型   | 修改时间 | 大小 | 备注
1.1.2 虚拟机简介
附件
.${file.extension}
2024-02-28 --
 
附件
.${file.extension}
2024-02-28 --
 
附件
.${file.extension}
2024-02-28 --
 
附件
.${file.extension}
2024-02-28 --
 
附件
.${file.extension}
2024-02-28 --
 
附件
.${file.extension}
2024-02-28 --
 
附件
.${file.extension}
2024-02-28 --
 
附件
.${file.extension}
2024-02-28 --
1.2.1 Linux系统登录
视频
.mp4
2024-02-28 678.60KB
1.2.2 Linux命令基础
图片
.png
2024-02-28 --
 
图片
.png
2024-02-28 --
 
图片
.png
2024-02-28 --
1.3.1 Linux目录与Windows目录区别
附件
.${file.extension}
2024-02-29 --
 
附件
.${file.extension}
2024-02-29 --
1.3.2 Linux目录结构
附件
.${file.extension}
2024-02-29 --
1.4.2 查看文件内容
文档
.pdf
2024-03-04 125.49KB
 
文档
.pdf
2024-03-04 145.59KB
 
文档
.pdf
2024-03-04 122.38KB
1.5.1 文件的属性信息
附件
.${file.extension}
2024-02-29 --
 
附件
.${file.extension}
2024-02-29 --
 
附件
.${file.extension}
2024-02-29 --
 
附件
.${file.extension}
2024-02-29 --
1.5.2 文件的权限
附件
.${file.extension}
2024-02-29 --
2.1 大数据概述
附件
.${file.extension}
2024-02-29 --
2.3 Hadoop的概述
附件
.${file.extension}
2024-02-29 --
 
附件
.${file.extension}
2024-02-29 --
 
附件
.${file.extension}
2024-02-29 --
 
附件
.${file.extension}
2024-02-29 --
3.1 安装centos7
视频
.mp4
2023-09-08 12.81MB
 
附件
.${file.extension}
2023-09-08 --
 
附件
.${file.extension}
2023-09-08 --
 
附件
.${file.extension}
2023-09-08 --
 
视频
.mp4
2023-12-01 5.09MB
3.2 安装xshell
视频
.mp4
2022-09-15 10.48MB
 
视频
.mp4
2022-09-15 14.96MB
 
附件
.${file.extension}
2022-09-15 --
 
附件
.${file.extension}
2022-09-15 --
3.3.1 打通网络
视频
.mp4
2023-09-08 20.46MB
 
附件
.${file.extension}
2023-09-08 --
 
附件
.${file.extension}
2023-09-08 --
 
附件
.${file.extension}
2023-09-08 --
 
附件
.${file.extension}
2023-09-08 --
 
附件
.${file.extension}
2023-09-08 --
 
图片
.PNG
2023-09-08 --
 
视频
.mp4
2023-09-08 23.23MB
3.4 安装JDK
附件
.gz
2023-09-08 186.06MB
 
视频
.mp4
2023-09-08 11.31MB
 
附件
.${file.extension}
2023-09-08 --
 
附件
.gz
2024-03-11 186.06MB
 
视频
.mp4
2024-03-11 46.28MB
3.5 安装hadoop
附件
.gz
2023-09-08 186.21MB
 
视频
.mp4
2023-09-08 14.08MB
 
附件
.gz
2023-09-08 577.15MB
 
视频
.mp4
2023-09-08 46.22MB
3.5.1 配置hadoop-env.sh
视频
.mp4
2023-09-08 36.99MB
 
附件
.${file.extension}
2023-09-08 --
 
视频
.mp4
2023-09-08 17.78MB
 
视频
.mp4
2023-09-08 4.55MB
3.5.2 配置核心组件core-site.xml
附件
.${file.extension}
2020-09-26 --
 
视频
.mp4
2023-09-11 23.25MB
3.5.3 配置文件系统hdfs-site.xml
视频
.mp4
2023-09-11 7.70MB
3.5.4 配置yarn-env.sh(hadoop3不需要配置)
附件
.${file.extension}
2020-09-26 --
3.5.5 配置yarn-site.xml
视频
.mp4
2023-09-15 7.23MB
3.5.6 配置计算框架mapred-site.xml
视频
.mp4
2023-09-11 4.85MB
3.5.7 配置worker
视频
.mp4
2023-09-11 2.41MB
3.5.8 配置hadoop启动环境变量
视频
.mp4
2023-09-11 4.44MB
3.6 克隆虚拟机
视频
.mp4
2023-09-11 14.57MB
 
附件
.${file.extension}
2023-09-11 --
 
附件
.${file.extension}
2023-09-11 --
 
视频
.mp4
2023-09-18 14.11MB
 
视频
.mp4
2023-09-18 16.91MB
3.7 配置hosts列表
视频
.mp4
2023-09-15 18.36MB
 
附件
.${file.extension}
2023-09-15 --
 
视频
.mp4
2023-09-18 5.65MB
 
视频
.mp4
2023-09-18 7.91MB
3.8 免密登录配置
视频
.mp4
2023-09-15 14.52MB
 
附件
.${file.extension}
2023-09-15 --
 
视频
.mp4
2023-09-18 17.68MB
 
视频
.mp4
2023-09-18 8.67MB
 
附件
.${file.extension}
2023-09-18 --
3.9.1 格式化master节点
视频
.mp4
2023-09-15 28.39MB
 
附件
.${file.extension}
2023-09-15 --
 
附件
.${file.extension}
2023-09-15 --
 
附件
.${file.extension}
2023-09-15 --
 
附件
.${file.extension}
2023-09-15 --
 
附件
.${file.extension}
2023-09-15 --
 
视频
.mp4
2023-09-18 25.87MB
 
视频
.mp4
2023-09-18 18.44MB
3.10 wordcount
附件
.txt
2023-11-06 6.16MB
 
视频
.mp4
2023-11-06 32.49MB
 
视频
.mp4
2023-11-06 9.28MB
4.1 HDFS的简介
文档
.pptx
2024-03-08 1.52MB
 
视频
.mp4
2024-03-08 90.17MB
4.1.1 HDFS的演变
附件
.${file.extension}
2020-10-13 --
4.1.3 HDFS特点
附件
.${file.extension}
2020-10-13 --
 
附件
.${file.extension}
2020-10-13 --
4.2 HDFS的架构和原理
视频
.mp4
2024-03-08 103.15MB
 
附件
.${file.extension}
2024-03-08 --
 
附件
.${file.extension}
2024-03-08 --
 
附件
.${file.extension}
2024-03-08 --
 
附件
.${file.extension}
2024-03-08 --
 
附件
.${file.extension}
2024-03-08 --
 
附件
.${file.extension}
2024-03-08 --
4.3 HDFS的Shell操作
视频
.mp4
2024-03-08 19.80MB
 
视频
.mp4
2024-03-08 3.99MB
 
视频
.mp4
2024-03-08 65.15MB
 
附件
.${file.extension}
2024-03-08 --
 
附件
.${file.extension}
2024-03-08 --
 
附件
.${file.extension}
2024-03-08 --
 
附件
.${file.extension}
2024-03-08 --
 
附件
.${file.extension}
2024-03-08 --
4.4 HDFS的Java API操作
附件
.${file.extension}
2024-03-08 --
 
附件
.${file.extension}
2024-03-08 --
 
附件
.${file.extension}
2024-03-08 --
 
附件
.${file.extension}
2024-03-08 --
 
附件
.${file.extension}
2024-03-08 --
4.4.1 实验
视频
.mp4
2023-09-22 13.44MB
 
视频
.mp4
2023-09-22 66.48MB
 
附件
.rar
2023-09-22 34.09KB
 
图片
.PNG
2023-09-22 --
 
图片
.PNG
2023-09-22 --
 
附件
.${file.extension}
2023-09-22 --
4.5 启动已有的hadoop集群
视频
.mp4
2023-09-22 20.65MB
 
视频
.mp4
2024-03-29 38.86MB
 
视频
.mp4
2024-03-29 38.74MB
5.1 MapReduce概述
文档
.pptx
2022-10-17 2.39MB
 
视频
.mp4
2022-10-17 100.10MB
 
视频
.mp4
2022-10-17 26.11MB
 
视频
.mp4
2022-10-17 50.57MB
5.2.1 pom.xml文件
视频
.mp4
2022-10-17 129.18MB
5.2.4 WordReduce类
视频
.mp4
2022-10-17 86.03MB
5.2.5 实验运行步骤
视频
.mp4
2022-10-17 68.43MB
 
附件
.${file.extension}
2022-10-17 --
5.3 倒排索引实验
视频
.mp4
2023-10-09 109.62MB
 
视频
.mp4
2023-10-09 50.81MB
 
视频
.mp4
2023-10-09 132.45MB
 
视频
.mp4
2023-10-09 61.59MB
 
附件
.txt
2023-10-09 124.00Byte
 
附件
.txt
2023-10-09 202.00Byte
 
附件
.txt
2023-10-09 158.00Byte
 
附件
.rar
2023-10-09 7.35KB
6.1 初识Zookeeper
视频
.mp4
2024-03-09 77.06MB
 
视频
.mp4
2024-03-09 85.75MB
 
附件
.${file.extension}
2024-03-09 --
 
附件
.${file.extension}
2024-03-09 --
 
附件
.${file.extension}
2024-03-09 --
 
附件
.${file.extension}
2024-03-09 --
6.2 数据模型
附件
.${file.extension}
2024-03-09 --
 
附件
.${file.extension}
2024-03-09 --
 
附件
.${file.extension}
2024-03-09 --
6.3 Zookeeper的Watcher机制
视频
.mp4
2024-03-09 119.67MB
 
附件
.${file.extension}
2024-03-09 --
 
附件
.${file.extension}
2024-03-09 --
6.4 Zookeeper的选举机制
视频
.mp4
2024-05-11 152.14MB
 
附件
.${file.extension}
2024-05-11 --
 
附件
.${file.extension}
2024-05-11 --
 
附件
.${file.extension}
2024-05-11 --
 
附件
.${file.extension}
2024-05-11 --
 
附件
.${file.extension}
2024-05-11 --
6.5.1 下载安装包
视频
.mp4
2023-10-23 131.52MB
 
视频
.mp4
2023-10-23 83.32MB
 
附件
.gz
2023-10-23 35.93MB
6.5.2 修改zookeeper配置文件
附件
.${file.extension}
2020-10-28 --
6.5.4 配置环境变量
附件
.${file.extension}
2020-10-28 --
7.1 hadoop2.0新特性
视频
.mp4
2024-03-09 75.47MB
7.2.2 安装虚拟机
视频
.mp4
2023-10-27 73.83MB
 
视频
.mp4
2023-10-27 11.12MB
7.2.3 安装JDK
视频
.mp4
2023-10-23 26.11MB
 
附件
.gz
2023-10-27 186.06MB
 
视频
.mp4
2023-10-27 17.53MB
7.2.4 安装zookeeper
视频
.mp4
2023-10-23 29.82MB
 
附件
.${file.extension}
2023-10-23 --
 
附件
.gz
2024-05-07 35.93MB
 
视频
.mp4
2024-05-07 33.01MB
7.2.5 安装hadoop
视频
.mp4
2023-10-23 59.47MB
 
附件
.gz
2023-10-27 577.15MB
 
视频
.mp4
2023-10-27 28.12MB
7.2.5.1 core-site.xml
视频
.mp4
2023-10-27 8.58MB
7.2.5.2 hadoop-env.sh
视频
.mp4
2023-10-27 4.64MB
7.2.5.4 workers
视频
.mp4
2023-10-27 2.27MB
7.2.5.5 mapred-site.xml
视频
.mp4
2023-10-27 2.40MB
7.2.5.6 yarn-site.xml
视频
.mp4
2023-10-27 3.23MB
7.2.6 配置hosts列表
视频
.mp4
2024-05-10 2.53MB
7.2.7 克隆虚拟机
视频
.mp4
2023-10-23 38.88MB
 
附件
.${file.extension}
2023-10-23 --
 
附件
.${file.extension}
2023-10-23 --
 
视频
.mp4
2024-05-11 33.55MB
7.2.8 设置免密登录
视频
.mp4
2024-05-11 22.23MB
 
附件
.${file.extension}
2024-05-11 --
7.2.9 设置hostname
视频
.mp4
2023-10-23 68.69MB
 
视频
.mp4
2024-05-11 8.79MB
7.2.10 修改zookeeper的myid
视频
.mp4
2023-10-27 5.62MB
7.2.11 启动zookeeper集群
视频
.mp4
2023-10-27 31.36MB
7.2.12 journalnode共享存储
视频
.mp4
2023-10-27 11.71MB
7.2.13 设置时钟同步(暂时不设置)
附件
.${file.extension}
2020-11-11 --
7.2.14 启动集群
视频
.mp4
2023-10-27 44.13MB
 
视频
.mp4
2023-10-27 75.01MB
7.2.15 验证ha故障自动转移
视频
.mp4
2023-10-27 34.32MB
 
视频
.mp4
2023-10-27 264.08MB
 
视频
.mp4
2023-10-27 34.41MB
8.1 hive简介
视频
.mp4
2024-03-09 56.53MB
8.2 hadoop伪分布式安装
附件
.gz
2024-05-14 577.15MB
 
附件
.${file.extension}
2024-05-14 --
8.3.1 嵌入模式
视频
.mp4
2023-10-30 102.23MB
 
视频
.mp4
2023-10-30 27.74MB
 
附件
.gz
2024-05-14 311.79MB
 
视频
.mp4
2024-05-14 164.74MB
8.3.2.2 Mariadb安装
视频
.mp4
2024-03-09 76.93MB
 
视频
.mp4
2024-03-09 120.84MB
8.3.2.3 hive安装
视频
.mp4
2023-11-03 130.77MB
 
附件
.gz
2023-11-03 86.65MB
 
附件
.jar
2023-11-03 983.30KB
 
视频
.mp4
2023-11-03 25.59MB
 
附件
.gz
2024-05-27 311.79MB
 
附件
.jar
2024-05-27 983.30KB
8.3.4 hive相关命令
视频
.mp4
2023-11-10 32.49MB
 
视频
.mp4
2023-11-10 41.98MB
 
视频
.mp4
2023-11-10 61.31MB
 
视频
.mp4
2023-11-10 74.03MB
 
视频
.mp4
2023-11-10 12.19MB
 
视频
.mp4
2023-11-10 95.35MB
 
视频
.mp4
2023-11-10 80.28MB
 
视频
.mp4
2023-11-10 28.23MB
 
视频
.mp4
2023-11-10 20.68MB
 
视频
.mp4
2023-11-10 73.93MB
 
视频
.mp4
2023-11-10 19.91MB
8.3.5 hive动态分区
附件
.txt
2023-11-13 310.00Byte
 
视频
.mp4
2023-11-13 32.46MB
 
视频
.mp4
2023-11-13 25.90MB
 
视频
.mp4
2023-11-13 74.06MB
8.3.6 hive桶表
附件
.txt
2023-11-13 126.00Byte
 
视频
.mp4
2023-11-13 131.57MB
9.1 flume单agent安装
附件
.gz
2023-11-17 55.97MB
 
视频
.mp4
2023-11-17 49.61MB
 
视频
.mp4
2023-11-17 53.77MB
 
图片
.PNG
2023-11-17 --
 
图片
.PNG
2023-11-17 --
 
图片
.PNG
2023-11-17 --
 
图片
.PNG
2023-11-17 --
 
视频
.mp4
2023-11-17 36.97MB
 
视频
.mp4
2023-11-17 55.85MB
 
视频
.mp4
2023-11-17 120.76MB
 
附件
.gz
2023-11-17 55.97MB
 
附件
.${file.extension}
2023-11-17 --
 
附件
.${file.extension}
2023-11-17 --
 
附件
.gz
2023-11-17 64.79MB
 
视频
.mp4
2023-11-17 61.18MB
 
视频
.mp4
2023-11-17 192.19MB
9.3 多agent安装
视频
.mp4
2023-11-20 114.03MB
 
视频
.mp4
2023-11-20 225.76MB
 
附件
.gz
2023-11-20 55.97MB
9.4 日志采集案例
视频
.mp4
2023-11-20 91.04MB
 
视频
.mp4
2023-11-20 157.69MB
 
视频
.mp4
2023-11-20 94.25MB
 
视频
.mp4
2023-11-20 76.94MB
10.1 sqoop安装
视频
.mp4
2023-11-24 57.31MB
 
视频
.mp4
2023-11-24 26.94MB
 
视频
.mp4
2023-11-24 35.92MB
 
视频
.mp4
2023-11-24 88.60MB
 
附件
.gz
2023-11-24 17.12MB
 
附件
.jar
2023-11-24 --
 
附件
.${file.extension}
2023-11-24 --
 
附件
.gz
2024-03-09 17.12MB
 
附件
.jar
2024-03-09 --
 
视频
.mp4
2024-03-09 21.95MB
 
视频
.mp4
2024-03-09 67.58MB
 
视频
.mp4
2024-03-09 94.23MB
 
视频
.mp4
2024-03-09 21.43MB
 
附件
.${file.extension}
2024-03-09 --
10.3 mysql表导入HDFS
视频
.mp4
2023-11-24 159.83MB
10.4 HDFS导出mysql
视频
.mp4
2023-11-24 106.32MB
 
视频
.mp4
2023-11-24 122.89MB
10.5 mysql导入hive
视频
.mp4
2023-11-27 67.84MB
 
视频
.mp4
2023-11-27 46.81MB
 
视频
.mp4
2023-11-27 164.80MB
11.1 系统架构设计
视频
.mp4
2024-03-09 82.90MB
 
附件
.${file.extension}
2024-03-09 --
11.2 使用flume搭建日志采集系统
视频
.mp4
2024-03-09 219.62MB
 
附件
.log
2024-03-09 5.84MB
 
附件
.properties
2024-03-09 1.21KB
11.3 数据预处理
视频
.mp4
2024-03-09 276.00MB
11.3.1 新建weblog项目
视频
.mp4
2024-03-09 272.25MB
 
视频
.mp4
2024-03-09 87.19MB
 
附件
.${file.extension}
2024-03-09 --
 
附件
.${file.extension}
2024-03-09 --
 
附件
.${file.extension}
2024-03-09 --
 
附件
.${file.extension}
2024-03-09 --
11.3.3 WebLogBean
视频
.mp4
2024-03-09 107.85MB
11.3.4 WeblogPreProcess
视频
.mp4
2024-03-09 184.70MB
11.3.5 WebLogParser
视频
.mp4
2024-03-09 192.51MB
11.3.6 使用maven打包项目
附件
.log
2024-03-09 5.84MB
 
附件
.rar
2024-03-09 8.08KB
 
视频
.mp4
2024-03-09 133.02MB
 
附件
.${file.extension}
2024-03-09 --
13.1 常用软件
附件
.exe
2023-09-01 619.26MB
 
附件
.iso
2023-09-01 918.00MB
提示框
提示框
确定要报名此课程吗?
确定取消

京ICP备10040544号-2

京公网安备 11010802021885号