首页 课程主页
课程分享  
大数据开发技术Hadoop
主讲教师 陈军/安徽商贸职业技术学院
学习人数 526
开课周期 2023年02月02日 ~ 2023年06月30日
教学进度
预报名
进行中
已结课
课程期次 共 22 周
  • 课程详情
  • 教辅教材
  • 课程评价
  • 常见问题

在分析大数据平台运维工程师岗位职业能力和1+X大数据平台构建(初级)职业技能认证的基础上确定课程的能力目标,引领学生掌握大数据平台及其生态组件系统的安装、配置、管理、维护等技能,对大数据平台系统有一个全面的了解,奠定在大数据平台系统上作进一步应用开发的基础。通过虚拟机软件,采用讲、练、实战结合的方式完成包括Linux系统的安装和基础配置、Hadoop集群部署与应用、HBase数据库部署与应用、Hive数据仓库部署与应用、Sqoop组件安装配置、Flume组件安装配置等任务,循序渐进地提升职业技能,增强就业竞争力以胜任大数据平台运维岗位工作

课程概述

在分析大数据平台运维工程师岗位职业能力和1+X大数据平台构建(初级)职业技能认证的基础上确定课程的能力目标,引领学生掌握大数据平台及其生态组件系统的安装、配置、管理、维护等技能,对大数据平台系统有一个全面的了解,奠定在大数据平台系统上作进一步应用开发的基础。通过虚拟机软件,采用讲、练、实战结合的方式完成包括Linux系统的安装和基础配置、Hadoop集群部署与应用、HBase数据库部署与应用、Hive数据仓库部署与应用、Sqoop组件安装配置、Flume组件安装配置等任务,循序渐进地提升职业技能,增强就业竞争力以胜任大数据平台运维岗位工作

课程大纲
  • 单元1 大数据的基本概念和特点
  • 单元2 Linux系统的安装和基础配置
    • Centos7虚拟机的创建和系统安装
    • Centos7虚拟机的基本操作(一)
    • Centos7虚拟机的基本操作(二)
    • Centos7基本命令的使用
    • 使用Centos7搭建基本vsftp服务
  • 单元3 Hadoop系统的伪分布式和集群部署
    • Hadoop系统的基本结构和特点
    • Hadoop伪分布式部署环境准备
    • Hadoop伪分布式部署
    • Hadoop分布式部署环境准备
    • Hadoop集群NTP同步
    • Hadoop分布式部署
    • Hadoop平台的基本使用
    • 期中考试
  • 单元4 HBase数据库的部署与应用
    • HBase数据库的基本结构特点
    • HBase伪分布式部署
    • ZooKeeper
    • HBase集群zookeeper部署1
    • HBase集群zookeeper部署2
    • HBase集群zookeeper部署3
    • HBase集群zookeeper部署4
    • HBase集群zookeeper部署5
    • HBase集群zookeeper部署6
    • HBase集群zookeeper部署7
    • HBase集群zookeeper部署8
    • HBase分布式部署
    • HBase基本应用
    • HBase表操作实例
    • HBase备份
    • HBase快照
  • 单元5 Hive数据仓库的安装与应用
    • Hive
    • MySQL数据的安装1
    • MySQL数据的安装2
    • Hive数据仓库的安装部署1
    • Hive数据仓库的安装部署2
    • 库操作和表操作
    • Hive数据仓库的基本应用1
    • Hive数据仓库的基本应用2
    • Hive数据仓库的基本应用3
    • Hive数据仓库的基本应用4
    • Hive数据仓库的基本应用5
    • Hive数据仓库的基本应用6
  • 单元6 Sqoop组件安装配置与应用
    • Sqoop
      • Sqoop1
      • Sqoop2
    • sqoop安装
    • 使用Sqoop组件进行数据传递1
    • 使用Sqoop组件进行数据传递2
    • 使用Sqoop组件进行数据传递3
    • 配置sqoop环境变量
    • sqoop增量导入数据到hive
    • sqoop数据导入导出-mysql 表中的数据导入到 hdfs
    • sqoop数据导入导出-hdfs 上的数据导出到 mysql 表中
  • 单元7 Flume组件安装配置与应用
    • Flume
    • Flume组件的安装部署
    • 使用Flume组件进行消息发送和接收1
    • 使用Flume组件进行消息发送和接收2
    • 使用Flume组件进行消息发送和接收3
    • 使用Flume组件进行消息发送和接收4
    • 使用Flume组件进行消息发送和接收5
授课目标
预备知识
配套教材
  • 大数据平台运维(初级1+X证书系列教材)
    新华三技术有限公司
    电子工业出版社
参考教材
0.0

0 条评价

本次开课 查看全部
5.0

1 条评价

本次开课 查看全部
授课教师
安徽商贸职业技术学院
2024 e会学 皖ICP备05002528号-14 皖公网安备 34010402700145号 Copyright 安徽省网络课程学习中心版权所有