大数据项目实战第2章 搭建大数据集群环境 -教学设计

黑马程序员《大数据项目实战》教学设计课程名称:大数据项目实战授课年级年级20xx授课学期学年第一学期20xx教师找名某某老师年月日201991黑马程序员传智教育旗下高端教育品牌IT第2章搭建大数据集群环境10课时课题名称计划学时“磨刀不误砍柴工”，要想顺利完成本项目各个步骤实验，首先必须得学会搭建一个属于内容分析自己的大数据集群环境本章将针对项目所应用到相关技能搭建大数据集群环境

1、了解虚拟机的安装和克隆

2、熟悉Linux系统的网络配置和SSH配置教学目标及

3、掌握Hadoop集群的搭建和配置基本要求

4、掌握Hive安装

5、掌握Sqoop的安装

1.Hadoop集群的搭建和配置教学重点

2、Hive安装

3、Sqoop安装1Hadoop集群的搭建和配置教学难点

2、虚拟机安装与配置

3、Hive安装教学方式教师课堂教学要以讲演法讲授为主，并结合多媒体进行教学第一课时（虚拟机安装和克隆、系统的网络配置、服务配置）Linux SSH

一、回顾第一章内容，讲解集群构建的准备工作Hadoop回顾第一章学习知识，引出本节主题

1.带领学生回顾第一章与项目相关的内容，要想顺利开展后续项目内容，首先得学会搭建基于Hadoop的大数据集群环境因此，本章将针对构建大数据集群环境的准备工作进行详细讲解明确学习目标

2.（I）了解虚拟机安装

（2）了解虚拟机克隆教学过程

（3）熟悉Linux系统网络配置

（4）熟悉SSH服务配置

二、进行重点知识讲解虚拟机安装

1..教师可以参考课件以讲演法的方式讲解虚拟机的安装

（1）先介绍创建虚拟机的步骤；

（2）使用ISO镜像文件来初始化Linux系统；

（3）通过重启虚拟机的引导系统完成虚拟机安装虚拟机克隆

2.教师可以参考课件以讲演法的方式讲解虚拟机的克隆先介绍虚拟机的克隆有两种方黑马程序员传智教育旗下©高端教育品牌一样的教育，不一样的品I IT质式，再具体介绍一下这两种克隆的方式，最后针对完整克隆方式进行分步骤演示克隆虚拟机

3.Linux系统网络配置教师可以参考课件以讲演法的方式讲述Linux系统网络配置先介绍虚拟机的主机名的配置和IP地址的映射配置，再介绍配置Linux系统的网络参数的步骤，最后通过重启Linux系统，执行“ifconfig”指令查看IP的配置是否生效，在执行“ping www.baidu.com”指令检测网络连接是否正常，若连接正常，说明Linux系统网络配置成功，否则不成功

4.SSH服务配置教师可以参考课件以讲演法的方式讲述SSH服务配置1先介绍SSH服务的作用；2介绍SSH远程登录功能和SSH免密登录功能的配置；3通过在hadoopOl主机上输入“ssh hadoop02”指令访问hadoop02主机做测试，若是不再需要输入密码，则说明hadoopOl到hadoop02的单向SSH服务配置成功，需要说明的是Hadoop集群的所有机器上都需要进行SSH服务配置

三、归纳总结，随堂练习，布，

1.对课堂上讲解的知识点进行总结

2.让学生自己动手操作安装虚拟机、克隆虚拟机、配置Linux系统的网络以及SSH服务，以此来巩固本节的学习内容第二课时上机操作上机一搭建大数据集群环境的安装准备按照教材中

2.1小节的内容及在教师辅导下完成第三课时集群部署模式、安装、安装Hadoop JDKHadoop

一、回顾前两节课内容，讲述集群搭建Hadoop

1.对前两节课遇到的问题进行答疑

2.回顾上节课内容，引出本节课的主题通过前两节课的学习与实际操作，学生完成了大数据集群环境搭建的准备工作本节课将针对Hadoop集群的构建进行详细讲解.

3.明确学习目标1熟悉Hadoop集群部署模式2掌握JDK安装3掌握Hadoop安装

二、进行重点知识的讲解

1.Hadoop集群部署模式教师可以参考课件以讲演法的方式来讲述Hadoop集群部署模式1先介绍Hadoop集群部署一共有三种方式；2然后对每一种部署模式进行详细介绍；3最后针对完全分布式模式安装、配置Hadoop集群进行介绍.

2.JDK安装教师可以参考课件以讲演法的方式来讲述JDK安装1先介绍安装JDK的原因，由于Hadoop是由Java语言开发的，Hadoop集群的使用依赖于Java环境，因此在安装Hadoop集群前，需要先安装并配置好JDK；2再介绍JDK下载的路径和安装的步骤；3接着介绍配置JDK环境变量；4最后通过执行“java-version”验证JDK安装、配置是否成功，若出现JDK的版本则说明JDK安装、配置成功

3.Hadoop安装教师可以参考课件以讲演法的方式讲述Hadoop安装1先介绍Hadoop的下载路径和安装；2再介绍配置Hadoop环境变量；3介绍通过执行“hadoop version”指令查看Hadoop安装是否成功，若出现Hadoop的版本号，则说明Hadoop安装成功

三、归纳总结，随堂练习，布

1.对课堂上讲解的知识点进行总结

2.让学生自己动手操作安装JDK和Hadoop,以此来巩固本节的学习内容第四课时集群配置、集群测试、通过界面查看运行状态Hadoop HadoopUI Hadoop

一、回顾上节课内容,

1.对上节课留的作业进行答疑

2.回顾上节课内容，引出本节课的主题上一节中，主要讲解了Hadoop集群部署模式、JDK和Hadoop的安装本节将针对Hadoop集群的配置、Hadoop集群测试以及通过UI界面查看Hadoop运行状态进行详细讲解

3.明确学习目标1掌握Hadoop集群配置2掌握Hadoop集群测试3了解通过UI界面查看Hadoop运行状态

二、进行重点知识的讲解

1.Hadoop集群配置教师可以参考课件以讲演法的方式来讲述Hadoop集群配置1介绍配置文件的重要性，通过对Hadoop提供的只读配置文件和自定义配置文件进行相关的修改，来保证Hadoop集群可以协调运行；2接着针对每个配置文件进行详细介绍；3介绍Hadoop集群的配置，先通过修改hadoop-env.sh、core-site.xml、hdfs-site.xml mapred-site.xml yarn-site.xml以及slaves文件来配置Hadoop集群主节点；再将集群主节点的配置文件分发到其他子节点；4在hadoopOl、hadoop02以及hadoop03节点上分别执行“source/etc/profile”指令，使得配置文件生效；5至此，Hadoop集群的安装配置以及完成

2.Hadoop集群测试教师可以参考课件以讲演法的方式来讲述Hadoop集群测试1介绍完成Hadoop集群的安装和配置暂且不能启动集群，需要对文件系统进行初始化后才能启动集群，因此需要对主节点的文件系统进行格式化处理介绍执行格式化处理的指令后，若出现successfully formatted”信息则说明格式化文件系统成功，可以正常启动Hadoop集群了2介绍启动和关闭Hadoop集群有两种方式和过两种方式分别演示启动和关闭Hadoop集群

3.通过UI界面查看Hadoop集群运行状态教师可以参考课件以讲演法的方式来讲述通过UI界面查看Hadoop集群运行状态1先介绍Hadoop集群启动后开放的端口号50070和8088；2在本地宿主机的hosts文件中添加集群服务IP映射，以便后续通过UI界面查看Hadoop的运行状态；3关闭Hadoop集群所有节点的防火墙；4最后通过宿主机的浏览器分别访问:50070和1:8088查看HDFS和YARN集群状态

三、归纳总结，随堂练习，布L”,

1.对课堂上讲解的知识点进行总结

2.让学生自己动手进行Hadoop集群配置、Hadoop集群测试以及通过UI界面查看Hadoop集群运行状态的操作，以此来巩固本节的学习内容第五-六课时上机练习上机二，Hadoop完全分布式集群搭建按照教材中

2.2小节的内容及在教师辅导下完成第七课时的安装模式、的安装Hive Hive黑马程序员传智教育旗下©高端教育品牌一样的教育，不一样的品质I IT

一、回顾前几节课内容,

1.对Hadoop完全分布式集群搭建遇到的问题进行答疑

2.回顾Hadoop完全分布式集群搭建内容，引出本节课的主题在前几节中，主要讲解了搭建大数据集群环境的准备工作和Hadoop完全分布式集群搭建内容，接下来在已有环境的基础上实现Hive的安装

3.明确学习目标

（1）了解Hive的安装模式

（2）掌握Hive的安装与配置

二、进行重点知识的讲解

1.Hive安装模式讲解教师对Hive的三种安装模式，嵌入模式、本地模式、远程模式进行讲解

2.Hive安装

（1）教师在虚拟机中演示安装Mysql数据库为后续安装本地模式Hive提供外部数据库储存元数据

（2）教师在虚拟机中安装Hive演示Hive的嵌入模式

（3）教师在虚拟机中对Hive进行配置实现Hive的本地模式安装

三、归纳总结，随堂练习，布

11.对课堂上讲解的知识点进行总结

2.让学生自己动手进行Hive安装配置的操作，以此来巩固本节的学习内容第八课时（上机练习）上机三Hive安装配置按照教材中

2.3小节的内容及在教师辅导下完成第九课时（安装，上机操作）Sqoop

一、回顾前几节课内容，.

1.对Hive安装遇到的问题进行答疑

3.回顾Hive安装内容，引出本节课的主题在前几节中，我们完成了Hadoop和Hive的安装，本节课将安装Sqoop数据迁移工具实现将Hadoop和Hive中储存的数据内容转移到关系型数据库Mysql中，为实现web程序的可视化数据做准备

4.明确学习目标

（1）掌握Sqoop的安装

二、进行重点知识的讲解

1.Sqoop安装配置教师从官网下载安装包、逐步演示Sqoop安装过程，参考教材

2.4小节演示讲解

2.上机操作按照教材中

2.4小节的内容及在教师辅导下完成

三、归纳总结，随堂练习，布置作业

1.对课堂上讲解的知识点进行总结第十课时（大数据集群环境，上机操作）检查每个学生集群环境的搭建情况，解决搭建过程中遇到的问题，使学生熟练掌握整个大数据集群的搭建过程思考题和习题教学后。