Hadoop平台搭建与应用（第2版）（微课版）-课后习题及答案 项目1

项目1认识大数据PAGE13Hadoop平台搭建与应用PAGE12课后练习1.简述Docker的常用命令及其作用？dockerpull拉去或更新指定的镜像dockerpush将镜像推送到远程仓库dockerrm删除容器dockerrmi删除镜像dockerimages列出所有镜像dockerps列出所有容器2.本地的镜像文件存放在那些目录中？如何更改Docker的默认存储设置？（1）Docker相关的本地资源存在/var/lib/docker/目录下，其中container目录存放容器信息，graph目录存放镜像信息，aufs目录下存放具体的镜像底层文件。（2）Docker的默认存放位置是/var/lib/docker，如果希望将Docker的本地文件存储到其他分区，可以使用Linux软连接的方式来实现。3.Docker的配置文件放在哪里？Ubuntu系统下Docker的配置文件是/etc/default/docker；CentOS系统配置文件存放在/etc/sysconfig/docker。4.hadoop的三种运行模式是什么？它们的主要区别是？(1)独立（本地）运行模式：无需任何守护进程，所有的程序都运行在同一个JVM上执行。在独立模式下调试MR程序非常高效方便。所以一般该模式主要是在学习或者开发阶段调试使用。(2)伪分布式模式：Hadoop守护进程运行在本地机器上，模拟一个小规模的集群，换句话说，可以配置一台机器的Hadoop集群,伪分布式是完全分布式的一个特例。(3)完全分布式模式：Hadoop守护进程运行在一个集群上。所谓分布式要启动守护进程，即：使用分布式hadoop时，要先启动一些准备程序进程，然后才能使用比如start-dfs.sh,start-yarn.sh。而本地模式不需要启动这些守护进程。5.简述Hadoop的组件？

Hadoop是一个开源分布式计算平台架构，其组件主要包括：（1）HDFS（分布式文件管理系统）

（2）MapReduce（分布式计算框架）

（3）Hive（基于Hadoop的数据仓库）

（4）Pig（基于Hadoop的数据流系统）

（5）HBase（一个分布式面向列的数据库）

（6）Spark（快速和通用计算的Hadoop数据引擎）

（7）ZooKeeper（分布式协作服务）6.Hadoop2.x的守护进程有哪些？（1）NameNode（元数据服务器）

主节点，存储文件的元数据（文件名，文件目录结构，文件属性-生成时间，副本数，文件权限），以及每个文件的块列表和块所在的DataNode等。（2）SecondaryNameNode（辅助元数据服务器）

用来监控HDFS状态的辅助后台程序，每隔一段时间获取HDFS元数据快照。（3）DataNodes（块存储）

在本地文件系统存储文件块数据，以及块数据校验（4）ResourceManageResourceManage是一个中心的服务，它做的事情是调度、启动每一个Job所属的ApplicationMaster、另外监控ApplicationMaster的存在情况。ResourceManager负责作业与资源的调度，接收JobSubmitter提交的作业，按照作业的上下文（Context）信息，以及从NodeManager收集来的状态信息，启动调度过程，分配一个Contain