《大数据技术实战案例教程》-授课计划

《大数据技术实战案例教程ISBN978-7-5606-6679-2》授课计划编写者：徐鲁辉******教师授课计划20**—20**学年第*学期课程名称：大数据技术原理及应用课程性质：************编写教师：******职称：******总学时：48其中理论学时：32实验学时：16其它学时：0考核方式：考试教材名称：大数据技术实战案例教程主编：徐鲁辉出版社：西安电子科技大学出版社适用专业、年级：******专业****级要求：1.授课计划由教研室主任（团队负责人）召集相关主讲教师集体研究后编写；2.每个授课单元（2学时）的内容占一格，表格不够可另加附页；3.任课教师须严格按授课计划教学，进度提前或推迟超过4学时视为教学事故；4.“讲课”、“实验”、“其它”的填写，应在相应栏画“√”，如果有其它教学内容必须在备注栏进一步说明；“课程性质”填写公共必修课程、公共选修课程、数学与自然科学类课程、工程基础类课程、专业基础类课程、专业必修课程、专业方向课程、专业选修课程、专业实践环节等。5.授课计划经审核后使用，报院系教务科备案，授课教师人手一份。教研室主任签字:学院(中心)负责人签字:教学单位盖章序号周周课次讲课实验其它教学内容备注（如课堂讨论、习题等）章节（章节名称、教学内容提要、实验的名称、课堂讨论的题目）111√11.1-1.3开学第一课1.自我介绍2.课程地位、先修及后续课程3.教学目标及知识图谱4.课时分配（理论+实验）及进度、教材、参考资料、上机软件5.考核方式：平时+实验+期末6.学堂云、雨课堂使用方法第1章部署全分布模式Hadoop集群1.1初识Hadoop1.2Hadoop生态系统1.3Hadoop体系架构头脑风暴，问卷调查，在线测试Linux、Java、Python、数据库等先修知识212√11.4第1章部署全分布模式Hadoop集群1.4Hadoop部署要点1.4.1Hadoop运行环境1.4.2Hadoop运行模式1.4.3Hadoop配置文件章节测试1预习实验1指导书，自行实践部署Hadoop集群321√11.5实验1部署全分布模式Hadoop集群实验报告1431√22.1-2.3第2章实战HDFS2.1初识HDFS2.2HDFS体系架构2.3HDFS文件存储原理2.3.1数据块Block2.3.2副本存放策略2.3.3数据读取2.3.4数据写入532√22.4-2.5第2章HDFS实战2.4HDFS接口2.4.1HDFSWebUI2.4.2HDFSShell2.4.3HDFSJavaAPI2.5HDFS高可靠性机制2.5.1HDFSNameNodeHA高可用机制2.5.2HDFSNameNodeFederation联邦机制章节测试2641√22.6实验2HDFS实战实验报告2751√33.1-3.3第3章MapReduce编程3.1初识MapReduce3.2MapReduce作业执行流程3.3MapReduce入门案例WordCount剖析3.3.1TokenizerMapper类3.3.2IntSumReducer类3.3.3main()函数3.3.4向Hadoop集群提交并运行WordCount852√33.4-3.5第3章MapReduce编程3.4MapReduce数据类型3.5MapReduce接口3.5.1MapReduceWebUI3.5.2MapReduceShell3.5.3MapReduceJavaAPI章节测试3961√33.6实验3MapReduce编程实验报告31071√44.1-4.3第4章部署ZooKeeper集群和ZooKeeper实战4.1初识ZooKeeper4.2ZooKeeper工作原理4.3ZooKeeper数据模型1172√44.4-4.5第4章部署ZooKeeper集群和ZooKeeper实战4.4ZooKeeper部署要点4.4.1ZooKeeper运行环境4.4.2ZooKeeper运行模式4.4.3ZooKeeper配置文件4.5ZooKeeper接口4.5.1ZooKeeper四字命令4.5.2ZooKeeperShell4.5.3ZooKeeperJavaAPI章节测试41281√44.6实验4部署ZooKeeper集群和ZooKeeper实战实验报告41391√55.1-5.5第5章部署本地模式Hive和Hive实战5.1初识Hive5.2Hive体系架构5.3Hive数据类型5.4Hive数据模型5.5Hive函数1492√55.6-5.7第5章部署本地模式Hive和Hive实战5.6Hive部署要点5.6.1Hive运行环境5.6.2Hive部署模式5.6.3Hive配置文件5.7Hive接口5.7.1HiveShell5.7.2HiveWebInterface（HWI）5.7.3HiveAPI章节测试515101√55.8实验5部署本地模式Hive和Hive实战实验报告516111√66.1-6.3第6章Flume实战6.1初识Flume6.2Flume体系架构6.3Flume部署要点6.3.1Flume运行环境6.3.2Flume运行模式6.3.3Flume配置文件17112√66.4第6章Flume实战6.4FlumeShell常用命令章节测试618121√66.5实验6Flume实战实验报告619131√77.1-7.3第7章Kafka实战7.1初识Kafka7.2Kafka体系架构7.3Kafka部署要点7.3.1Kafka运行环境7.3.2Kafka运行模式7.3.3Kafka配置文件20132√77.4第7章Kafka实战7.4KafkaShell常用命令章节测试721141√77.5实验7Kafka实战实验报告722151√88.1-8.4第8章Spark集群部署和基本编程8.1初识Spark8.1.1Spark简介8.1.2Spark对比HadoopMapReduce8.2Spark生态系统8.3Spark运行架构8.4RDD的设计与操作8.4.1RDD简介8.4.2RDD数据存储模型8.4.3RDD创建8.4.4RDD操作23152√88.5-8.6第8章Spark集群部署和基本编程8.5Spark部署要点8.5.1Sp