版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
大数据平台搭建和开发学习计划数据处理平台搭建性能开发性能检索第一章大数据平台搭建章节目录1.简介
2.Hadoop平台搭建3.MapReduce并行计算4.Spark系统Slaver1&Slaver2在启动Hadoop集群之前,我们需要生效系统的环境变量:#source/etc/profile在HadoopMaster成功启动集群后,在终端执行jps命令,在打印结果中会看到集群中运行的进程,这些进程表示主节点进程启动成功。#jps在启动Hadoop集群之前,我们需要生效系统的环境变量:#source/etc/profile格式化文件系统格式化命令如下,该操作需要在HadoopMaster节点上执行:#hdfsnamenode-format如果出现Exception/Error,则表示出问题。使用start-all.sh启动Hadoop集群,首先进入Hadoop安装主目录,然后执行启动命令:#cdhadoop-2.7.0/sbin/#./start-all.sh执行命令后,提示出入yes/no时,输入yes。在HadoopMaster的终端执行jps命令,在打印结果中会看到master上运行的进程,这些进程表示主节点进程启动成功。#jpsMasterHadoop平台搭建 Hadoop集群的启动Hadoop平台搭建通过WEB页面查看集群状态在浏览器输入http://master:50070/,检查namenode和datanode是否正常。Hadoop平台搭建通过WEB页面查看集群状态在浏览器输入http://mast
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 航空导航系统购销条款
- 学生作业保证书评价案例
- 优惠石材购销合同
- 版监理合同协议书示例
- 空心砖行业代理采购协议
- 全面档案保管协议
- 建筑弱电系统及设备安装合约
- 精简现代家居购销合同
- 方木购销合同书范本
- 硫酸钾化肥订购单
- 2023年副主任医师(副高)-内科学(副高)考试历年真题摘选带答案
- 化学运行副值安全职责
- 产品交付管理制度的规定
- ICU重症科品管圈成果汇报-降低中心静脉导管感染率课件
- 2023年高校教师个人年终工作总结参考范文(二篇)
- 心脏动脉静脉淋巴
- 颌骨囊肿-牙源性囊肿
- GB/T 3880.3-2006一般工业用铝及铝合金板、带材第3部分:尺寸偏差
- 小学2023学年春期教育技术装备工作计划(2篇)
- 兰州牛肉面攻略课件
- 初中九年级历史下册第10课《凡尔赛条约》和《九国公约》教案
评论
0/150
提交评论