博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
Linux的企业-Hadoop的多节点配置
阅读量:7067 次
发布时间:2019-06-28

本文共 650 字,大约阅读时间需要 2 分钟。

一.配置环境

redhat6.5

server1 172.25.29.1  hadoop master nfs

server2 172.25.29.2  nfs

server3 172.25.29.3  nfs

server4 172.25.29.4  nfs

server5 172.25.29.5  高可用备机 nfs

使用 nfs 共享同步配置文件

二.Hadoop单点配置

1.安装hadoop和jdk

使用hadoop用户运行

2.配置hadoop在java上的运行环境

3.算法模块测试

output生成的数据

4.配置单点hadoop

5.给hadoop设置用户密码,设置主机之间免密

6.设置储存节点为1个

7.格式化hdfs

8.启动hadoop

9.设置查看进程的java的命令jps的运行路径

10.查看节点运行状态,测试

11.以文本模式查看结果

创建目录

四.多节点hadoop配置

使用 nfs 共享同步配置文件

1.server1配置nfs服务

2.在server2至server5安装nfs,并新建hadoop用户,并启动rpcbind

3.建立主机之间免密

4.hadoop集群配置

5.格式化hdfs

6.启动hadoop集群

查看节点2,3和状态

7.登陆web 172.25.29.1:50070

8.启动集群管理资源模块

      本文转自一百个小排 51CTO博客,原文链接:http://blog.51cto.com/anfishr/1975948,如需转载请自行联系原作者
你可能感兴趣的文章
Flutter-基础认知
查看>>
归档 OmniFocus 中已完成的任务到 印象笔记 Evernote
查看>>
移动端布局 全套解决方案 (附代码)
查看>>
ObjC 多线程简析(二)- os_unfair_lock的类型和自旋锁与互斥锁的比较
查看>>
结构模式 01-外观模式(facade)
查看>>
源码阅读:AFNetworking(十二)——UIButton+AFNetworking
查看>>
Kubernetes Helm入门指南
查看>>
记使用hexo搭建个人博客(二)
查看>>
https理论与实践
查看>>
程序员在简书|努力奔跑
查看>>
用commander做一个自己的eslint脚手架
查看>>
iOS下JS与OC互相调用(五)--UIWebView + WebViewJavascriptBridge
查看>>
学习报告
查看>>
纵享丝滑滑动切换的周月日历,水滴效果,丰富自定义日历样式,仿小米日历(ViewDragHelper实现)...
查看>>
C++检索
查看>>
优化体系结构 - 数据外置减少中间表
查看>>
PAT A1120
查看>>
如何在 Titanic Kaggle Challenge 中获得0.8134分
查看>>
前端新手秘籍丶
查看>>
Spring Security OAuth 个性化token
查看>>