01_Hadoop环境搭建

01_Hadoop环境搭建

Hadoop环境搭建

环境:

VMware® Workstation 14 Pro

Centos7.0

Hadoop 2.7.5

Xshell6

jdk8.0

一、搭建Hadoop虚拟主机

1 创建虚拟机,命名位master(需要linux基础,和虚拟机使用基础)

2 上传jdk 、Hadoop2.7.5

01_Hadoop环境搭建

3 安装jdk

01_Hadoop环境搭建

4 验证jdk安装是否正确:

01_Hadoop环境搭建

 5、解压hadoop

01_Hadoop环境搭建

6、解压后,重命名hadoop

01_Hadoop环境搭建

7、配置hadoop

进入etc目录

01_Hadoop环境搭建

8、配置hadoop-env.sh 

01_Hadoop环境搭建

编辑hadoop-env.sh 

01_Hadoop环境搭建

修改JAVA_HOME:export  JAVA_HOME指向自己的Java安装目录下的default目录

01_Hadoop环境搭建

保存退出–:wq

9、将hadoop的执行命令路径加入环境变量:编辑/etc/profile文件

01_Hadoop环境搭建

加入Hadoop命令路径

01_Hadoop环境搭建

重新加载profile文件

source /etc/profile

 检验hadoop安装是否正确

输入hadoop

01_Hadoop环境搭建
当看到以上输出时,此时hadoop搭建成功

二、搭建Hadoop集群

采用克隆的方式

01_Hadoop环境搭建

直接下一步

01_Hadoop环境搭建

下一步:选择完整克隆

01_Hadoop环境搭建

直接下一步,完成。

运用同样的方式克隆三台从机,一次命名位slave1,slave2,slave3,最终的结构如下图

01_Hadoop环境搭建

同在xshell中创建所有虚拟机的session连接。

至此,环境搭建完成。

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。

发布者:全栈程序员-用户IM,转载请注明出处:https://javaforall.cn/111293.html原文链接:https://javaforall.cn

【正版授权,激活自己账号】: Jetbrains全家桶Ide使用,1年售后保障,每天仅需1毛

【官方授权 正版激活】: 官方授权 正版激活 支持Jetbrains家族下所有IDE 使用个人JB账号...

(0)


相关推荐

  • PyTorch源码解读之torchvision.models「建议收藏」

    PyTorch源码解读之torchvision.models「建议收藏」PyTorch框架中有一个非常重要且好用的包:torchvision,该包主要由3个子包组成,分别是:torchvision.datasets、torchvision.models、torchvision.transforms。这3个子包的具体介绍可以参考官网:http://pytorch.org/docs/master/torchvision/index.html。具体代码可以参考github:

  • aardio界面库_aardio有什么用

    aardio界面库_aardio有什么用之前想写一个图形界面化工具,了解了MFC、Qt,最后选了PyQt4,毕竟自己对python比较了解一些。后来同事推荐了一个aardio工具,发现确实很简便,不用什么乱七八糟的配置,安装包只有5.5M,安装编译,使用也简单。但也有不好的地方,因为使用比较少,所以有很多问题没法找到答案,这也是新语言的一种必然的过程。Anyway,膜拜一下大神。aardio官方社区:http://bbs.aardio….

  • Socket无限SocketTimeoutException真凶–WLAN助手

    Socket无限SocketTimeoutException真凶–WLAN助手看到标题你可能不知道我说的是什么鬼东西,但是如果你有类似的经历的话,那么恭喜你,也恭喜我自己,终于解决这个问题了。用过小米、华为等手机的都知道,当我们连接上一个不能上网的WIFI时,系统都会友好的给出“此WLAN无法访问互联网,请更换网络/切换为移动数据网络”等类似的提示,今天我就说下本人在这里面遇到的坑。背景:有个Android项目需要连接硬件设备的WIFI,然后通过socket进行通信…

    2022年10月21日
  • Scrapy爬虫框架_nodejs爬虫框架对比

    Scrapy爬虫框架_nodejs爬虫框架对比一、爬虫框架Scrapy的整体架构:ScrapyEngine(引擎):负责Spider、ItemPipeline、Downloader、Scheduler中间的通讯、信号、数据传递等。Spider(爬虫):负责处理所有Responses,从中分析提取数据,获取Item字段需要的数据,并将需要跟进的URL提交给引擎,再次进入Scheduler(调度器)。(DTO数据传输对象)Scheduler(调度器):它负责接受引擎发送过来的Request请求,并按照一定的方式进行整理排列,入队,当引.

  • 大疆网上测评题库_大疆在线测评 – 逻辑题「建议收藏」

    大疆网上测评题库_大疆在线测评 – 逻辑题「建议收藏」收到大疆测评的邮件,在知乎百度搜了一圈也没搜到题目,只好直接去测评了。我的测评是90道题,其中逻辑题挺烧脑,出现了6道逻辑题,幸好之前看过逻辑学三段论,都能答对。2-7是我测评中出现的题,一模一样,今后是否一样就不能确保了,仅供参考。1.所有的老虎会动;一些动物是老虎;因此,一些动物会动。参考解:True2.所有的宗教狂热分子都偏执;所有偏执的人都是种族主义者;因此,所有的种族主义者都是宗教狂…

  • Runnable接口详细详解「建议收藏」

    Runnable接口详细详解「建议收藏」创建线程对象,默认有一个线程名,以Thread-开头,从0开始计数构造函数Thread()Thread-0Thread-1Thread-2其他构造方法Thread(Runnabletarget)如果在构造thread的时候没有传递Runnable或者没有复写Thread的run方法,该thread将不会调用任何的东西,如果传递了Runnable接口的实例,后者复写了Thread的run方法,则会执行该方法的逻辑单元(逻辑代码)publicclassCreateThread2..

发表回复

您的电子邮箱地址不会被公开。

关注全栈程序员社区公众号