01

https://hadoop.apache.org/#

SRE实战 互联网时代守护先锋,助力企业售后服务体系运筹帷幄!一键直达领取阿里云限量特价优惠。

BD基础 随笔 第1张

BD基础 随笔 第2张

 

 

 

02

BD基础 随笔 第3张

 

 

03

BD基础 随笔 第4张

 

 

04

BD基础 随笔 第5张

元数据是描述文教的一些数据   stat 文件名     查看该文件元数据

 

05

BD基础 随笔 第6张

 

 BD基础 随笔 第7张

BD基础 随笔 第8张

 

 

 

 

06BD基础 随笔 第9张

BD基础 随笔 第10张

 

 

 

07

ip已配好   4节点的jdk已安装   第一个节点下载了Hadoop3.1.1  免密登陆也完成了

BD基础 随笔 第11张

BD基础 随笔 第12张

SSH免密登录设置

(1)切换到用户hadoop

#su  hadoop    

(2)在集群所有节点上生成公钥和私钥。

$ ssh-keygen  –t  rsa  

将在~/目录下自动创建目录.ssh,内部创建id_rsa(私钥)和id_rsa.pub(公钥)。

(3)在集群的各个节点上执行下列命令:

$cd  ~/.ssh  

$ssh-copy-id  -i  id_rsa.pub  hadoop@***

 

注意:分别用集群中各个节点名称(包括自身)替换***

(4)测试SSH免密码登录。

$ssh  hadoop@***

测试成功后,可以执行exit命令结束远程登录。

 

BD基础 随笔 第13张

BD基础 随笔 第14张

 

 

 

 

08

BD基础 随笔 第15张

BD基础 随笔 第16张

 BD基础 随笔 第17张

BD基础 随笔 第18张

 

09

BD基础 随笔 第19张

 

BD基础 随笔 第20张

 

 

 

 

10全分布配置

 BD基础 随笔 第21张

BD基础 随笔 第22张

BD基础 随笔 第23张

BD基础 随笔 第24张

BD基础 随笔 第25张

 

扫码关注我们
微信号:SRE实战
拒绝背锅 运筹帷幄