作业要求:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3223

 

SRE实战 互联网时代守护先锋,助力企业售后服务体系运筹帷幄!一键直达领取阿里云限量特价优惠。

一、在VMware Workstation安装Ubuntu

 

点击文件 ---> 新建虚拟机

 安装Hadoop 随笔 第1张

 

 

稍后才安装系统

 安装Hadoop 随笔 第2张

 

 

 选择Linux的版本

安装Hadoop 随笔 第3张

 

指定磁盘容量

安装Hadoop 随笔 第4张

 

 

创建好虚拟机

安装Hadoop 随笔 第5张

 

 

使用ubuntu镜像文件安装系统

安装Hadoop 随笔 第6张

 

 

二、创建hadoop用户

 

创建

安装Hadoop 随笔 第7张

 

设密码

安装Hadoop 随笔 第8张

 

加入sudo权限

安装Hadoop 随笔 第9张

 

三、安装MySQL

 

更新软件资源库

安装Hadoop 随笔 第10张

 

 

 安装mysql

安装Hadoop 随笔 第11张

 

 

开启mysql服务

安装Hadoop 随笔 第12张

 

 

 

四、安装java环境

 

下载jdk

安装Hadoop 随笔 第13张

 

配置环境变量

安装Hadoop 随笔 第14张

安装Hadoop 随笔 第15张

 

 

检验环境变量

安装Hadoop 随笔 第16张

 

 

五、window使用xshell传文件到ubuntu

 

安装ssh

安装Hadoop 随笔 第17张

 

 

启动ssh和验证是否可以远程登录

安装Hadoop 随笔 第18张

 

 

生成密匙

安装Hadoop 随笔 第19张

 

 配置ssh无密码登录

安装Hadoop 随笔 第20张

 

 window安装xsehll6

安装Hadoop 随笔 第21张

 

 

点击文件-->新建,输入Ubuntu的ip

安装Hadoop 随笔 第22张

 

 

 连接成功后,点击图中工具栏绿色按钮

安装Hadoop 随笔 第23张

 

 点击取消

安装Hadoop 随笔 第24张

 

 

弹出一个新会话

安装Hadoop 随笔 第25张

 

 把文件拖动到新建会话黑色界面中就可传到Ubuntu。。

安装Hadoop 随笔 第26张

 

 

 

 

 

六、安装hadoop

 

解压

安装Hadoop 随笔 第27张

 

 移动文件到 /usr/local目录

安装Hadoop 随笔 第28张

 

 重命名文件夹

安装Hadoop 随笔 第29张

 

 修改文件夹权限

安装Hadoop 随笔 第30张

 

 检查hadoop是否可用

安装Hadoop 随笔 第31张

 

 

七、运行单机模式

 运行grep例子

安装Hadoop 随笔 第32张

安装Hadoop 随笔 第33张

安装Hadoop 随笔 第34张

 

 运行结果

安装Hadoop 随笔 第35张

 

 

八、运行伪分布模式

配置文件参考:https://www.cnblogs.com/MissDu/p/8831525.html

 

 修改文件

 安装Hadoop 随笔 第36张

 

core-site.xml文件

安装Hadoop 随笔 第37张

 

hdfs-site.xml文件

 安装Hadoop 随笔 第38张

 

格式化NameNode

安装Hadoop 随笔 第39张

 

开启NameNode和DataNode失败,但是JAVA_HOME已经配置了

安装Hadoop 随笔 第40张

 

 在网上找到原因,需要修改hadoop-env.sh文件

安装Hadoop 随笔 第41张

安装Hadoop 随笔 第42张

 安装Hadoop 随笔 第43张

 

 

 

开启NameNode和DataNode成功

安装Hadoop 随笔 第44张

 

检测是否开启成功,成功则会出现下面进程

安装Hadoop 随笔 第45张

 

 

伪分布运行实例

安装Hadoop 随笔 第46张

安装Hadoop 随笔 第47张

 

运行结果

安装Hadoop 随笔 第48张

 

 可把hdfs的output文件夹复制到本地

安装Hadoop 随笔 第49张

 

扫码关注我们
微信号:SRE实战
拒绝背锅 运筹帷幄