欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  IT编程

Ubuntu搭建Hadoop的踩坑之旅(一)

程序员文章站 2022-06-25 16:55:50
本文将介绍如何使用虚拟机一步步从安装Ubuntu到搭建Hadoop伪分布式集群。 本文主要参考:在VMware下安装Ubuntu并部署Hadoop1.2.1分布式环境 - CSDN博客 一、所需的环境和软件:(以下是我们的环境,仅供参考) 1. 操作系统:Windows 10 64位 2. 内存:4 ......

本文将介绍如何使用虚拟机一步步从安装Ubuntu到搭建Hadoop伪分布式集群。

本文主要参考:在VMware下安装Ubuntu并部署Hadoop1.2.1分布式环境 - CSDN博客

一、所需的环境和软件:(以下是我们的环境,仅供参考)

1. 操作系统:Windows 10 64位

2. 内存:4G以上(4G 可以搭建,不过虚拟机的运行可能会比较慢,这种情况可以考虑双系统)

3. VMware Workstation 12:VMware-workstation-full-12.5.7-5813279.exe

4. VMware Tools:通过VMware来安装

5. Ubuntu12.04:ubuntu-14.04.5-desktop-amd64.iso,ubuntu-16.04.3-desktop-amd64.iso(团队中两种系统都有人成功,不过高版本的比较顺利)

6. SSH:通过linux命令来安装

7. JDK1.8:jdk-8u11-linux-x64.tar.gz

8. Hadoop2.6.0:hadoop-2.6.0.tar.gz

二、VMware的安装

到网上去下载一个合适版本的VMware,我们用的是VMware-workstation-full-12.5.7-5813279.exe,然后找到激活码,按照提示下一步就行,这个非常简单,就不再赘述了。安装完成之后是一下界面:

Ubuntu搭建Hadoop的踩坑之旅(一)

三、在VMware下安装一个空白的虚拟机

  1. 打开VMware,点击创建新的虚拟机

Ubuntu搭建Hadoop的踩坑之旅(一)

2、出现如下界面,点击自定义,下一步

Ubuntu搭建Hadoop的踩坑之旅(一)

3、出现如下界面,直接下一步

Ubuntu搭建Hadoop的踩坑之旅(一)

4、出现如下界面,点击稍后安装系统,下一步

Ubuntu搭建Hadoop的踩坑之旅(一)

5、出现如下界面,点击Linux,版本视你的安装镜像而定,下一步

Ubuntu搭建Hadoop的踩坑之旅(一)

6、出现如下界面,更改合适的位置(最好别装c盘,选一个比较空余的盘),下一步

Ubuntu搭建Hadoop的踩坑之旅(一)

7、出现如下界面,根据个人电脑配置而定,下一步

Ubuntu搭建Hadoop的踩坑之旅(一)

8、出现如下界面,选择合适的内存,如果内存较大,建议2个g以上,如果本机内存较小,1.5G为怡,下一步

Ubuntu搭建Hadoop的踩坑之旅(一)

9、出现如下界面,主要是两种,桥接可以和内网的其他机子通信,.net只能和本机通信,建议桥接,下一步

Ubuntu搭建Hadoop的踩坑之旅(一)

10、出现如下界面,使用推荐的就好,下一步

Ubuntu搭建Hadoop的踩坑之旅(一)

11、出现如下界面,使用推荐的就好,下一步

Ubuntu搭建Hadoop的踩坑之旅(一)

12、出现如下界面,使用默认的就好,下一步

Ubuntu搭建Hadoop的踩坑之旅(一)

13、出现如下界面,20g并不是一下子占用20g而是随着使用而扩大,这点不必担心,下一步

Ubuntu搭建Hadoop的踩坑之旅(一)

14、出现如下界面,最好新建一个目录,方便出现问题时候,直接删除这个虚拟机,注意是删除虚拟机而不是VWM(这两个是有区别的),下一步

Ubuntu搭建Hadoop的踩坑之旅(一)

15、单击完成。

Ubuntu搭建Hadoop的踩坑之旅(一)

四、安装Ubuntu

1、找到刚刚建好的虚拟机,点击编辑虚拟机配置

Ubuntu搭建Hadoop的踩坑之旅(一)

2、会看到下面的界面,上一步配置的东西在这里都可以改,我们要点击CD/DVD

Ubuntu搭建Hadoop的踩坑之旅(一)

3、使用镜像安装,找到你下载的Ubuntu镜像

Ubuntu搭建Hadoop的踩坑之旅(一)

4、ok,确定

Ubuntu搭建Hadoop的踩坑之旅(一)

5、回到这个页面,开启此虚拟机

Ubuntu搭建Hadoop的踩坑之旅(一)

6、稍等,看到如下界面:语言拉下来,有中文,然后安装Ubuntu

Ubuntu搭建Hadoop的踩坑之旅(一)

7、看到如下界面:上面的框看个人喜好,继续

Ubuntu搭建Hadoop的踩坑之旅(一)

8、看到如下界面:这里的格式化是指你分配的虚拟机空间,并不会直接格式化你的整个磁盘,可以放心使用。然后点击现在安装

Ubuntu搭建Hadoop的踩坑之旅(一)

9、已经自动建立好了分区,继续

Ubuntu搭建Hadoop的踩坑之旅(一)

10、时区随意咯,继续

Ubuntu搭建Hadoop的踩坑之旅(一)

11、会出现下面的界面,键盘布局点汉语,继续

Ubuntu搭建Hadoop的踩坑之旅(一)

12、会出现下面的界面,计算名什么的随意,不过如果配置多台机器,用户名最好要一致,密码仅供测试用,可以尽量简单。继续

Ubuntu搭建Hadoop的踩坑之旅(一)

13、开始安装,等待吧......

Ubuntu搭建Hadoop的踩坑之旅(一)

14、安装完毕,重启(忘了截图)。

15、重启后会进入下页面,说明Ubuntu安装成功

Ubuntu搭建Hadoop的踩坑之旅(一)

备注:重启时有一段信息需要回车,如果长时间不按,会卡主,这时点击虚拟机上面的重启就好。

显示可以改分辨率,会舒服些。

Ubuntu搭建Hadoop的踩坑之旅(一)

16、安装VMware的tools,单击虚拟机,会有一个安装的选项,之后Ubuntu会自动弹出安装包。

Ubuntu搭建Hadoop的踩坑之旅(一)Ubuntu搭建Hadoop的踩坑之旅(一)如果没有弹出,去驱动器改回来

将安装包拖到home目录下:

Ubuntu搭建Hadoop的踩坑之旅(一)

CTRL alt +T打开一个终端,使用“tar -zxvf VMwareTools-10.1.6-1294478.tar.gz”命令解压文件, VMwareTools-10.1.6-1294478.tar.gz视你的版本而定。

Ubuntu搭建Hadoop的踩坑之旅(一)

使用cd vmware-tools-distrib命令进入文件夹,

Ubuntu搭建Hadoop的踩坑之旅(一)

用sudo passwd root更改root 密码:密码不会显示,输就是了

Ubuntu搭建Hadoop的踩坑之旅(一)Ubuntu搭建Hadoop的踩坑之旅(一)

输入sudo ./vmware-install.pl安装

Ubuntu搭建Hadoop的踩坑之旅(一)

安装过程中,根据提示(回车、或者输入yes或no),并输入相应的内容。这样就可以安装成功,重启虚拟机后会生效。

比如:“”什么也没有,按键 “回车”;

[yes] 输入yes

Ubuntu搭建Hadoop的踩坑之旅(一)

到这里就成功了:

Ubuntu搭建Hadoop的踩坑之旅(一)

17、配置共享文件夹

单击虚拟机>设置:>共享文件夹

Ubuntu搭建Hadoop的踩坑之旅(一)

看到这个:单机总是启用,添加即可,设置后可以在虚拟机和Windows下看到同一个文件夹

Ubuntu搭建Hadoop的踩坑之旅(一)Ubuntu搭建Hadoop的踩坑之旅(一)Ubuntu搭建Hadoop的踩坑之旅(一)

到此,你的入坑第一步结束,祝~你~愉~快~