2019暑假第二周(hadoop在个人电脑上的搭建)
Posted mawangwang
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了2019暑假第二周(hadoop在个人电脑上的搭建)相关的知识,希望对你有一定的参考价值。
一,Hadoop和NoSQL数据库的学习,大多需要Linux环境。
搭建Linux环境可以分为两种方式:
(1)在电脑上安装双操作系统,即同时安装Linux和Windows操作系统,在电脑启动的时候,可以选择进入Linux系统;
(2)在安装好Windows操作系统的电脑上,在开机进入Windows操作系统以后,安装Linux虚拟机,即在Windows运行环境下虚拟出一个Linux运行环境。
至此,我选择第二种,安装Linux虚拟机。
1.若您的电脑支持VT(Virtualization Technology)技术,即CPU的虚拟化,请在Bios界面开启。
相关具体过程请移步百度搜索:
例如:惠普(电脑型号)笔记本怎么进入BIOS设置VT
https://zhidao.baidu.com/question/748476642804006972.html
2.下载开源虚拟机软件VirtualBox
VirtualBox 6.0.8 下载地址:https://www.virtualbox.org/wiki/Downloads
并安装。
3.下载Centos(Linux的一个版本)ISO映像文件
CentOs 7下载地址:http://isoredirect.centos.org/centos/7/isos/x86_64/CentOS-7-x86_64-DVD-1810.iso
4.使用VirtualBox安装CentOS
具体步骤参考:
使用VirtualBox安装CentOS6.4:http://dblab.xmu.edu.cn/blog/164/(最后一定要选择Desktop,更易上手);
使用VirtualBox安装CentOS7:https://blog.csdn.net/maty_wang/article/details/79127718
二,在Linux虚拟机内安装hadoop
安装步骤参考:
http://dblab.xmu.edu.cn/blog/install-hadoop-in-centos/
对于上面博客的一些自己的想法:
注:下面一切步骤都在linux虚拟机内实现,包括下载
java环境
1.卸载自带的jdk
提示:Linux终端界面的复制是:ctrl+shift+C;粘贴是:ctrl+shift+V
输入命令: rpm -qa | grep java
通过 rpm -e --nodeps 后面跟系统自带的jdk名 这个命令来删除系统自带的jdk,
例如(请根据自己的实际情况删除):
rpm -e --nodeps java-1.8.0-openjdk-1.8.0.102-4.b14.el7.x86_64
rpm -e --nodeps java-1.8.0-openjdk-headless-1.8.0.102-4.b14.el7.x86_64
rpm -e --nodeps java-1.7.0-openjdk-headless-1.7.0.111-2.6.7.8.el7.x86_64
rpm -e --nodeps java-1.7.0-openjdk-1.7.0.111-2.6.7.8.el7.x86_64
2.官网下载jdk1.8
可以使用Linux的浏览器Firefox下载
下载地址:https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html
3.解压,安装
参考博客(博主:清晨的第一抹阳光):
https://www.cnblogs.com/116970u/p/10400436.html
hadoop下载
目前,hadoop提供下载的最新版本3.2.0,最低版本2.6.5;而且在实际过程中我没能找到 hadoop-2.x.y.tar.gz.mds 文件,即文件完整性检验,可跳过这一步骤。
如果你下载的是3.2.0版本,jdk请使用1.8否则可能会出现错误。
VirtualBox增强功能
强烈建议安装,可以实现鼠标在虚拟机和Windows界面自由切换,也可以将Linux界面全屏显示;
以上是关于2019暑假第二周(hadoop在个人电脑上的搭建)的主要内容,如果未能解决你的问题,请参考以下文章