2019暑假第二周(hadoop在个人电脑上的搭建)

Posted mawangwang

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了2019暑假第二周(hadoop在个人电脑上的搭建)相关的知识,希望对你有一定的参考价值。

一,Hadoop和NoSQL数据库的学习,大多需要Linux环境。

搭建Linux环境可以分为两种方式:

(1)在电脑上安装双操作系统,即同时安装Linux和Windows操作系统,在电脑启动的时候,可以选择进入Linux系统;

(2)在安装好Windows操作系统的电脑上,在开机进入Windows操作系统以后,安装Linux虚拟机,即在Windows运行环境下虚拟出一个Linux运行环境。

至此,我选择第二种,安装Linux虚拟机

1.若您的电脑支持VT(Virtualization Technology)技术,即CPU的虚拟化,请在Bios界面开启。

相关具体过程请移步百度搜索:

例如:惠普(电脑型号)笔记本怎么进入BIOS设置VT

https://zhidao.baidu.com/question/748476642804006972.html

2.下载开源虚拟机软件VirtualBox

VirtualBox 6.0.8 下载地址:https://www.virtualbox.org/wiki/Downloads

并安装。

3.下载Centos(Linux的一个版本)ISO映像文件

CentOs 7下载地址:http://isoredirect.centos.org/centos/7/isos/x86_64/CentOS-7-x86_64-DVD-1810.iso

4.使用VirtualBox安装CentOS

具体步骤参考:

使用VirtualBox安装CentOS6.4:http://dblab.xmu.edu.cn/blog/164/(最后一定要选择Desktop,更易上手);

使用VirtualBox安装CentOS7:https://blog.csdn.net/maty_wang/article/details/79127718

二,在Linux虚拟机内安装hadoop

安装步骤参考:

http://dblab.xmu.edu.cn/blog/install-hadoop-in-centos/

对于上面博客的一些自己的想法:

注:下面一切步骤都在linux虚拟机内实现,包括下载

java环境

1.卸载自带的jdk

提示:Linux终端界面的复制是:ctrl+shift+C;粘贴是:ctrl+shift+V

输入命令: rpm -qa | grep java

通过    rpm -e --nodeps   后面跟系统自带的jdk名    这个命令来删除系统自带的jdk,

例如(请根据自己的实际情况删除):

           rpm -e --nodeps java-1.8.0-openjdk-1.8.0.102-4.b14.el7.x86_64
           rpm -e --nodeps java-1.8.0-openjdk-headless-1.8.0.102-4.b14.el7.x86_64
           rpm -e --nodeps java-1.7.0-openjdk-headless-1.7.0.111-2.6.7.8.el7.x86_64
           rpm -e --nodeps java-1.7.0-openjdk-1.7.0.111-2.6.7.8.el7.x86_64
2.官网下载jdk1.8

可以使用Linux的浏览器Firefox下载

下载地址:https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html

3.解压,安装

参考博客(博主:清晨的第一抹阳光):

https://www.cnblogs.com/116970u/p/10400436.html

hadoop下载

目前,hadoop提供下载的最新版本3.2.0,最低版本2.6.5;而且在实际过程中我没能找到 hadoop-2.x.y.tar.gz.mds 文件,即文件完整性检验,可跳过这一步骤。

如果你下载的是3.2.0版本,jdk请使用1.8否则可能会出现错误。

VirtualBox增强功能

强烈建议安装,可以实现鼠标在虚拟机和Windows界面自由切换,也可以将Linux界面全屏显示

 

以上是关于2019暑假第二周(hadoop在个人电脑上的搭建)的主要内容,如果未能解决你的问题,请参考以下文章

暑假第二周周记

暑假第二周报告

暑假第二周进度报告

2018年暑假第二周

暑假第二周总结

暑假学习第二周