hadoop+hbase伪分布式之hadoop安装

Posted 2021-04-19 柠檬大数据

　　软件版本: hadoop-1.0.4， hbase-0.94.5

　　安装环境：redhat5

　　一、安装java虚拟机。

　　安装jdk。并配置环境变量。

　　二、配置Host

　　1、 修改hostname。

　　可通过命令：hostname查看本机的hostname值。或者使用uname –n查看。

　　Hostname的值在/etc/sysconfig/network中修改。

　　修改如下：

　　NETWORKING=yes

　　NETWORKING_IPV6=no

　　#HOSTNAME=localhost.localdomain

　　HOSTNAME=ubaserver

　　修改完后重新登录。即可生效。

　　修改文件/etc/hosts

　　配置如下：

　　# Do not remove the following line, or various programs

　　# that require network functionality will fail.

　　127.0.0.1 localhost.localdomain localhost

　　127.0.0.1 localhost

　　192.163.35.141 ubaserver

　　可用ping命令测试一下。

　　三、配置SSH

　　需要配置ssh无密码登录。

　　执行命令：ssh-keygen –t rsa。然后一路回车。

　　执行命令：cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys

　　然后可测试ssh ubaserver。 第一次登录，系统询问是否yes/no。选择yes。 下次再登录时，就不询问了。

　　四、安装Hadoop

　　解压hadoop-1.0.4

　　修改文件conf/core-site.xml

　　<?xml version="1.0"?>

　　<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

　　<!-- Put site-specific property overrides in this file. -->

　　<configuration>

　　 <property>

　　 <name>fs.default.name</name>

　　 <value>hdfs://192.163.35.141:9000</value>

　　 </property>

　　</configuration>

　　修改文件hdfs-site.xml

　　<?xml version="1.0"?>

　　<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

　　<!-- Put site-specific property overrides in this file. -->

　　<configuration>

　　 <property>

　　 <name>dfs.replication</name>

　　 <value>1</value>

　　 </property>

　　</configuration

　　修改conf/mapred-site.xm

　　<?xml version="1.0"?>

　　<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

　　<!-- Put site-specific property overrides in this file. -->

　　<configuration>

　　 <property>

　　 <name>mapred.job.tracker</name>

　　 <value>192.163.35.141:9001</value>

　　 </property>

　　</configuration>

　　注意：hadoop中配的都是IP。一会配hbase时，都是主机名.

　　配置完成后，首先要格式化一个分布式文件系统。

　　执行命令： bin/hadoop namenode –format

　　启动hadoop： bin/start-all.sh

　　hadoop+hbase伪分布式今日先分享hadoop安装，往后会继续详细分享，请随时关注！

　　关注方式：

　　扫二维码加关注，可回复“已关注”查看大数据相关学习资料。