centos6下安装hadoop集群
安装集群环境:克隆虚拟机后:1.恢复网卡:vi /etc/udev/rules.d/70-persistent-net.rules删除etho,将eth1改为eth02.修改ip:vi /etc/sysconfig/network-scripts/ifcfg-eth0删除:HWADDR=00:0C....UUID:..修改:onboo...
安装集群环境:
克隆虚拟机后:
1.恢复网卡:
vi /etc/udev/rules.d/70-persistent-net.rules
删除etho,将eth1改为eth0
2.修改ip:
vi /etc/sysconfig/network-scripts/ifcfg-eth0
删除:HWADDR=00:0C....
UUID:..
修改:onboot=yes
BOOTPROTO=static
添加:IPADDR=
GATEWAY=(网管)
NETMASK=(子网掩码)
DNS1=网管
3.修改主机名:
vi /etc/sysconfig/network
修改:HOSTNAME=
4.重启;
reboot
5.方便pc段ping 给虚拟机添加别名
c:windows/system32/drivers/etc/hosts
安装jdk:
1.解压:
rpm -ivh jdk-8u131-linux-x64.rpm
2.查看
Java -version
安装hadoop:
1.解压:
tar -zxvf hadoop-2.8.5.tar.gz -C /usr/apps/hadoop/
2.修改配置文件
hadoop的配置文件在:/root/apps/hadoop安装目录/etc/hadoviewop/
核心配置参数:
1.指定hadoop的默认文件系统为:hdfs
2.指定hdfs的namenode节点为那台机器
3.指定namenode软件存储元数据的本地目录
4.指定datanode软件存放文件块的本地目录
vi /etc/profile
export HADOOP_HOME=/usr/hadoop
export PATH=
P
A
T
H
:
PATH:
PATH:HADOOP_HOME/bin
export PATH=
P
A
T
H
:
PATH:
PATH:HADOOP_HOME/sbin
export HADOOP_COMMON_LIB_NATIVE_DIR=
H
A
D
O
O
P
H
O
M
E
/
l
i
b
/
n
a
t
i
v
e
e
x
p
o
r
t
H
A
D
O
O
P
O
P
T
S
=
"
−
D
j
a
v
a
.
l
i
b
r
a
r
y
.
p
a
t
h
=
HADOOP_HOME/lib/native export HADOOP_OPTS="-Djava.library.path=
HADOOPHOME/lib/nativeexportHADOOPOPTS="−Djava.library.path=HADOOP_HOME/lib:$HADOOP_COMMON_LIB_NATIVE_DIR"
3.重启服务
source /etc/profile
4.查看是否成功
echo $HADOOP_HOME
5.修改hadoop-env.sh中的Java_Home变量为java的真实目录
6.配置Hadoop(/usr/hadoop/hadoop-2.8.5/etc/hadoop)
a.vi core-site.xml
b.hdfs-site.xml
7.格式化分布式硬盘
8.启动
更多推荐
所有评论(0)