“BTBU-研究生2016级-Hadoop入门进阶课程”实验报告

Hadoop介绍及1.X伪分布式安装

本章主要学习了Hadoop的相关介绍以及1.x伪分布式的安装部署

(1)Hadoop的介绍

Hadoop将所有进程运行于同一台主机上,此时Hadoop将使用分布式文件系统,而且各jobs也是由JobTracker服务管理的独立进程。伪分布式的Hadoop集群只有一个节点,因此HDFS的块复制将限制为单个副本,其secondary-master和slaves也将运行于本地主机。

(2)安装准备

a) 关闭防火墙和禁用SELinux

i. 防火墙:service iptables stop

ii. SELinux:vim /etc/sysconfig/selinux,设置SELINUX=disabled

b) 设置静态IP

设置:vim /etc/sysconfig/network-scripts/ifcfg-eth0

c) 设置hostname

设置:vim /etc/sysconfig/network

d) 设置IP与hostname绑定

设置:vim /etc/hosts

127.0.0.1 localhost

192.168.1.180hadoop-master.dragon.org hadoop-master

e) 设置SSH自动登录

所有守护进程彼此通过SSH协议进行通信。

f) 安装jdk

g) 安装hadoop

最新评论
暂无评论~