本章主要学习了Hadoop的相关介绍以及1.x伪分布式的安装部署
(1)Hadoop的介绍
Hadoop将所有进程运行于同一台主机上,此时Hadoop将使用分布式文件系统,而且各jobs也是由JobTracker服务管理的独立进程。伪分布式的Hadoop集群只有一个节点,因此HDFS的块复制将限制为单个副本,其secondary-master和slaves也将运行于本地主机。
(2)安装准备
a) 关闭防火墙和禁用SELinux
i. 防火墙:service iptables stop
ii. SELinux:vim /etc/sysconfig/selinux,设置SELINUX=disabled
b) 设置静态IP
设置:vim /etc/sysconfig/network-scripts/ifcfg-eth0
c) 设置hostname
设置:vim /etc/sysconfig/network
d) 设置IP与hostname绑定
设置:vim /etc/hosts
127.0.0.1 localhost
192.168.1.180hadoop-master.dragon.org hadoop-master
e) 设置SSH自动登录
所有守护进程彼此通过SSH协议进行通信。
f) 安装jdk
g) 安装hadoop
学习时间 63分钟
操作时间 33分钟
按键次数 773次
实验次数 2次
报告字数 656字
是否完成 完成