搭建 Hadoop 大数据分析平台

我的实验环境是, 64 位 Redhat 虚拟机, 操作系统为 Red Hat Enterprise Linux Server release 6.4 (Santiago).

当前最新稳定版本的 Hadoop 是 2.7.1, 请到官方网站了解详情, 并下载最新稳定发行版,
或者直接点击这里, 进行下载.

准备工作

安装

1
2
3
mv hadoop-2.7.1.tar.gz /opt/
cd /opt/
tar -xkzvf hadoop-2.7.1.tar.gz

配置

1
2
cd hadoop-2.7.1
vim etc/hadoop/hadoop-env.sh

编辑文件 etc/hadoop/core-site.xml

1
2
3
4
5
6
<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://localhost:9000</value>
</property>
</configuration>

编辑文件 etc/hadoop/hdfs-site.xml

1
2
3
4
5
6
<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
</configuration>
1
2
$ ssh localhost
root@localhost's password:
1
ssh-keygen -t rsa
1
2
3
4
5
$ tree ~/.ssh
/root/.ssh
|-- id_rsa
|-- id_rsa.pub
\-- known_hosts
1
cat id_rsa.pub > authorized_keys

http://10.61.2.168:50070
iptables -F

Henry wechat
欢迎您扫一扫上面的微信公众号,订阅我的博客!