主机测评
本篇内容主要讲解“Hadoop集群安装详细步骤”，感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷，实用性强。下面就让小编来带大家学习“Hadoop集群安装详细步骤”吧!Docker安装Hadoop集群一、单机hadoop
首先进入我们已有容器：（docker exec -it NAMES（名字） COMMAND ‘/bin/bash’）
mkdir /usr/hadoop
Cd /usr/hadoop
解压上传来的hadoop，或wget获取http://mirrors.sonic.net/apache/hadoop/common/hadoop-2.8.3/hadoop-2.8.3.tar.gz
命令：tar xvzf 压缩包（小编一般解压完直接删除压缩包）编辑 .bashrc
Vi ~/.bashrc
加入如下内容：
1.# Set Hadoop-related environment variables
export HADOOP_HOME=/usr/local/hadoop
2.# Add Hadoop bin/ directory to PATH
export PATH=$PATH:$HADOOP_HOME/sbin:$HADOOP_HOME/bin
刷新一下：
Source ~/.bashrc此处有坑：
找不到which的话执行：yum install which创建三个文件：
先进cd /usr/local/hadoop/hadoop-2.7.2
mkdir tmp作为Hadoop的临时目录
mkdir datanode作为NameNode的存放目录
mkdir namenode作为DataNode的存放目录配置文件：cd /usr/local/hadoop/hadoop-2.7.2/etc/hadoop三个文件：
1.core-site.xml配置:
hadoop.tmp.dir
/us开发云主机域名r/local/hadoop/hadoop-2.7.2/tmpfs.default.name
hdfs://master:9000
true2.hdfs-site.xml配置:（一些配置为了集群而准备）
dfs.replication
2dfs.namenode.name.dir
/usr/local/hadoop/hadoop-2.7.2/namenode
truedfs.namenode.name.dir
/usr/local/hadoop/hadoop-2.7.2/datanode
true
3.mapred-site.xml配置:(有个mapred-site.xml.template文件，更改为mapred-site.xml)
mapred.job.tracker
master:9001下面就指定JAVA_HOME环境变量:
使用命令vi hadoop-env.sh，添加如下配置：接着格式化 namenode
执行命令：hadoop namenode -format
此刻hadoop配置就完成了。二、 安装SSH:
使用yum： yum install passwd openssl openssh-server -y
因为我们是docker操作，他并不会自动启动，所以我们去给他加到。Bashrc中执行命令添加如下内容：Vi ~/.bashrc
#autorun
/usr/sbin/sshd
执行命令生成秘钥公钥：
ssh-keygen -t rsa -P ” -f ~/.ssh/id_dsa
cd ~/.ssh/
cat id_dsa.pub >> authorized_keyschmod 700 ~/.ssh/
chmod 600 ~/.ssh/authorized_keys补：
无密登录问题：bash: ssh: command not found
解决办法：yum -y install openss开发云主机域名h-clients到此位置我们保存容器为新的镜像即可：
docker commit -m “hadoop install” 61c9cf8da12f linux:hadoop
此时我们已经装好了一个单机版的hadoop镜像检测ssh：
命令1./usr/sbin/sshd
命令2.ssh
三、 docker hadoop集群：切记： hostname、hosts配置在容器内修改了，只能在本次容器生命周期内有效。如果容器退出了，重新启动，这两个配置将被还原。且这两个配置无法通过commit命令写入镜像。三个容器启动后分别配置hosts
vi /etc/hosts 注意修改ip地址：配置slaves：vi /usr/local/hado开发云主机域名op/hadoop-2.7.2/etc/hadoop/slaves
将：master
slave1
slave2
添加进去之后：master如下：
还可以通过Web页面看到查看DataNode和NameNode的状态:http://IP:50070/ ：到此，相信大家对“Hadoop集群安装详细步骤”有了更深的了解，不妨来实际操作一番吧！这里是开发云网站，更多相关内容可以进入相关频道进行查询，关注我们，继续学习！
本文从转载，原作者保留一切权利，若侵权请联系删除。
《Hadoop集群安装详细步骤》来自互联网同行内容，若有侵权，请联系我们删除！
