黑马程序员技术交流社区

标题: 【上海校区】HADOOP集群安装完成后的设置 [打印本页]
作者: 不二晨    时间: 2018-8-17 10:18
标题: 【上海校区】HADOOP集群安装完成后的设置
验证初始化安装是否成功：1、启动namenode，在网关验证http://namenode.hostname:50070(如http://hadoop.mini01:50070)是否能正常刷出Jetty页面

namenode机上键入命令：

cd $HADOOP_HOME/sbin

hadoop-daemons.sh start namenode

jps

启动成功后访问本地页面(如http://hadoop.mini01:50070)：

2、手动启动一台datanode，完成后刷新jetty页面，看是否node点和集群容量有上升

在其他集群机器上键入命令：

cd $HADOOP_HOME/sbin

hadoop-daemons.sh start namenode

jps

3、刷新jetty页面，看node数和总容量是否有增加：

设置：1、在namenode机配置/etc/hosts，并进行分发

        键入 sudo vim /etc/hosts

        在文档末端加入集群所有datenode的  ip : hostname

        

如果在修改后，host列表没有立即生效，参考https://blog.csdn.net/hguisu/article/details/49278355寻求解决方法。

完成编辑后，将hosts分发至集群其他机器。

在namenode机键入命令：


2、在namenode机上配置ssh免密登陆

配置mini01到mini02、mini03、mini04、mini05、mini06、mini07的免密码登陆

① 在mini01上生产一对钥匙

ssh-keygen -t rsa

② 将公钥拷贝到其他节点，包括自己

ssh-copy-id hadoop.mini01

ssh-copy-id hadoop.mini02

ssh-copy-id hadoop.mini03

③ 验证免密登陆：

ssh hadoop.mini02


3、在namenode机上配置$HADOOP_HOME/etc/hadoop/slaves，将所有datanode的hostname记录下来

键入命令：

cd $HADOOP_HOME/etc/hadoop/

vim slaves

将其他所有集群机器hostname录入：


4、在namenode机上验证。

键入命令：

cd $HADOOP_HOME/sbin/

start-dfs.sh

jps

打开jetty页面，集群启动成功。

【转载】https://blog.csdn.net/yumi6666/article/details/81735638


作者: 不二晨    时间: 2018-8-17 15:26
奈斯



欢迎光临 黑马程序员技术交流社区 (http://bbs.itheima.com/) 黑马程序员IT技术论坛 X3.2