本文共 2241 字,大约阅读时间需要 7 分钟。
- 一:系统环境配置
- 二:编辑改变hadoop 的配置文件
- 三: 启动服务节点:
- 四:HDFS Federation环境测试
承接 在上文档hadoop 分布式的文档进行部署
编辑core-site.xml 文件: master.hadop.com 的core-site 文件配置 vim core-site.xml
fs.defaultFS hdfs://master.hadoop.com:8020 slave1.hadoop.com 的core-site.xml 文件配置 hadoop.tmp.dir /home/hadoop/yangyang/hadoop/data slave2.hadoop.com 的core-site.xml 文件配置: fs.defaultFS hdfs://slave1.hadoop.com:8020 hadoop.tmp.dir /home/hadoop/yangyang/hadoop/data hadoop.tmp.dir /home/hadoop/yangyang/hadoop/data
编辑hdfs-site.xml 文件:
dfs.replication 3 dfs.nameservices ns1,ns2 dfs.namenode.rpc-address.ns1 master.hadoop.com:8020 dfs.namenode.http-address.ns1 master.hadoop.com:50070 dfs.namenode.rpc-address.ns2 slave1.hadoop.com:8020 dfs.namenode.http-address.ns2 slave1.hadoop.com:50070
格式化HDFS 节点处理 master.hadoop.comcd /home/hadoop/yangyang/hadoop/bin/hdfs namenode –format –clusterID hdfs-cluster
slave1.hadoop.comcd /home/hadoop/yangyang/hadoop/bin/hdfs namenode –format –clusterID hdfs-cluster
启动namenode.hadoop.com与slave1.hadoop.com节点上的namenode master.hadoop.com./hadoop-daemon.sh start namenode
slave1.hadoop.com./hadoop-daemon.sh start namenode
启动所有节点的datanonde./hadoop-daemon.sh start datanode master.hadoop.com
slave1.hadoop.com
slave2.hadoop.com打开浏览器:master.hadoop.com slave1.hadoop.com ###四: HDFS Fedeation 的测试在maser.hadoop.com 节点上去HDFS创建一个文件在slave1.hadoop.com 去hdfs 上创建文件打开浏览器查看:master.hadoop.com slave1.hadoop.com
转载于:https://blog.51cto.com/flyfish225/2096432