Hadoop获取namenode的命令

在某些场景下，我们需要及时的得到Hadoop的当前的一些配置信息，例如namenode。

hadoop下的命令如下：

为了更好的在程序中使用，我们可以封装一个相应的方法：

#coding:utf-8
import os
import subprocessdef getNameNode():hadoopPath = os.environ["HADOOP_CONF_DIR"].replace("/etc/hadoop","")cmd = "%s/bin/hdfs getconf -namenodes"%(hadoopPath,)nameNode = ""try:subp = subprocess.Popen(cmd,shell=True,stdout=subprocess.PIPE)nameNode = subp.stdout.readline()nameNode = nameNode.replace("\n","")except Exception,e:raise ereturn nameNodeif __name__ == '__main__':print getNameNode()

如果是用了Hadoop HA的话，可能是有多个namenode的（主namenode和standby namenode)，此时的返回值是空格分隔的namenode，可以得到后用空格split一下然后再进行使用。

Hadoop获取namenode的命令相关推荐

hadoop运维必备命令
1.列出所有Hadoop Shell支持的命令 $ bin/hadoop fs -help 2.显示关于某个命令的详细信息 $ bin/hadoop fs -help command-name 3.用 ...
Hadoop集群安全性：Hadoop中Namenode单点故障的解决方案及详介AvatarNode
2019独角兽企业重金招聘Python工程师标准>>> 正如大家所知,NameNode在Hadoop系统中存在单点故障问题,这个对于标榜高可用性的Hadoop来说一直是个软肋.本文讨 ...
Hadoop中Namenode单点故障的解决方案及详细介绍
正如大家所知,NameNode在Hadoop系统中存在单点故障问题,这个对于标榜高可用性的Hadoop来说一直是个软肋.本文讨论一下为了解决这个问题而存在的几个solution. 1. Seconda ...
Hadoop中Namenode单点故障的解决方案
Hadoop中Namenode单点故障的解决方案需求: 实现namenode元数据的备份,解决namenode单点宕机导致集群不可用的问题. 方案描述: 当namenode所在服务器宕机的时候,我们 ...
大数据_07 【hadoop HDFS的shell命令操作】
大数据_07 [hadoop HDFS的shell命令操作] 01 基本语法 02 常用普通命令实操 03 HDFS常用高级命令 04 HDFS适用场景 05 HDFS不适用场景 06 hdfs的安全 ...
hadoop/hdfs/yarn 详细命令搬运
hadoop/hdfs/yarn 详细命令搬运转载自文章 http://www.cnblogs.com/davidwang456/p/5074108.html 安装完hadoop后,在hadoop的 ...
Hadoop启动NameNode报错ERROR Cannot set priority of namenode process 2639
项目场景: Hadoop启动NameNode报错::ERROR: Cannot set priority of namenode process 问题描述: Hadoop启动NameNode报错ERR ...
Hadoop之NameNode和SecondaryNameNode工作机制详解
Hadoop之NameNode和SecondaryNameNode工作机制详解 NN和2NN工作机制 NN和2NN工作机制详解 Fsimage和Edits解析 checkpoint时间设置 1. NN ...
Hadoop切换namenode为active
hadoop切换namenode为active 进入hadoop/bin目录下 ./yarn rmadmin -transitionToActive --forcemanual rm1 重新启动zkf ...

Hadoop获取namenode的命令

Hadoop获取namenode的命令相关推荐

最新文章

热门文章