博客

我构建了hadoop集群。我们一定会写一个shell脚本去每一个节点上去jps，查看每个节点的进程情况。

原先以为shell很简单：

#!/bin/bash
#查看每个节点运行情况
for((host=101;host<108;host++));do
echo -----------hadoop$host-------------
	ssh hadoop$host "jps"
done

这里默认服务器节点的名字是hadoop101-hadoop107



默认已经配置了ssh_key的公钥和私钥


看是运行这段程序的时候会弹出一个错误：

-bash: jps: command not found

错误原因：

在shell脚本写的ssh到其他节点的时候默认是不加载配置文件的。linux并不能去找到java中jps的命令。

• 
  解决方案一
  
  ：在ssh到其他节点的时候source 一下配置文件。
  
  具体操作为：ssh hadoop$host “source /etc/profile;jps”
• 
  解决方案二
  
  ：在ssh到其他节点的时候输入jps命令下的绝对路径。
  
  在笔者的linux的jdk的绝对路径为：/opt/module/jdk1.8.0_144/bin这个目录下就有jps的命令。
  
  具体操作为：ssh hadoop$host “/opt/module/jdk1.8.0_144/bin/jps”
• 
  解决方案三
  
  ：在当前用户的家目录中输入命令
  
  ll -a
  
  会显示隐藏文件，修改配置文件.bashrc。
  
  .bashrc 是当你登入shell时执行
  
  在其中添加JDK的环境变量
• 
  解决方案四
  
  ：在/etc/profile.d目录下创建一个以sh结尾的文件。将profile配的环境变量拷贝到这个文件目录下

运行结果：

-----------hadoop101-------------
10720 DataNode
10993 NodeManager
10573 NameNode
19663 Jps
-----------hadoop102-------------
37744 Jps
31282 NodeManager
31154 ResourceManager
31036 DataNode
-----------hadoop103-------------
30725 NodeManager
30620 SecondaryNameNode
30511 DataNode
41135 Jps
-----------hadoop104-------------
30995 DataNode
31109 NodeManager
37483 Jps
-----------hadoop105-------------
30882 NodeManager
30766 DataNode
37358 Jps
-----------hadoop106-------------
8816 Jps
2592 NodeManager
2477 DataNode
-----------hadoop107-------------
37445 Jps
31035 DataNode
31151 NodeManager