Hadoop脚本远程控制中SSH常见问题怎么解决

发布时间:2023-02-22 16:01:46 作者:iii
来源:亿速云 阅读:77

本篇内容主要讲解“Hadoop脚本远程控制中SSH常见问题怎么解决”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“Hadoop脚本远程控制中SSH常见问题怎么解决”吧!

背景

在Hadoop脚本远程控制中,需要知道SSH一些常见的知识点。

SSH有三个知识点

1、使用ssh通过Hadoop脚本远程控制其他节点。

2、ssh配置免密模式。

3、ssh远程执行的时候有一个弊端,上面说到需要使用Java JDK,使用Java命令来启动jvm进程,那么这时候如果有一个节点a要去控制另一个节点b启动一个jvm进程,在使用ssh远程执行的时候,是不会加载对方的环境变量的 etc/profile文件的。

这边演示一下,有两台机器ip为118和119,在118节点中增加环境变量BIGDATA

[root@localhost ~]# vi /etc/profile
// 在文件尾行追加,并保存文件
export BIGDATA=hello

打印刚才的变量发现变量为空

[root@localhost ~]# echo $BIGDATA
[root@localhost ~]#

因为当前bash在运行时已经加载了环境变量文件,之后的修改并没有应用到当前环境,我们可以用source重新加载文件,然后在输出变量就可以打印出对应的值了

[root@localhost ~]# source /etc/profile
[root@localhost ~]# echo $BIGDATA
hello
[root@localhost ~]#

现在我们使用119节点,通过ssh让118节点远程执行输出变量值看一下效果

[root@localhost ~]# ssh root@192.168.0.118 'echo $BIGDATA'
The authenticity of host '192.168.0.118 (192.168.0.118)' can't be established.
ECDSA key fingerprint is SHA256:rDsunaro1f5LyKkEeNohXfDD9oEglNXtviD/JZtA1dw.
ECDSA key fingerprint is MD5:51:38:8d:fc:e4:d2:c7:ce:66:09:c8:f2:e6:9e:a7:f2.
Are you sure you want to continue connecting (yes/no)? yes
Warning: Permanently added '192.168.0.118' (ECDSA) to the list of known hosts.
root@192.168.0.118's password: 
[root@localhost ~]#

这时候我们可以发现没有打印变量值,这是因为在ssh远程登录到118节点的时候,不会加载/etc/profile文件,如果不加载的话,就无法获取到变量。

这样我们只能多执行一个命令去加载环境变量文件,再输出变量,这时候就可以输出变量值了。

[root@localhost ~]# ssh root@192.168.0.118 'source /etc/profile;echo $BIGDATA;'
root@192.168.0.118's password: 
hello
[root@localhost ~]#

到此,相信大家对“Hadoop脚本远程控制中SSH常见问题怎么解决”有了更深的了解,不妨来实际操作一番吧!这里是亿速云网站,更多相关内容可以进入相关频道进行查询,关注我们,继续学习!

推荐阅读:
  1. Linux下Hadoop 2.7.3如何安装搭建
  2. Hadoop中的压缩与解压缩方法是什么

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

hadoop ssh

上一篇:Python怎么实现自动合并Word并添加分页符

下一篇:linux rename如何批量修改文件名

相关阅读

您好,登录后才能下订单哦!

密码登录
登录注册
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》