开启hadoop集群的时候遇到了这个问题
我的问题比较好解决,一眼就能看出来,是因为slave和配置文件中的不对应。然后我就去查了查还有没有其他形式的,比如不是因为配置文件里面写错名字这种低级错误还是有这种情况的,大概有以下几种情况和解决方案
一定要配置免密登陆
在这之前要修改/etc/hosts文件中的映射
vim /etc/hosts #配置主机名字
对应的ip和主机名字
免密登陆的配置步骤
ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa #可以只在master上执行,如果其他节点也想实现免密登陆,按照这个步骤操作就可以
ssh-copy-id -i /root/.ssh/id_dsa.pub master #将master公钥复制到master
ssh-copy-id -i /root/.ssh/id_dsa.pub slave1 #将master公钥复制到slave1
ssh-copy-id -i /root/.ssh/id_dsa.pub slave2 #将master公钥复制到slave2
要在slaves文件中将自己的子节点的主机名加进去,master文件中加入master
要改正确,这些名字都要对应好才行
命令是(首先要进入到hadoop那个文件夹中 我的是 cd /usr/hadoop/hadoop-2.7.3,在该目录下输入以下命令就可以了,slaves和master文件都在/usr/hadoop/hadoop-2.7.3/etc/hadoop 下,注意自己的路径)
vim slaves
文章来源:https://www.toymoban.com/news/detail-743113.html
把这两个直接写进去就行,不需要有别的东西,当然如果你的名字和个数和我的不一样,就按你的来
master文件同理
vim master
这样下来一般都没什么问题了。
hadoop的启动
cd /usr/hadoop/hadoop-2.7.3
sbin/start-all.sh #主节点开启服务
通过 jps 查看
如果还是有问题,而且网上的方法试了很多很多还是不管用,那请再怀疑一下自己,仔仔细细地再检查一遍名字是不是对应着的,希望大家以后配环境、写代码顺顺利利文章来源地址https://www.toymoban.com/news/detail-743113.html
到了这里,关于【已解决,可放心食用】spark-slave1: ssh: Could not resolve hostname spark-slave1: Name or service not know的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!