ES8 集群部署

这篇具有很好参考价值的文章主要介绍了ES8 集群部署。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

ES集群部署 8.4.3

零、准备工作

准备至少三个节点,配置至少为4核心8G内存

节点名称 节点IP
node1 192.168.0.1
node2 192.168.0.2
node3 192.168.0.3

关闭三个节点的防火墙

#必须关闭防火墙,否则无法正常启动集群
#三个节点分别执行以下命令
systemctl stop firewalld

一、修改操作系统配置

​ 1、添加ES用户 es不允许root启动

#添加用户 es
useradd es
#设置es密码  密码为:elasticsearch
passwd es

2、创建安装目录并授权

#创建目录
mkdir /app/elasticsearch
#授权
chown -R es:es elasticsearch/

3、修改操作系统配置

#-------修改es用户最大文件描述符------------
vim /etc/security/limits.conf 
#插入以下配置
es soft nofile 65536
es hard nofile 65536
#----------保存并退出----------------

#----------修改最大虚拟内存-------------------
vim /etc/sysctl.conf
#追加以下配置并保存
vm.max_map_count=655360
#执行如下命令
sysctl -p
# 显示 vm.max_map_count = 655360 就OK了

二、ES集群配置

​ 注意:请严格按照安装顺序来,否则都是坑

以下步骤都在用户es下进行。切换用户为:es

#切换用户
su es

1、安装包准备

  • 将elasticsearch-8.4.3-linux-x86_64.tar.gz 分别拷贝到三个节点

2、配置 node-1

  • 解压安装包:tar -zxvf xxxx.gar.gz

  • 配置 elasticsearch.yml 【关键】

cd /app/elasicsearch/elasticsearch-8.4.3/config
vim  elasticsearch.yml
# 只配置以下选项,其他不能动,因为es会自行配置,我们只配置基础必须的项。否则各种坑。
#集群名称:自定义,三个节点都必须配置为相同
cluster.name: udss-es
#该节点名称:唯一不重复
node.name: node-1
#该节点对外能提供访问的IP,如果填写ip不能被访问,则集群无法加入。
network.host: 10.248.190.176

#只配置以上三个项目,其他别动
  • 配置jvm.options文件

    vim jvm.options
    #将内存最大最小配置为4G 其他不动
    -Xms4g
    -Xmx4g
    

3、启动node-1,记录日志

#启动该节点并记录启动日志
cd /app/elasicsearch/elasticsearch-8.4.3
#启动es节点,后台启动
bin/elasticsearch -d
#正常启动,关注如下日志:
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
✅ Elasticsearch security features have been automatically configured!
✅ Authentication is enabled and cluster connections are encrypted.
#生成默认用户:elastic   密码:Z8Scc-c0KGoJV3QPg++S
ℹ️  Password for the elastic user (reset with `bin/elasticsearch-reset-password -u elastic`):
  Z8Scc-c0KGoJV3QPg++S

ℹ️  HTTP CA certificate SHA-256 fingerprint:
  d673d6c209a69753a82ded21ccb7791aa667761619a865ca58929f3f2edb7f14
#生成kibana链接es的token,有效时间:30分钟  如果失效,往下看第五步
ℹ️  Configure Kibana to use this cluster:
• Run Kibana and click the configuration link in the terminal when Kibana starts.
• Copy the following enrollment token and paste it into Kibana in your browser (valid for the next 30 minutes):
  eyJ2ZXIiOiI4LjQuMyIsImFkciI6WyIxMC4yNDguMTkwLjE3Njo5MjAwIl0sImZnciI6ImQ2NzNkNmMyMDlhNjk3NTNhODJkZWQyMWNjYjc3OTFhYTY2Nzc2MTYxOWE4NjVjYTU4OTI5ZjNmMmVkYjdmMTQiLCJrZXkiOiI4czY0UFlRQkEyYkIza3RQYnJ3Mjp0amx1ZzNaVFNHS2dPbURScW5wVXpRIn0=
#生成es其他节点加入该集群的token,有效时间:30分钟  如果失效,往下看第五步
ℹ️ Configure other nodes to join this cluster:
• Copy the following enrollment token and start new Elasticsearch nodes with `bin/elasticsearch --enrollment-token <token>` (valid for the next 30 minutes):
  eyJ2ZXIiOiI4LjQuMyIsImFkciI6WyIxMC4yNDguMTkwLjE3Njo5MjAwIl0sImZnciI6ImQ2NzNkNmMyMDlhNjk3NTNhODJkZWQyMWNjYjc3OTFhYTY2Nzc2MTYxOWE4NjVjYTU4OTI5ZjNmMmVkYjdmMTQiLCJrZXkiOiI5TTY0UFlRQkEyYkIza3RQYnJ3NDp6VTByVFp3bVR3S1R4MUk5TzRNVS1nIn0=

  If you're running in Docker, copy the enrollment token and run:
  `docker run -e "ENROLLMENT_TOKEN=<token>" docker.elastic.co/elasticsearch/elasticsearch:8.4.3`
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
#启动后,ES会自动配置集群配置、安全配置,并追加到elasticsearch.yml文件中
#ssl证书等配置,生成到config/certs目录中。
#后续节点加入集群,会自动同步该节点的配置,不要人工手动配置。

4、启动node-2

  • 配置node-2

    基础配置与配置node-1相同【不要启动】

    注意使用用户:es 非root

    解压安装包,配置elasticsearch.yml与jvm.options

    不要把ip与节点名称配置重复了。

    其余不要动

  • 启动node-2

    #node2启动与node1不同,node2启动通过node-1提供的token直接加入集群,同步node-1的所有默认配置。
    cd /app/elasicsearch/elasticsearch-8.4.3
    #第一次启动node-2 es节点,后台启动
    bin/elasticsearch -d --enrollment-token 复制日志中的node-token
    #启动成功后,es自动配置elasticsearch.yml中集群以及安全等,不要去改动配置。
    #如果后续关闭节点重启,则使用以下命令:
    bin/elasticsearch -d
    
  • 查看node-1日志

    #查看日志确认节点加入集群
    #node-1节点操作
    cd /app/elasicsearch/elasticsearch-8.4.3
    cat logs/udss-es_server.json
    #发现 node add日志则表示加入成功
    
  • node-3配置与启动,与node-2相同,按照步骤操作即可。token可重复使用。

  • 证书配置

    /app/elasicsearch/elasticsearch-8.4.3/config/certs/http_ca.crt 文件,下载拷贝至需要链接ES的应用服务器。

    并执行以下命令,安装到jdk证书目录中,使机器能够链接ES服务。

    #将http_ca.crt文件拷贝到服务器并安装:
     keytool -import -alias es_cert -keystore "$JAVA_HOME/jre/lib/security/cacerts" -file http_ca.crt
    #输入密码:
    changeit
    #回车,输入yes,安装完成。该服务器可以使用https链接es.否则无法链接。
    

5、token失效

​ ES提供了token生成工具进行生成对应的token,在失效时刻随时生成。

#进入es目录
cd /app/elasicsearch/elasticsearch-8.4.3
#生成node 加入集群的token
bin/elasticsearch-create-enrollment-token -s node

#生成kibana接入的token
 bin/elasticsearch-create-enrollment-token -s kibana

6、配置安装kibana

  • 下载kibana安装包:8.4.3并上传到服务器

  • 解压安装包:tar -zxvf xxxx.tar.gz

  • 配置kibana.yml文件

    cd /app/kibana/kibana-8.4.3/config
    vim kibana.yml
    #host修改为如下:
    # Specifies the address to which the Kibana server will bind. IP addresses and host names are both valid values.
    # The default is 'localhost', which usually means remote machines will not be able to connect.
    server.host: "0.0.0.0"
    
    
  • 保存配置文件并启动kibana

    cd /app/kibana/kibana-8.4.3/
    nohup bin/kibana --allow-root &
    
  • 浏览器登陆kibana首页:

    输入上面日志中的token或命令生成的kibana token,进行首次配置。

    配置完毕后,即可登录使用

    用户名:elastic

    密码:上述日志中的用户密码

文章来源地址https://www.toymoban.com/news/detail-429444.html

到了这里,关于ES8 集群部署的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 开源大数据集群部署(二)集群基础环境实施准备

    作者:櫰木 本次使用到的二进制软件包目录为:系统初始化前提是操作系统已完成安装、各个主机之间网络互通,系统常用命令已安装,本默认这些前提条件已具备,不在阐述。 安装centos系统完成后需要对主机进行初始化配置和验证工作,在所有主机上(hd1.dtstack.com-hd3)均

    2024年02月03日
    浏览(50)
  • 工作纪实36-ES跨集群迁移

    https://blog.csdn.net/andy_only/article/details/111319175 https://codeleading.com/article/40964498185/ 添加配置、重启ES https://github.com/elasticsearch-dump/elasticsearch-dump https://www.elastic.co/guide/en/logstash/6.7/plugins-inputs-elasticsearch.html?spm=a2c4e.10696291.0.0.34dd19a4GGsCSh https://bbs.huaweicloud.com/blogs/265963 https://www.51cto.

    2024年02月13日
    浏览(40)
  • k8s集群中部署项目之数据库准备

    同理 同理 同理 同理 同理

    2024年02月07日
    浏览(58)
  • java与es8实战之四:SpringBoot应用中操作es8(无安全检查)

    这里分类和汇总了欣宸的全部原创(含配套源码):https://github.com/zq2599/blog_demos 本篇是《java与es8实战》系列的第四篇,系列文章写到现在,连个HelloWorld都没运行起来,实在说不过去了... 因此,本篇总体目标明确:实战在SpringBoot应用中操作elasticsearch8 为了降低难度,本篇部署的

    2024年02月11日
    浏览(40)
  • Java与es8实战之二:Springboot集成es8的Java Client

    配置springboot的application.yml 配置es的自签证书 执行如下命令将es容器中的crt文件复制到本地 docker cp 容器名称:/usr/share/elasticsearch/config/certs/http_ca.crt . 将crt文件放至springboot项目的resource路径下

    2024年02月12日
    浏览(42)
  • 部署LNP+Redis、创建Redis集群、连接集群、集群工作原理

    常用命令的使用 64 配置64本机的nginx网站服务可以把数据存储在本机的内存里 在64运行nginx服务,并配置可以解析php脚本 在64主机运行redis服务,并允许在127地址连接服务 修改服务运行参数 部署LNP + Redis 配置nginx网站的php脚本可以连接redis服务 存储数据 在64部署LNP环境 安装源

    2024年01月23日
    浏览(34)
  • docker 部署 ES集群

    在/opt/software 目录下新建docker目录,上传docker_build.sh脚本并执行 在/opt/software/es/config下新建 elasticsearch.yml 文件并编辑 每台服务器注意区分节点名称及IP root用户修改/etc/security/limits.conf,添加如下,提高进程及资源使用限制上限 执行命令使其生效 修改/etc/systemd/system.conf,添加

    2023年04月15日
    浏览(43)
  • ES的集群部署

    2.1、elasticsearch.yml配置 2.1.1、cluster.name与node.name 2.1.2、node.master与node.data 2.1.3、network.host 2.1.3、path.data(要加上全路径/usr/local/elasticsearch-7.6.2,否则会找不到路径) 2.1.3、path.logs(要加上全路径/usr/local/elasticsearch-7.6.2,否则会找不到路径) 2.1.4、discovery.seed_hosts   2.1.5、action

    2024年02月15日
    浏览(49)
  • ES集群部署说明

    集群(cluster) ES的一个概念就是去中心化,字面上理解就是无中心节,与集群中任何一个节点的通信和与整个集群通信是等价的。 2、节点(node) ES集群中节点粗略分为: 1)候选主节点(主要负责主节点选举,被选举成为主节点后,管理集群变更,如创建或删除索引,跟踪

    2023年04月18日
    浏览(37)
  • ES8生产实践——pod日志采集(Fluentd方案)

    Fluentd是一个是一个开源的日志收集和传输工具,旨在解决日志数据的收集、传输和处理问题,它可以收集来自于各种系统或应用的日志,转化为用户指定的格式后,转发到用户所指定的日志存储系统之中。 用图来说明问题的话,在没有使用之前Fluentd,日志采集过滤存储流程

    2024年02月09日
    浏览(42)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包