十、ElasticSearch 实战 - 源码运行

这篇具有很好参考价值的文章主要介绍了十、ElasticSearch 实战 - 源码运行。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

一、概述

想深入理解 Elasticsearch,了解其报错机制,并有针对性的调整参数,阅读其源码是很有必要的。此外,了解优秀开源项目的代码架构,能够提高个人的代码架构能力

阅读 Elasticsearch 源码的第一步是搭建调试环境,参考 <编译调试Elasticsearch 6.3.2源码> 这篇文章完成了对 7.10.2 版本源码的调试工作

二、软件环境

  • 操作系统:win11
  • Elasticsearch 源码版本:7.10.2
  • JDK版本:11.0.18
  • Gradle版本:4gradle-6.6.1-all.zip
  • IntelliJ IDEA 版本:2022.3.2
1. JDK 环境安装

Java SE Downloads 地址:http://www.oracle.com/technetwork/java/javase/downloads/index.html
环境配置教程参考

2. Elasticsearch源码
  • Elasticsearch github 源码托管地址:https://github.com/elastic/elasticsearch.git

elasticsearch 源码 7.10.2 版本的资源也可以从 CSDN 下载

3. Gradle 的安装包
  1. 查看 elasticsearch\gradle\wrapper\gradle-wrapper.properties 发现如下配置:
    • distributionUrl=https\://services.gradle.org/distributions/gradle-6.6.1-all.zip
  2. 根据 https\://services.gradle.org/distributions/gradle-6.6.1-all.zip 网址下载 Gradle 的安装包
    • wget https://services.gradle.org/distributions/gradle-6.6.1-all.zip
    • 注意:强烈建议使用魔法
  3. 放置 gradle-6.6.1-all.zip 文件:
    • 复制 gradle-6.6.1-all.zipelasticsearch\gradle\wrapper 目录下,确保和 elasticsearch\gradle\wrapper\gradle-wrapper.properties 在同级目录。
  4. 修改 elasticsearch\gradle\wrapper\gradle-wrapper.properties 配置
    • distributionUrl=gradle-6.6.1-all.zip

三、源码运行配置

1. IDEA 导入源码项目

IDEA:File->Open->选中es源码路径下build.gradle->Open as Project
十、ElasticSearch 实战 - 源码运行
十、ElasticSearch 实战 - 源码运行

2. 配置JDK

在 Project Structure 中选择JDK版本
十、ElasticSearch 实战 - 源码运行

3. Import gradle project

关闭 IDEA,重新打开即可,
十、ElasticSearch 实战 - 源码运行
这个过程还是需要等一小会的
十、ElasticSearch 实战 - 源码运行

4. 添加源码运行依赖
  1. elasticsearch 源码运行依赖 config 和 modules ,否则启动失败。
    • 下载与 elasticsearch 源码同版本windows安装包。
    • 创建 home 目录,将同版本 windows 安装包的 configmodules 目录拷贝到 home 目录下。
  2. elasticsearch 源码运行添加安全策略,否则启动失败。
    • config 目录下新建 java.policy 文件,内容如下
    grant {
        permission javax.management.MBeanTrustPermission "register";
        permission java.lang.RuntimePermission "createClassLoader";
        permission java.lang.RuntimePermission "setContextClassLoader";
        permission java.lang.RuntimePermission "getClassLoader";
    };
    
5. 配置启动参数
  1. 修改运行设置添加系统参数(推荐)

    • 在 IDEA 中 Run/Debug ConfigurationsVM options:添加如下 VM 启动参数
    -Des.path.conf=E:\Workshop\JAVA\elasticsearch-7.10.2\home\config
    -Des.path.home=E:\Workshop\JAVA\elasticsearch-7.10.2\home
    -Djava.security.policy=E:\Workshop\JAVA\elasticsearch-7.10.2\home\config\java.policy
    -Dlog4j2.disable.jmx=true
    
  2. 修改源码添加系统参数(偶尔会失败)

    • 在 elasticsearch 源码 elasticsearch-7.10.2/server/src/main/java/org/elasticsearch/bootstrap/Elasticsearch.java 文件中添加如下系统参数:
    public static void main(final String[] args) throws Exception {
    
    		// 参数配置
    		System.setProperty("es.path.conf","E:\\Workshop\\JAVA\\elasticsearch-7.10.2\\home\\config");
    		System.setProperty("es.path.home", "E:\\Workshop\\JAVA\\elasticsearch-7.10.2\\home");
    		System.setProperty("java.security.policy", "E:\\Workshop\\JAVA\\elasticsearch-7.10.2\\home");
            overrideDnsCachePolicyProperties();
            
        }
    
6. 修改运行设置

十、ElasticSearch 实战 - 源码运行

  1. 配置 Main class -> elasticsearch.benchmarks.main -> org.elasticsearch.bootstrap.Elasticsearch
  2. Modify options -> 添加 Add dependencies with "Provided" scope to classpath
7. 启动 elasticsearch

运行 Elasticsearch.main() 方法,启动 elasticsearch十、ElasticSearch 实战 - 源码运行

启动成功,访问 http://localhost:9200,返回如下:

{
  "name": "",
  "cluster_name": "elasticsearch",
  "cluster_uuid": "xrqe0WBqRACiBncjj-ANuA",
  "version": {
    "number": "7.10.2",
    "build_flavor": "unknown",
    "build_type": "unknown",
    "build_hash": "unknown",
    "build_date": "unknown",
    "build_snapshot": true,
    "lucene_version": "8.7.0",
    "minimum_wire_compatibility_version": "6.8.0",
    "minimum_index_compatibility_version": "6.0.0-beta1"
  },
  "tagline": "You Know, for Search"
}

十、ElasticSearch 实战 - 源码运行
开心!

四、错误调整

1. 错误一

ERROR: the system property [es.path.conf] must be set

  • 问题原因:
    未配置 es.path.conf 参数

  • 解决方法:
    参考 3.5 配置 es.path.conf 参数

2. 错误二

Exception in thread "main" java.lang.IllegalStateException: path.home is not configured

  • 问题原因:
    未配置 es.path.home 参数

  • 解决方法:
    参考 3.5 配置 es.path.home 参数

3. 错误三
2023-04-25 22:21:11,044 main ERROR Could not register mbeans java.security.AccessControlException: access denied ("javax.management.MBeanTrustPermission" "register")
	at java.base/java.security.AccessControlContext.checkPermission(AccessControlContext.java:472)
	at java.base/java.lang.SecurityManager.checkPermission(SecurityManager.java:358)
  • 问题原因:
    未设置安全策略文件 java.policy 或未设置 log4j2.disable.jmx=true

  • 解决方法:
    参考 3.5 配置 security.policy 参数

4. 错误四
[2023-04-25T22:27:38,439][ERROR][o.e.b.ElasticsearchUncaughtExceptionHandler] [] fatal error in thread [main], exiting
java.lang.NoClassDefFoundError: org/elasticsearch/plugins/ExtendedPluginsClassLoader
  • 问题原因:
    IDEA 启动选项中未添加 Add dependencies with "Provided" scope to classpath

  • 解决方法:
    参考 3.6 修改运行设置文章来源地址https://www.toymoban.com/news/detail-446196.html

到了这里,关于十、ElasticSearch 实战 - 源码运行的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 深入理解Elasticsearch

    Elasticsearch是一个分布式、实时的搜索和分析引擎,基于Lucene库开发。它可以处理大量数据,提供快速、准确的搜索结果。在本文中,我们将深入探讨Elasticsearch的核心概念、算法原理、最佳实践和实际应用场景。 Elasticsearch起源于2010年,由Elastic Company开发。它初衷是解决实时

    2024年02月19日
    浏览(18)
  • 深入理解Elasticsearch分片

    了解分片的基本原理,对Elasticsearch性能调优有帮助。 ES底层使用的是Lucene库,ES的分片(shard )是Lucene的索引,ES的索引是分片的集合,Lucene的索引是由多个段(segment)组成。 Per-segment search,也即 按段搜索 ,是Lucene中的概念。每个段本身就是一个倒排索引,Lucene中的索引除

    2024年01月22日
    浏览(32)
  • 【ES】Elasticsearch-深入理解索引原理

    索引(Index) ES将数据存储于一个或多个索引中,索引是具有类似特性的文档的集合。类比传统的关系型数据库领域来说,索引相当于SQL中的一个数据库,或者一个数据存储方案(schema)。索引由其名称(必须为全小写字符)进行标识,并通过引用此名称完成文档的创建、搜索、更新

    2024年02月04日
    浏览(34)
  • 深入理解Elasticsearch的索引映射(mapping)

    当我们谈论Elasticsearch时,索引映射是一个核心概念,它定义了如何存储和检索数据。在Elasticsearch 7.6及更高版本中,映射提供了一系列强大的功能,使您能够精确地控制数据的结构和行为。本文将详细介绍映射的关键属性、用途以及如何正确设置和优化它。 在Elasticsearch中,

    2024年02月22日
    浏览(36)
  • 【JVM】(一)深入理解JVM运行时数据区

    JVM 是 Java 程序的运行基础和运行环境,同时也是 Java 实现 \\\"一次编译,到处运行\\\" 的关键所在。因此,深入了解 JVM 对于学习和理解 Java 编程语言是至关重要的,那么JVM 到底是如何运行的呢? 下面这张图片展示了 JVM 的基本运行过程: JVM的执行过程涉及以下主要组成部分::

    2024年02月14日
    浏览(28)
  • 深入理解Flink IntervalJoin源码

    IntervalJoin基于connect实现,期间会生成对应的IntervalJoinOperator。 并且会根据给定的自定义Function构建出对应的TwoInputTransformation,以便能够参与Transformation树的构建。 作为ConnectedStreams,一旦left or right流中的StreamRecord抵达,就会被及时处理: 两者的处理逻辑是相同的: 先取出当

    2024年02月12日
    浏览(27)
  • jvm复习,深入理解java虚拟机一:运行时数据区域

            程序计数器 (Program Counter Register) 它是程序控制流的指示器,简单来说,为了线程切换后能恢复到正确的执行位置,每条线程都需要有一个独立的程序计数器          Java虚拟机栈 (Java Virtual Machine Stack)也是线程私有的,它的生命周期 与线程相同。虚拟机栈描述

    2024年01月22日
    浏览(36)
  • 深入理解Python协程:从基础到实战

    title: 深入理解Python协程:从基础到实战 date: 2024/4/27 16:48:43 updated: 2024/4/27 16:48:43 categories: 后端开发 tags: 协程 异步IO 并发编程 Python aiohttp asyncio 网络爬虫 协程(Coroutines)是一种特殊的软件构造,它允许程序在执行过程中暂停并恢复执行,而不会丢失当前的执行上下文。与线

    2024年04月27日
    浏览(20)
  • “深入探索JVM内部机制:理解Java虚拟机的运行原理“

    标题:深入探索JVM内部机制:理解Java虚拟机的运行原理 摘要:本篇博客将深入探索Java虚拟机(JVM)的内部机制,帮助读者理解JVM的运行原理。我们将介绍JVM的组成结构,包括类加载器、运行时数据区域和执行引擎,并通过示例代码解释这些概念的具体应用。 正文: 一、J

    2024年02月11日
    浏览(30)
  • 【排序算法】 归并排序详解!深入理解!思想+源码实现!

    🎥 屿小夏 : 个人主页 🔥个人专栏 : 算法—排序篇 🌄 莫道桑榆晚,为霞尚满天! ​ 什么是归并?通过归并排序就能让数据有序?分治法是怎么在归并排序上应用的?本文将对归并排序进行细致入微的讲解,庖丁解牛般让你彻底明白归并排序! 归并排序(MERGE-SORT)是建

    2024年02月06日
    浏览(31)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包