1. Toy模板网首页
  2. > Toy博客

记录Elasticsearch circuit_breaking_exception异常解决

10月前 作者：csdn_chshuai 分类：Toy博客 阅读(43) 违法举报

这篇具有很好参考价值的文章主要介绍了记录Elasticsearch circuit_breaking_exception异常解决。希望对大家有所帮助。如果存在错误或未考虑完全的地方，请大家不吝赐教，您也可以点击"举报违法"按钮提交疑问。

业务场景：

Flink消费Kafka数据写入ES

组件版本：

CDH：6.3.0

Flink：1.12.1

Elasticsearch:7.7.0

异常明细

Caused by: ElasticsearchStatusException[Elasticsearch exception [type=circuit_breaking_exception, reason=[parent] Data too large, data for [<http_request>] would be [1979396994/1.8gb], which is larger than the limit of [1972122419/1.8gb], real usage: [1977917952/1.8gb], new bytes reserved: [1479042/1.4mb], usages [request=0/0b, fielddata=4008586/3.8mb, in_flight_requests=7691406/7.3mb, accounting=6917604/6.5mb]]]

异常原因

由于ES有熔断器机制，一旦内存使用超过熔断器的限则将会触发熔断，不再响应任何请求，导致程序终止，但ES健康情况不受影响。
日志显示实际使用量[1979396994/1.8gb]已经超过了限制[1972122419/1.8gb]，故触发熔断机制。

解决办法

1、调大ES JVM堆内存
ES默认是2g，根据服务器配置做调整，一般建议为服务器内存的一半，并且建议Xms与Xmx大小一致。

（1）散搭ES修改方式：编辑jvm.options

（2）CDH修改方式：
记录Elasticsearch circuit_breaking_exception异常解决
详细内存配置说明可参考：
https://blog.csdn.net/duanzelun/article/details/106948808

2、调大字段数据熔断器(写场景)
如果服务器没有足够的内存可考虑此选项，indices.breaker.fielddata.limit默认为堆内存的40%，可做适当调整。文章来源地址https://www.toymoban.com/news/detail-420084.html

到了这里，关于记录Elasticsearch circuit_breaking_exception异常解决的文章就介绍完了。如果您还想了解更多内容，请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章，希望大家以后多多支持TOY模板网！

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处： 如若内容造成侵权/违法违规/事实不符，请点击违法举报进行投诉反馈，一经查实，立即删除！

分享到：
领支付宝红包 赞助服务器费用

相关文章

  • java try throw exception finally 遇上 return break continue造成异常丢失

    java try throw exception finally 遇上 return break continue造成异常丢失

        如下所示，是一个java笔试题，考察的是抛出异常之后，程序运行结果，但是这里抛出异常，并没有捕获异常，而是通过finally来进行了流程控制处理。     运行程序，打印结果如下所示：       这里结果有些出人意料，并没有打印异常信息，其实就是try finally遇到了con

    2024年02月08日
    浏览(45)

  • elasticsearch 7.12.1报错处理：ElasticsearchStatusException[Elasticsearch exception [type=parse_exception]

    提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 最近在使用RestHighLevelClient测试后端数据时，遇到如下一个报错： 问题出在我没有给 geoDistanceQuery 设置中心坐标 设置中心坐标后问题得到解决。 以下是elastic客户端查询索引的代码

    2024年02月16日
    浏览(44)
  • Elasticsearch8.6启动异常：fatal exception while booting Elasticsearch

    Elasticsearch8.6启动异常：fatal exception while booting Elasticsearch

    fatal exception while booting Elasticsearch java.nio.file.InvalidPathException: Trailing char at index 48: C:Program FilesJavajdk1.8.0_181libtools.jar at sun.nio.fs.WindowsPathParser.normalize(WindowsPathParser.java:191) ~[?:?] at sun.nio.fs.WindowsPathParser.parse(WindowsPathParser.java:153) ~[?:?] at sun.nio.fs.WindowsPathParser.parse(WindowsPathParse

    2024年02月04日
    浏览(44)

  • ElasticsearchStatusException[Elasticsearch exception [type=mapper_parsing_exception, reason=failed t

    今天在用java写代码查ES中数据的时候，出现了下面提示的错误，我排查了一会才发现问题 ES中地理坐标属性location的数据结构是 （纬度，经度） ，而我在进行字符串拼接的时候后了中间的逗号，导致插入数据错误。下面就是上面那一段代码真正有用的部分。 真正错误原因：

    2024年02月11日
    浏览(58)

  • ES排序报错:Elasticsearch exception [type=illegal_argument_exception, reason=Text

    翻译过来就是： 对于需要每个文档字段数据(如聚合和排序)的操作，文本字段没有进行优化，因此这些操作在默认情况下是禁用的。请使用字段代替。或者，在[createTime]上设置fielddata=true，以便通过反求倒排索引来加载字段数据。注意，这可能会使用有效内存。] 更改后

    2024年02月11日
    浏览(72)
  • 操作elasticsearch出现cluster_block_exception

    操作elasticsearch出现cluster_block_exception

    在操作ES的时候报403的错误并且提示 reason blocked by FORBIDDEN/12/index read-only / allow delete 主要是ES存储空间不足，es触发了自动保护机制，将索引设置为只读模式 PUT 地址/ 索引 / _settings 我使用的是谷歌插件elasticsearch-head

    2024年02月17日
    浏览(37)
  • Caused by: ElasticsearchException[Elasticsearch exception [type=mapper_parsing_exception, reason=Roo

    Caused by: ElasticsearchException[Elasticsearch exception [type=mapper_parsing_exception, reason=Roo

     我们在使用RestClient创建索引库时出现了这个错误。 可以检查一下 CreateIndexRequest 类型变量request 是否导入正确的包 有两个同名的包，我们选择： import org.elasticsearch.client.indices.CreateIndexRequest;     测试成功  创建的DSL的索引库  以上解决办法参考 Elasticsearch exception [type=mapp

    2024年01月23日
    浏览(55)
  • Elasticsearch exception [type=search_phase_execution_exception, reason=all shards failed]

    Elasticsearch exception [type=search_phase_execution_exception, reason=all shards failed]

    Elasticsearch exception [type=search_phase_execution_exception, reason=all shards failed] 今天在做项目遇到这个问题，Es那边出现了问题，谷粒商城去Es中查数据的时候，根据品牌id去查询数据报错。   {\\\"error\\\":{\\\"root_cause\\\":[{ \\\"type\\\":\\\"query_shard_exception\\\",\\\"reason\\\":\\\"failed to create query: {n  \\\"bool\\\" : {n    \\\"fil

    2024年02月02日
    浏览(45)
  • Elasticsearch exception [type=index_not_found_exception, reason=no such index [**]]

    Elasticsearch exception [type=index_not_found_exception, reason=no such index [**]]

     1.代码运行出现找不到Index，先排除index是否存在。   2.springboot和ES映射，默认是把对象类型映射为index，class对象默认是大写开头，所以要看是都是因为大小写不匹配。如若因为大小写原因导致，可以通过@Document注解指定index  

    2024年02月14日
    浏览(48)
  • org.elasticsearch.ElasticsearchStatusException: Elasticsearch exception [type=illegal_argument_excep

    org.elasticsearch.ElasticsearchStatusException: Elasticsearch exception [type=illegal_argument_excep

    org.elasticsearch.ElasticsearchStatusException: Elasticsearch exception [type=illegal_argument_exception, reason=request [/zc/_search] contains unrecognized parameters: [ccs_minimize_roundtrips], [ignore_throttled]] 原因： 该异常是由于在对索引进行搜索请求时，使用了不被识别的参数导致的。具体来说，异常信息中列出了两

    2024年02月08日
    浏览(45)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包，优惠每天领

二维码1

领取红包

二维码2

领红包