this cluster currently has [1946]/[1000] maximum shards open

一、Elasticsearch报错

[2020-05-03T11:23:43,758][WARN ][o.e.x.m.e.l.LocalExporter] [node-1] unexpected error while indexing monitoring document
org.elasticsearch.xpack.monitoring.exporter.ExportException: org.elasticsearch.common.ValidationException: Validation Failed: 1: this action would add [1] total shards, but this cluster currently has [1000]/[1000] maximum shards open

二、原因

ElasticSearch 7.x 如果没有配置 cluster.max_shards_per_node ，默认的分片数是1000。

三、方法

1、控制台

PUT /_cluster/settings
{"persistent": {"cluster": {"max_shards_per_node":10000}}
}

2、修改配置文件

# vim elasticsearch.yml
cluster.max_shards_per_node: 10000

3、shell命令

curl -X PUT "192.168.1.107:9200/_cluster/settings" -H 'Content-Type: application/json' -d'
{"persistent" : {"cluster.max_shards_per_node" : "5000"}
}
'

persistent:永久生效，

transient：临时生效

四、优化实践

如果现在你的场景是分片数不合适了，但是又不知道如何调整，那么有一个好的解决方法就是按照时间创建索引，然后进行通配查询。如果每天的数据量很大，则可以按天创建索引，如果是一个月积累起来导致数据量很大，则可以一个月创建一个索引。如果要对现有索引进行重新分片，则需要重建索引。

对于分片数的大小，业界一致认为分片数的多少与内存挂钩，认为 1GB 堆内存对应 20-25 个分片。因此，具有30GB堆的节点最多应有600个分片，但是越低于此限制，您可以使其越好。而一个分片的大小不要超过50G，通常，这将有助于群集保持良好的运行状况。

this cluster currently has [1946]/[1000] maximum shards open相关推荐

elasticsearch最大节点数_记录 Elasticsearch 的 maximum shards open 问题
问题背景某天打开 Jaeger UI 后,发现里面没有任何数据了,这是个奇怪的问题. 然后立马上服务器检查了 jaeger-collector, jaeger-agent, jaeger-query ...
ES报错this action would add [2] total shards, but this cluster currently has [5000]/[5000] maximum sha
文章目录版本es742,在使用logstash写索引的时候,突然发现logstash日志在报错报错信息: [2020-06-17T12:01:18,241][WARN ][logstash.out ...
es Failed: 1: this action would add [2] total shards, but this cluster currently has [1001]/[1000]
你用的7版本以上的elasticsearch吧,默认只允许1000个分片,问题是因为集群分片数不足引起的. 现在在elasticsearch.yml中定义 PUT /_cluster/settings ...
ElasticSearch--解决this action would add [5] total shards, but this cluster currently has [1000]/[1000
原文网址:ElasticSearch--解决this action would add [5] total shards, but this cluster currently has [1000]/ ...
skywalking内部测试服务器安装记录
skywalking内部测试服务器安装记录 1.yum install java-1.8.0-openjdk* -y 安装java1.8包 2.yum install net-tools 目前这个之前 ...
linux终端设置es副本数,elasticsearch之修改shards数
问题发现: kibana界面无日志数据展示 ES.kibana.logstash.filebeat等组件都运行正常通过查看日志最终在logstash的日志中发现大量的以下内容报错: this act ...
ES修改集群最大分片数量max_shards_per_node
推荐阅读 Helm3(K8S 资源对象管理工具)视频教程:https://edu.csdn.net/course/detail/32506 Helm3(K8S 资源对象管理工具)博客专栏:https: ...
Docker软件安装文档
软件安装文档文章目录软件安装文档虚拟机安装系统死锁问题 JDK11安装 Docker安装 Docker-Compose安装 MySQL安装 MySQL8安装 Docker-Compose安装M ...
ElasticSearch--性能优化相关的配置
原文网址:ElasticSearch--性能优化相关的配置_IT利刃出鞘的博客-CSDN博客简介本文介绍ElasticSearch中性能优化有关的配置. 相关的配置有: 内存大小批量写的数量索 ...

this cluster currently has [1946]/[1000] maximum shards open

this cluster currently has [1946]/[1000] maximum shards open相关推荐

最新文章

热门文章