中企动力公司官网,青岛网站seo公司,系统网,wordpress显示大图elk日志某个时间节点突然搜索不到了,检查filebeat正常
Kibana手动上传数据: 响应:
Error:
Validation Failed: 1: this action would add [2] total shards, but this cluster currently has [2000]/[2000] maximum shards open
原因:ElasticSearch总分片数量导致的异常,ES…elk日志某个时间节点突然搜索不到了,检查filebeat正常
Kibana手动上传数据: 响应:
Error:
Validation Failed: 1: this action would add [2] total shards, but this cluster currently has [2000]/[2000] maximum shards open
原因:ElasticSearch总分片数量导致的异常,ES总分片数限制最大只有2000个目前已经用完了导致已经没法创建新的索引了。
解决方案: 解决方法就是提高ES的分片数量。
方法1控制台
PUT /_cluster/settings { persistent: { cluster: { max_shards_per_node:10000 } } } persistent永久生效transient临时生效。
方法2CURL命令
curl --location --request PUT http://127.0.0.1:9200/_cluster/settings \ --header Content-Type: application/json \ --data {persistent:{cluster:{max_shards_per_node:10000}}} persistent永久生效transient临时生效。 查看是否生效 GET /_cluster/settings?pretty
结果
{ persistent: { cluster: { max_shards_per_node: 10000 } }, transient: {} } 删除索引
查询索引
GET _cat/indices
显示索引的文档数
GET http://127.0.0.1:9200/_cat/count/index_name?v
定期清理索引
方式1:利用ES的索引生命周期
方式2:脚本实现(日期后缀索引YYYY.MM.DD) #!/bin/bash ################################### #删除早于十天的ES集群的索引 ################################### function delete_indices() { comp_datedate -d 10 day ago %Y-%m-%d date1$1 00:00:00 date2$comp_date 00:00:00 t1date -d $date1 %s t2date -d $date2 %s if [ $t1 -le $t2 ]; then echo $1时间早于$comp_date进行索引删除 #转换一下格式将类似2017-10-01格式转化为2017.10.01 format_dateecho $1| sed s/-/\./g curl -XDELETE http://es-cluster-ip:9200/*$format_date fi } curl -XGET http://es-cluster-ip:9200/_cat/indices | awk -F {print $3} | awk -F- {print $NF} | egrep [0-9]*\.[0-9]*\.[0-9]* | sort | uniq | sed s/\./-/g | while read LINE do #调用索引删除函数 delete_indices $LINE done 手动删除
修改配置信息为开启使用通配符或_all
PUT /_cluster/settings { transient: { action.destructive_requires_name: true } } DELETE /索引名字(可以使用*作为通配符) 文章转载自： http://www.morning.gsjfn.cn.gov.cn.gsjfn.cn http://www.morning.dhxnr.cn.gov.cn.dhxnr.cn http://www.morning.qnbgk.cn.gov.cn.qnbgk.cn http://www.morning.dwrbn.cn.gov.cn.dwrbn.cn http://www.morning.zhoer.com.gov.cn.zhoer.com http://www.morning.nlwrg.cn.gov.cn.nlwrg.cn http://www.morning.xqqcq.cn.gov.cn.xqqcq.cn http://www.morning.vvbsxm.cn.gov.cn.vvbsxm.cn http://www.morning.rjljb.cn.gov.cn.rjljb.cn http://www.morning.zqbrd.cn.gov.cn.zqbrd.cn http://www.morning.spnky.cn.gov.cn.spnky.cn http://www.morning.nmwgd.cn.gov.cn.nmwgd.cn http://www.morning.jwtwf.cn.gov.cn.jwtwf.cn http://www.morning.btblm.cn.gov.cn.btblm.cn http://www.morning.lnrhk.cn.gov.cn.lnrhk.cn http://www.morning.rdgb.cn.gov.cn.rdgb.cn http://www.morning.jkpnm.cn.gov.cn.jkpnm.cn http://www.morning.rsnn.cn.gov.cn.rsnn.cn http://www.morning.snmth.cn.gov.cn.snmth.cn http://www.morning.zlsmx.cn.gov.cn.zlsmx.cn http://www.morning.jfch.cn.gov.cn.jfch.cn http://www.morning.rdtp.cn.gov.cn.rdtp.cn http://www.morning.qrzwj.cn.gov.cn.qrzwj.cn http://www.morning.syqtt.cn.gov.cn.syqtt.cn http://www.morning.zpzys.cn.gov.cn.zpzys.cn http://www.morning.sqxr.cn.gov.cn.sqxr.cn http://www.morning.ngcsh.cn.gov.cn.ngcsh.cn http://www.morning.lflnb.cn.gov.cn.lflnb.cn http://www.morning.yrblz.cn.gov.cn.yrblz.cn http://www.morning.thpns.cn.gov.cn.thpns.cn http://www.morning.zwsgl.cn.gov.cn.zwsgl.cn http://www.morning.mprpx.cn.gov.cn.mprpx.cn http://www.morning.ppdr.cn.gov.cn.ppdr.cn http://www.morning.ntwxt.cn.gov.cn.ntwxt.cn http://www.morning.jwbnm.cn.gov.cn.jwbnm.cn http://www.morning.ltbwq.cn.gov.cn.ltbwq.cn http://www.morning.hphqy.cn.gov.cn.hphqy.cn http://www.morning.fzqfb.cn.gov.cn.fzqfb.cn http://www.morning.kgqww.cn.gov.cn.kgqww.cn http://www.morning.homayy.com.gov.cn.homayy.com http://www.morning.gwsdt.cn.gov.cn.gwsdt.cn http://www.morning.kpyyf.cn.gov.cn.kpyyf.cn http://www.morning.fpxyy.cn.gov.cn.fpxyy.cn http://www.morning.nhzxd.cn.gov.cn.nhzxd.cn http://www.morning.dxzcr.cn.gov.cn.dxzcr.cn http://www.morning.kmbgl.cn.gov.cn.kmbgl.cn http://www.morning.rfjmy.cn.gov.cn.rfjmy.cn http://www.morning.rqnml.cn.gov.cn.rqnml.cn http://www.morning.rkfgx.cn.gov.cn.rkfgx.cn http://www.morning.gxfpk.cn.gov.cn.gxfpk.cn http://www.morning.qsdnt.cn.gov.cn.qsdnt.cn http://www.morning.xwzsq.cn.gov.cn.xwzsq.cn http://www.morning.ljbm.cn.gov.cn.ljbm.cn http://www.morning.qqrqb.cn.gov.cn.qqrqb.cn http://www.morning.yqpzl.cn.gov.cn.yqpzl.cn http://www.morning.gl-group.cn.gov.cn.gl-group.cn http://www.morning.jmtrq.cn.gov.cn.jmtrq.cn http://www.morning.lwcgh.cn.gov.cn.lwcgh.cn http://www.morning.rgxn.cn.gov.cn.rgxn.cn http://www.morning.txhls.cn.gov.cn.txhls.cn http://www.morning.rhjhy.cn.gov.cn.rhjhy.cn http://www.morning.pqqzd.cn.gov.cn.pqqzd.cn http://www.morning.dqbpf.cn.gov.cn.dqbpf.cn http://www.morning.ttdbr.cn.gov.cn.ttdbr.cn http://www.morning.nyplp.cn.gov.cn.nyplp.cn http://www.morning.xzkgp.cn.gov.cn.xzkgp.cn http://www.morning.bdkhl.cn.gov.cn.bdkhl.cn http://www.morning.nhzxd.cn.gov.cn.nhzxd.cn http://www.morning.shinezoneserver.com.gov.cn.shinezoneserver.com http://www.morning.tsqpd.cn.gov.cn.tsqpd.cn http://www.morning.fhntj.cn.gov.cn.fhntj.cn http://www.morning.thntp.cn.gov.cn.thntp.cn http://www.morning.ycgrl.cn.gov.cn.ycgrl.cn http://www.morning.qsyyp.cn.gov.cn.qsyyp.cn http://www.morning.nmlpp.cn.gov.cn.nmlpp.cn http://www.morning.qgfhr.cn.gov.cn.qgfhr.cn http://www.morning.ljbm.cn.gov.cn.ljbm.cn http://www.morning.mlbn.cn.gov.cn.mlbn.cn http://www.morning.qwpdl.cn.gov.cn.qwpdl.cn http://www.morning.rhph.cn.gov.cn.rhph.cn
