使用shell脚本清理ElasticSearch历史数据

2021-08-20 08:34:27 阅读：264 来源： 互联网

标签：shell False echo ElasticSearch FILE action home 历史数据 yml

shell脚本内容如下：

#!/bin/bash
#
# 脚本名：clean.sh
# 功能：用于清理日志数据
# 作者：Varden

CONFIG_FILE=/home/scripts/config.yml
ACTION_FILE=/home/scripts/action_file.yml

/usr/bin/curator --config $CONFIG_FILE $ACTION_FILE

echo "---"
echo "删除2个月之前的日志数据："
_last_data=`date -d '-2 months' +%Y.%m`
curl -XDELETE "http://127.0.0.1:9200/filebeat-7.4.0-${_last_data}.*"
echo
curl -XDELETE "http://127.0.0.1:9200/k8s-${_last_data}.*"
echo

# 脚本结束

/home/scripts/config.yml文件内容如下：

---
# Remember, leave a key empty if there is no value.  None will be a string,
# not a Python "NoneType"
client:
  hosts:
    - es-server-data1
    - es-server-data2
    - es-server-data3
  port: 9200
  url_prefix:
  use_ssl: False
  certificate:
  client_cert:
  client_key:
  ssl_no_validate: False
  http_auth:
  timeout: 30
  master_only: False

logging:
  loglevel: INFO
  logfile:
  logformat: default
  blacklist: ['elasticsearch', 'urllib3']

/home/scripts/action_file.yml文件内容如下：

---
# Remember, leave a key empty if there is no value.  None will be a string,
# not a Python "NoneType"
#
# Also remember that all examples have 'disable_action' set to True.  If you
# want to use this action as a template, be sure to set this to False after
# copying it.
actions:
  1:
    action: delete_indices
    description: "Clean up ES by deleting old indices"
    options:
      timeout_override:
      continue_if_exception: False
      disable_action: False
      ignore_empty_list: True
    filters:
    - filtertype: age
      source: name
      direction: older
      timestring: '%Y.%m.%d'
      unit: days
      unit_count: 15
      field:
      stats_result:
      epoch:
      exclude: False

标签：shell,False,echo,ElasticSearch,FILE,action,home,历史数据,yml
来源： https://www.cnblogs.com/varden/p/15164821.html

本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享；
2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关；
3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关；
4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除；
5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

ICode9

使用shell脚本清理ElasticSearch历史数据