shell脚本批量删除es索引的方法

发现elasticsearch集群的状态是red，unassign的分片数很多，看了下都是些旧的日期的索引（应该是定时任务删除失败导致的）。

curl -xget ip:port/_cat/shards | grep unassigned

数量有几百个，写个脚本处理下，先恢复成green。red状态好像会影响索引创建和数据迁移

先把需要删除的索引导出到文件

curl -xget ip:port/_cat/shards | grep unassigned >> needdelindex.txt

确认下要删除的索引列表。没问题就执行下面删除shell（es的ip和端口需要修改下）

#!/bin/bash
echo "$1"
esurl=${esip}:${esport}
indexfile=needdelindex.txt
#cp -f /dev/null ${indexfile}
#curl -xget ip:port/_cat/shards | grep unassigned >> needdelindex.txt
if [ ! -f ./${indexfile} ]; then
  echo $indexfile not exists
  exit 0
fi
logfile=esindex_del.`date +"%m-%d"`.log
cp -f /dev/null ${logfile}
lastindexname="test"
for item in `cat ${indexfile} | awk '{print $1}'`
do
  if [ "$item" = "error" ]
  then
    continue
  fi
  if [ "$item" != "$lastindexname" ]
  then
    curl -xdelete ${esurl}/${item} >> ${logfile}
    echo ---------${item} `date` >> ${logfile}
    sleep 5
  fi
  lastindexname=${item}
done

因为我们的索引是按天创建的，索引名前缀是yyyy-mm-dd, 保留一段时间后需要批量删除。shell的第一个参数为yyyy-mm-dd，将删除该天及以前的旧索引

#!/bin/bash
esurl=${esip}:${esport}
echo "$1"
if [ $# -ge 1 ]
then
  deletedate=$1
else
  echo "please inpust detete esindex's date(yyyy-mm-dd)"
  exit 0
fi
indexfile=esindex.info
cp -f /dev/null ${indexfile}
curl '${esurl}/_cat/indices' >> ${indexfile}
logfile=esindex_del.`date +"%m-%d"`.out
cp -f /dev/null ${logfile}
for item in `cat ${indexfile} | awk '{print $3}'`
do
  if [ "$item" = "error" ]
  then
    continue
  fi
  parameter=${esurl}/${item}
  indexdate=${item:0:10}
  if [ "$indexdate" = "$deletedate" ]
  then
    curl -xdelete ${parameter} >> ${logfile}
    echo ---------${item} >> ${logfile}
    sleep 5
  elif [[ "$indexdate" < "$deletedate" ]]
  then
    curl -xdelete ${parameter} >> ${logfile}
    echo ---------${item} >> ${logfile}
    sleep 5
  fi
done

总结

以上就是这篇文章的全部内容了，希望本文的内容对大家的学习或者工作具有一定的参考学习价值，谢谢大家对的支持。如果你想了解更多相关内容请查看下面相关链接