您好,登錄后才能下訂單哦!
使用shell腳本怎么批量刪除es索引?相信很多沒有經驗的人對此束手無策,為此本文總結了問題出現的原因和解決方法,通過這篇文章希望你能解決這個問題。
發現elasticsearch集群的狀態是red,unassign的分片數很多,看了下都是些舊的日期的索引(應該是定時任務刪除失敗導致的)。
curl -XGET ip:port/_cat/shards | grep UNASSIGNED
數量有幾百個,寫個腳本處理下,先恢復成green。red狀態好像會影響索引創建和數據遷移
先把需要刪除的索引導出到文件
curl -XGET ip:port/_cat/shards | grep UNASSIGNED >> needDelIndex.txt
確認下要刪除的索引列表。沒問題就執行下面刪除shell(es的ip和端口需要修改下)
#!/bin/bash echo "$1" esUrl=${esip}:${esport} indexfile=needDelIndex.txt #cp -f /dev/null ${indexfile} #curl -XGET ip:port/_cat/shards | grep UNASSIGNED >> needDelIndex.txt if [ ! -f ./${indexfile} ]; then echo $indexfile not exists exit 0 fi logfile=esindex_del.`date +"%m-%d"`.log cp -f /dev/null ${logfile} lastIndexName="test" for item in `cat ${indexfile} | awk '{print $1}'` do if [ "$item" = "error" ] then continue fi if [ "$item" != "$lastIndexName" ] then curl -XDELETE ${esUrl}/${item} >> ${logfile} echo ---------${item} `date` >> ${logfile} sleep 5 fi lastIndexName=${item} done
因為我們的索引是按天創建的,索引名前綴是yyyy-MM-dd, 保留一段時間后需要批量刪除。shell的第一個參數為yyyy-MM-dd,將刪除該天及以前的舊索引
#!/bin/bash esUrl=${esip}:${esport} echo "$1" if [ $# -ge 1 ] then deleteDate=$1 else echo "please inpust detete esindex's date(yyyy-MM-dd)" exit 0 fi indexfile=esindex.info cp -f /dev/null ${indexfile} curl '${esUrl}/_cat/indices' >> ${indexfile} logfile=esindex_del.`date +"%m-%d"`.out cp -f /dev/null ${logfile} for item in `cat ${indexfile} | awk '{print $3}'` do if [ "$item" = "error" ] then continue fi parameter=${esUrl}/${item} indexdate=${item:0:10} if [ "$indexdate" = "$deleteDate" ] then curl -XDELETE ${parameter} >> ${logfile} echo ---------${item} >> ${logfile} sleep 5 elif [[ "$indexdate" < "$deleteDate" ]] then curl -XDELETE ${parameter} >> ${logfile} echo ---------${item} >> ${logfile} sleep 5 fi done
看完上述內容,你們掌握使用shell腳本怎么批量刪除es索引的方法了嗎?如果還想學到更多技能或想了解更多相關內容,歡迎關注億速云行業資訊頻道,感謝各位的閱讀!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。