一鍵清理Nexus倉庫

一鍵清理Nexus倉庫

• 現許多團隊使用 Nexus 來管理 Docker 鏡像，產品不斷迭代，鏡像倉庫佔用的磁盤空間也越來越大。
• 由於 Nexus 的控制檯並未提供批量操作鏡像功能，清理鏡像十分不便。
• 本文分享一個清理 Nexus 中 Docker 鏡像的小工具 — nexus-cli

可參考 nexus-cli 的相關資料，nexus-cli GitHub、開發者博客原文、Nexus 官方博客文章

下載腳本並授權

wget https://s3.eu-west-2.amazonaws.com/nexus-cli/1.0.0-beta/linux/nexus-cli 
chmod +x nexus-cli

# 將工具放置/usr/local/bin下
mv nexus-cli /usr/local/bin/

配置待清理的庫

$ nexus-cli configure
Enter Nexus Host: http://127.0.0.1:8081
Enter Nexus Repository Name: demo
Enter Nexus Username: admin
Enter Nexus Password: xxxxxx

http://127.0.0.1:8081 是 Nexus 服務的地址，爲了安全，可以直接在 Nexus 所在的機器處理

列出所有鏡像

$ nexus-cli image ls
xxl-job-demo 
xxl-job-testing
zjyz-auth-demo
...

這裏僅列出三個作爲例子。

清理鏡像

nexus-cli image delete -name $IMAGE_NAME -keep $X，-keep $X 表示保留幾個tag

清理單個鏡像的tag，這裏僅保留最新的兩個tag

$ nexus-cli image delete -name xxl-job-demo -keep 2
xxl-job-demo:2018.11.1-113322 image will be deleted ...
xxl-job-demo:2018.11.1-113322 has been successful deleted
xxl-job-demo:2018.11.1-145912 image will be deleted ...
xxl-job-demo:2018.11.1-145912 has been successful deleted
...

清理所有鏡像的tag，結合 sublime 的批量處理功能，十分方便.

清理磁盤空間

最後，創建兩個Nexus Task 來清理物理空間

• 先運行 Purge unused docker manifests and images

• 再運行 Compact blob store。
  

此時，可以查看磁盤目錄 sonatype-work/nexus3/blobs/ 的磁盤佔用情況。

$ du -lh --max-depth=1 . | grep demo
2.1G    ./demo

小結

由於開發測試環境中應用迭代非常頻繁，鏡像消耗磁盤的速度也非常快。若磁盤空間足夠，每隔一定時間手工清理即可；若需要頻繁清理，使用腳本自動化處理也十分方便

下面附上腳本操作！

---

創建倉庫信息文件

$ vim repo_list.txt
docker_hosted:1
docker_prod:2

內容格式 — 倉庫名稱:保留tag數

創建Shell腳本

#!/usr/bin/env bash

image_file=image.txt
CLI=`which nexus-cli`
NexusUserName='admin'
NexusPwd='admin123'

# 指定要清理的Nexus庫地址
NEXUS_URL='http://172.16.7.6:8081'

# 獲取即將要清理的倉庫
NEXUS_Repository_NameList=`cat ./repo_list.txt`


# 配置nexus倉庫
nexus_configure(){
   
  # 自應答配置URL，Repository等信息
  expect -c "set timeout -1;
  spawn $CLI configure ;
  expect {
    *Host:* {send -- $NEXUS_URL\r;exp_continue;}
    *Name:* {send -- $1\r;exp_continue;}
    *Username:* {send -- $NexusUserName\r;exp_continue;}
    *Password:* {send -- $NexusPwd\r;exp_continue;}
    eof        {exit 0;}
  }";

  # 列出倉庫鏡像轉儲文件
  $CLI image ls > $1_$image_file
  sed -i '$d' $1_$image_file
  cat $1_$image_file | while read line
  do
    echo "start clean repoName：$1 image:  $line"
    $CLI image delete -name $line -keep $2
  done
}

# 讀取所有需要清理的倉庫，調用配置
clean_all_repository(){
   echo -e "\n----$(date '+%Y-%m-%d %H:%M:%S')\t Start cleanning-----\n"
   for Repository_KeepVn in $NEXUS_Repository_NameList; do #遍歷要清理的docker倉庫
       Repository=`echo ${Repository_KeepVn} | awk -F: '{print $1}'`
       keepVersion=`echo ${Repository_KeepVn} | awk -F: '{print $2}'`
       echo -e "--- Repository:$Repository\tkeepVersionNum:$keepVersion ---"
       
       # 將倉庫名，保留tag數作爲參數傳給內部方法
       nexus_configure $Repository  $keepVersion
   done
   echo -e "\n----$(date '+%Y-%m-%d %H:%M:%S')\t Clean Succ!-----\n"
}

clean_all_repository

清理成功日誌：

文首列舉的 nexus-cli 的資料中，有 nexus-cli 的更多操作命令，可自行參考。