docker脚本镜像同步

脚本简介

1. 基于运维统一脚本中，14、docker相关脚本下的镜像同步脚本
2. 系统版本Centos7

脚本注解

1. 该脚本为了减少认为修改镜像标签并推送至镜像仓库的冗余步骤，实现脚本一键式同步
2. 脚本通过docker pull拉取镜像，docker tag 修改镜像，docker push 推送镜像，docker rmi 删除镜像，实现镜像同步
3. 通过两种方式执行脚本：
   - sh Syncimages.sh harbor
   - sh Syncimages.sh run

1. run 手动修改脚本内变量后执行
2. harbor 通过harbor v2.0接口,获取镜像域名及信息后修改标签同步至其他镜像仓库中

前提准备

1. 镜像仓库（Harbor）登录，通过/etc/hosts文件填写harbor的域名，并通过docker login 域名登录
2. Harbor本人自动在主机上部署，用于部署harbor操作步骤自行百度

环境检查

如图所示，登录后可通过如下文件查看当前宿主机上登录的镜像仓库的信息

harbor镜像仓库界面

脚本变量修改

#################################################
#手动同步，需要提前修改，且镜像名称一一对应
#################################################
domain_old="registry.aliyuncs.com/google_containers" #待同步镜像的域名
image_name="pause:3.6 kube-apiserver:v1.19.0"        #镜像名称及版本，以空格为分隔符
#################################################################################
domain_new="registry.harbor.com:8081/test"           #通过镜像仓库的域名及项目名称,用于docker push
image_name_new="pause:3.6 kube-apiserver:v1.19.0"    #镜像名称及版本，以空格为分隔符，与上面一一对应
#Harbor信息
Harbor_Address=http://registry.harbor.com:8081      #Harbor主机地址，需要本地/etc/hosts解析
Harbor_domain="registry.harbor.com:8081"            #镜像域名，用于docker pull
Harbor_User=admin                                   #登录Harbor的用户
Harbor_Passwd=Harbor12345                           #登录Harbor的用户密码
Harbor_Project_List="bcbx"                          #Harbor项目名称，以空格未分隔，填写多个项目名称
1
2
3
4
5
6
7
8
9
10
11
12
13
14

执行方式

sh Syncimages.sh harbor 
sh Syncimages.sh run
1
2

验证脚本

1. 把镜像仓库中项目名称为bcbx下所有的镜像通过到test目录
2. 脚本执行前harbor镜像的数量如下图

执行脚本

执行结果

脚本内容

#!/bin/bash
#所有者：北城半夏
#
#当前版本
#v1.0.1
#################################################################################
#                                   定义变量                                    #
#################################################################################
#日志文件
bashpath="$(cd `dirname $0`;pwd)"
#bashpath="/root/run/log/docker"
[ -d ${bashpath} ] || mkdir -p ${bashpath}
Images_File=${bashpath}/harbor-images-`date '+%Y-%m-%d'`.txt
#################################################
#手动同步，需要提前修改，且镜像名称一一对应
domain_old="registry.aliyuncs.com/google_containers"
image_name="pause:3.6 kube-apiserver:v1.19.0"
#################################################################################
domain_new="registry.harbor.com:8081/test"
image_name_new="pause:3.6 kube-apiserver:v1.19.0" 
#################################################
#Harbor信息
Harbor_Address=http://registry.harbor.com:8081      #Harbor主机地址，需要本地/etc/hosts解析
Harbor_domain="registry.harbor.com:8081"
Harbor_User=admin                                   #登录Harbor的用户
Harbor_Passwd=Harbor12345                           #登录Harbor的用户密码
Harbor_Project_List="bcbx"                          #Harbor项目名称，以空格未分隔，填写多个项目名称
#################################################################################
#                                   定义函数                                    #
#################################################################################
info(){
  echo -e "\033[35m 【`hostname` `date '+%Y-%m-%d %H:%M:%S'`】\033[0m" "\033[36m$1\033[0m "
}
info2(){
  echo -e "\033[32m 【`hostname` `date '+%Y-%m-%d %H:%M:%S'`】\033[0m" "\033[91m$1\033[0m "
}
info4(){
  echo -e "\033[35m 【`hostname` `date '+%Y-%m-%d %H:%M:%S'`】\033[0m" "\033[94m$1\033[0m "
}
info3(){
 echo -e "\033[36m------------------------------------------------------------------------------\033[0m" 
}
#pull旧的镜像到镜像仓库中
docker_pull(){
    local domain=$1 image_name=${image_old_name[*]}
    for i in ${image_name}
       do
        image_old_lable=`docker images --format  {{.Repository}}:{{.Tag}}|grep ${domain}/${i}`
        if [ -z ${image_old_lable} ] ;then
            docker pull ${domain}/${i}
            #echo "docker pull ${domain}/${i}"
        fi
    done
    [ $? -eq 0 ] && info "镜像pull成功" && info3

}
#tag修改标签
docker_tag(){
    local domain_old=$1  domain_new=$2
    for i in `seq 0 ${new_num}`
       do
       docker tag ${domain_old}/${image_old_name[i]} ${domain_new}/${image_new_name[i]}
       #echo "docker tag ${domain_old}/${image_old_name[i]} ${domain_new}/${image_new_name[i]}"
       [ $? -eq 0 ] && info "镜像tag ${domain_old}/${image_old_name[i]} ${domain_new}/${image_new_name[i]} 成功"
    done
    [ $? -eq 0 ] && info3
}
#tag修改标签
docker_push(){
    local domain_new=$1 image_name=${image_name_new}
    for i in ${image_name}
       do
       docker push ${domain_new}/${i}
      # echo "docker push ${domain_new}/${i}"
       [ $? -eq 0 ] && info "镜像push ${domain_new}/${i} 成功"
    done
    [ $? -eq 0 ] && info3
}
docker_rmi(){
    local domain_new=$1 image_name=${image_name_new}
    for i in ${image_name}
       do
       docker rmi ${domain_new}/${i}
       #echo "docker rmi ${domain_new}/${i}"
       [ $? -eq 0 ] && info2 "RMI image ${domain_new}/${i}成功"
    done
    [ $? -eq 0 ] && info3
}

#定义数组元素及变量
array_run(){
  #定义数组（old image name）
  for i in ${image_name};do image_old_name[${#image_old_name[*]}]=$i ;done
  for i in ${image_name_new};do image_new_name[${#image_new_name[*]}]=$i ;done
  old_num=$(( `echo ${#image_old_name[*]}` -1 ))
  new_num=$(( `echo ${#image_new_name[*]}` -1 ))
  if [ ${old_num} -eq ${new_num} ];then
     info "image name load success"
  fi
}
#################################################################################
harbor_get_list(){
if [ -f  ${Images_File} ];then
  rm -rf ${Images_File}
fi
for Project in $Harbor_Project_List;do
   # 循环获取项目下所有的镜像
   Image_Names=$(curl -u ${Harbor_User}:${Harbor_Passwd} -H "Content-Type: application/json" -X GET ${Harbor_Address}/api/v2.0/projects/$Project/repositories -k | python -m json.tool | grep name | awk '/"name": /' | awk -F '"' '{print $4}')
    for Image in $Image_Names;do
        # 循环获取镜像的版本（tag)
        Image_Tags=$(curl -u ${Harbor_User}:${Harbor_Passwd}  -H "Content-Type: application/json"   -X GET  ${Harbor_Address}/v2/$Image/tags/list  -k |  awk -F '"'  '{print $8,$10,$12}')
        for Tag in $Image_Tags;do
            # 格式化输出镜像信息
            echo "${Harbor_domain}/$Image:$Tag" >> ${Images_File}
        done
    done
done
}
harbor_pull(){
      #pull镜像
    info "Pull image to local machine"
    for i in ${image_name}
      do
        docker pull ${i}
    done
}
harbor_tag(){
 #修改tag镜像
    info3
    info "Modify mirror label"
    for i in `seq 0 ${old_num}`
      do
         name=`echo ${image_old_name[i]} |awk -F "/" '{print $NF}'`
         docker tag  ${image_old_name[i]} ${domain_new}/${name}
      done
}
harbor_push(){
  #推送镜像到仓库中
    info3
    info "Push image to warehouse"
    for i in `seq 0 ${old_num}`
      do
         name=`echo ${image_old_name[i]} |awk -F "/" '{print $NF}'`
         docker push ${domain_new}/${name}
      done
}
harbor_rmi(){
      #删除本地镜像
    info3
    info "Delete local image"
    for i in `seq 0 ${old_num}`
      do
         name=`echo ${image_old_name[i]} |awk -F "/" '{print $NF}'`
         docker rmi ${domain_new}/${name}
         docker rmi ${image_old_name[i]}
    done
}


#################################################################################
#通过harbor v2.0的接口返回镜像信息后自动同步
harbor(){
    harbor_get_list
    info3
    image_name=`cat ${Images_File}`
    for i in ${image_name};do image_old_name[${#image_old_name[*]}]=$i ;done
    old_num=$(( `echo ${#image_old_name[*]}` -1 ))
    harbor_pull
    harbor_tag
    harbor_push
    harbor_rmi
}
#################################################################################
#手动修改变量后执行的方式
run(){
  #加载数据元素
  array_run
  docker_pull ${domain_old}
  docker_tag  ${domain_old} ${domain_new}
  docker_push ${domain_new}
  echo -ne "\033[31m是否删除修改前后的镜像,节约空间(yes/no)\033[0m"
  read -p "" test
  if [ yes == ${test} ];then
     info4 "删除${domain_old}镜像"
     docker_rmi ${domain_old}
     info4 "删除${domain_new}镜像"
     docker_rmi ${domain_new}
  fi

}
log(){
  info2 "sh $0 harbor           通过harbor v2.0接口"
  info2 "sh $0 run              通过添加镜像域名、标签等方式实现镜像通过"
}
#rmi=1
#run
start_image(){
 local install=$1
 if [ -z  ${install} ];then
    log
    echo -ne "\033[31m请输入执行方式:(harbor/run)\033[0m"
    read -p "" install
    start_image ${install}
  else
    case $install in 
       'harbor')
           harbor;;
       'run')
           run;;
   esac
fi

}
start_image $1
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
195
196
197
198
199
200
201
202
203
204
205
206
207
208
209
210
211
212
213
214