
Argo CD 是一个为 Kubernetes 而生的,遵循声明式 GitOps 理念的持续部署工具。Argo CD 可在 Git 存储库更改时自动同步和部署应用程序。
Argo CD 遵循 GitOps 模式,使用 Git 仓库作为定义所需应用程序状态的真实来源,Argo CD 支持多种 Kubernetes 清单:
kustomize
helm charts
ksonnet applications
jsonnet files
Plain directory of YAML/json manifests
Any custom config management tool configured as a config management plugin
Argo CD 可在指定的目标环境中自动部署所需的应用程序状态,应用程序部署可以在 Git 提交时跟踪对分支、标签的更新,或固定到清单的指定版本。

Argo CD 是通过一个 Kubernetes 控制器来实现的,它持续 watch 正在运行的应用程序并将当前的实时状态与所需的目标状态( Git 存储库中指定的)进行比较。已经部署的应用程序的实际状态与目标状态有差异,则被认为是 OutOfSync 状态,Argo CD 会报告显示这些差异,同时提供工具来自动或手动将状态同步到期望的目标状态。在 Git 仓库中对期望目标状态所做的任何修改都可以自动应用反馈到指定的目标环境中去。
下面简单介绍下 Argo CD 中的几个主要组件:
API 服务:API 服务是一个 gRPC/REST 服务,它暴露了 Web UI、CLI 和 CI/CD 系统使用的接口,主要有以下几个功能:
应用程序管理和状态报告
执行应用程序操作(例如同步、回滚、用户定义的操作)
存储仓库和集群凭据管理(存储为 K8S Secrets 对象)
认证和授权给外部身份提供者
RBAC
Git webhook 事件的侦听器/转发器
仓库服务:存储仓库服务是一个内部服务,负责维护保存应用程序清单 Git 仓库的本地缓存。当提供以下输入时,它负责生成并返回 Kubernetes 清单:
存储 URL
revision 版本(commit、tag、branch)
应用路径
模板配置:参数、ksonnet 环境、helm values.yaml 等
应用控制器:应用控制器是一个 Kubernetes 控制器,它持续 watch 正在运行的应用程序并将当前的实时状态与所期望的目标状态( repo 中指定的)进行比较。它检测应用程序的 OutOfSync 状态,并采取一些措施来同步状态,它负责调用任何用户定义的生命周期事件的钩子(PreSync、Sync、PostSync)。
自动部署应用程序到指定的目标环境
支持多种配置管理/模板工具(Kustomize、Helm、Ksonnet、Jsonnet、plain-YAML)
能够管理和部署到多个集群
SSO 集成(OIDC、OAuth2、LDAP、SAML 2.0、GitHub、GitLab、Microsoft、LinkedIn)
用于授权的多租户和 RBAC 策略
回滚/随时回滚到 Git 存储库中提交的任何应用配置
应用资源的健康状况分析
自动配置检测和可视化
自动或手动将应用程序同步到所需状态
提供应用程序活动实时视图的 Web UI
用于自动化和 CI 集成的 CLI
Webhook 集成(GitHub、BitBucket、GitLab)
用于自动化的 AccessTokens
PreSync、Sync、PostSync Hooks,以支持复杂的应用程序部署(例如蓝/绿和金丝雀发布)
应用程序事件和 API 调用的审计
Prometheus 监控指标
用于覆盖 Git 中的 ksonnet/helm 参数
Application:应用,一组由资源清单定义的 Kubernetes 资源,这是一个 CRD 资源对象
Application source type:用来构建应用的工具
Target state:目标状态,指应用程序所需的期望状态,由 Git 存储库中的文件表示
Live state:实时状态,指应用程序实时的状态,比如部署了哪些 Pods 等真实状态
Sync status:同步状态表示实时状态是否与目标状态一致,部署的应用是否与 Git 所描述的一样?
Sync:同步指将应用程序迁移到其目标状态的过程,比如通过对 Kubernetes 集群应用变更
Sync operation status:同步操作状态指的是同步是否成功
Refresh:刷新是指将 Git 中的最新代码与实时状态进行比较,弄清楚有什么不同
Health:应用程序的健康状况,它是否正常运行?能否为请求提供服务?
Tool:工具指从文件目录创建清单的工具,例如 Kustomize 或 Ksonnet 等
Configuration management tool:配置管理工具
Configuration management plugin:配置管理插件
当然前提是需要有一个 kubectl 可访问的 Kubernetes 的集群,直接使用下面的命令即可,这里我们安装最新的稳定版 v2.4.9:
- $ kubectl create namespace argocd
- $ kubectl apply -n argocd -f https://raw.githubusercontent.com/argoproj/argo-cd/v2.4.9/manifests/install.yaml
如果你要用在生产环境,则可以使用下面的命令部署一个 HA 高可用的版本:
- $ kubectl create namespace argocd
- $ kubectl apply -n argocd -f https://raw.githubusercontent.com/argoproj/argo-cd/v2.4.9/manifests/ha/install.yaml
这将创建一个新的命名空间 argocd,Argo CD 的服务和应用资源都将部署到该命名空间。
- $ kubectl get pods -n argocd
- NAME READY STATUS RESTARTS AGE
- argocd-application-controller-0 1/1 Running 0 103s
- argocd-applicationset-controller-68b9bdbd8b-jzcpf 1/1 Running 0 103s
- argocd-dex-server-6b7745757-6mxwk 1/1 Running 0 103s
- argocd-notifications-controller-5b56f6f7bb-jqpng 1/1 Running 0 103s
- argocd-redis-f4cdbff57-dr8jc 1/1 Running 0 103s
- argocd-repo-server-c4f79b4d6-7nh6n 1/1 Running 0 103s
- argocd-server-895675597-fr42g 1/1 Running 0 103s
如果你对 UI、SSO、多集群管理这些特性不感兴趣,只想把应用变更同步到集群中,那么你可以使用
--disable-auth标志来禁用认证,可以通过命令kubectl patch deploy argocd-server -n argocd -p '[{"op": "add", "path": "/spec/template/spec/containers/0/command/-", "value": "--disable-auth"}]' --type json来实现。
然后我们可以在本地安装 CLI 工具方便操作 Argo CD,我们可以在 Argo CD Git 仓库发布页面查看最新版本的 Argo CD 或运行以下命令来获取版本:
VERSION=$(curl --silent "https://api.github.com/repos/argoproj/argo-cd/releases/latest" | grep '"tag_name"' | sed -E 's/.*"([^"]+)".*/\1/')
VERSION 在下面的命令中替换为你要下载的 Argo CD 版本:
$ curl -sSL -o /usr/local/bin/argocd https://github.com/argoproj/argo-cd/releases/download/$VERSION/argocd-linux-amd64
为 argocd CLI 赋予可执行权限:
$ chmod +x /usr/local/bin/argocd
现在我们就可以使用 argocd 命令了。如果你是 Mac,则可以直接使用 brew install argocd 进行安装。
Argo CD 会运行一个 gRPC 服务(由 CLI 使用)和 HTTP/HTTPS 服务(由 UI 使用),这两种协议都由 argocd-server 服务在以下端口进行暴露:
443 - gRPC/HTTPS
80 - HTTP(重定向到 HTTPS)
我们可以通过配置 Ingress 的方式来对外暴露服务,其他 Ingress 控制器的配置可以参考官方文档 https://argo-cd.readthedocs.io/en/stable/operator-manual/ingress/ 进行配置。
Argo CD 在同一端口 (443) 上提供多个协议 (gRPC/HTTPS),所以当我们为 argocd 服务定义单个 nginx ingress 对象和规则的时候有点麻烦,因为 nginx.ingress.kubernetes.io/backend -protocol 这个 annotation 只能接受一个后端协议(例如 HTTP、HTTPS、GRPC、GRPCS)。
为了使用单个 ingress 规则和主机名来暴露 Argo CD APIServer,必须使用 nginx.ingress.kubernetes.io/ssl-passthrough 这个 annotation 来传递 TLS 连接并校验 Argo CD APIServer 上的 TLS。
- apiVersion: networking.k8s.io/v1
- kind: Ingress
- metadata:
- name: argocd-server-ingress
- namespace: argocd
- annotations:
- nginx.ingress.kubernetes.io/force-ssl-redirect: "true"
- nginx.ingress.kubernetes.io/ssl-passthrough: "true"
- spec:
- ingressClassName: nginx
- rules:
- - host: argocd.k8s.local
- http:
- paths:
- - path: /
- pathType: Prefix
- backend:
- service:
- name: argocd-server
- port:
- name: https
上述规则在 Argo CD APIServer 上校验 TLS,该服务器检测到正在使用的协议,并做出适当的响应。请注意,nginx.ingress.kubernetes.io/ssl-passthrough 注解要求将 --enable-ssl-passthrough 标志添加到 nginx-ingress-controller 的命令行参数中。
由于 ingress-nginx 的每个 Ingress 对象仅支持一个协议,因此另一种方法是定义两个 Ingress 对象。一个用于 HTTP/HTTPS,另一个用于 gRPC。
如下所示为 HTTP/HTTPS 的 Ingress 对象:
- apiVersion: networking.k8s.io/v1
- kind: Ingress
- metadata:
- name: argocd-server-http-ingress
- namespace: argocd
- annotations:
- nginx.ingress.kubernetes.io/force-ssl-redirect: "true"
- nginx.ingress.kubernetes.io/backend-protocol: "HTTP"
- spec:
- ingressClassName: nginx
- rules:
- - http:
- paths:
- - path: /
- pathType: Prefix
- backend:
- service:
- name: argocd-server
- port:
- name: http
- host: argocd.k8s.local
- tls:
- - hosts:
- - argocd.k8s.local
- secretName: argocd-secret # do not change, this is provided by Argo CD
gRPC 协议对应的 Ingress 对象如下所示:
- apiVersion: networking.k8s.io/v1
- kind: Ingress
- metadata:
- name: argocd-server-grpc-ingress
- namespace: argocd
- annotations:
- nginx.ingress.kubernetes.io/backend-protocol: "GRPC"
- spec:
- ingressClassName: nginx
- rules:
- - http:
- paths:
- - path: /
- pathType: Prefix
- backend:
- service:
- name: argocd-server
- port:
- name: https
- host: grpc.argocd.k8s.local
- tls:
- - hosts:
- - grpc.argocd.k8s.local
- secretName: argocd-secret # do not change, this is provided by Argo CD
然后我们需要在禁用 TLS 的情况下运行 APIServer。编辑 argocd-server 这个 Deployment 以将 --insecure 标志添加到 argocd-server 命令,或者简单地在 argocd-cmd-params-cm ConfigMap 中设置 server.insecure: "true" 即可。
创建完成后,我们就可以通过 argocd.k8s.local 来访问 Argo CD 服务了,不过需要注意我们这里配置的证书是自签名的,所以在第一次访问的时候会提示不安全,强制跳转即可。
默认情况下 admin 帐号的初始密码是自动生成的,会以明文的形式存储在 Argo CD 安装的命名空间中名为 argocd-initial-admin-secret 的 Secret 对象下的 password 字段下,我们可以用下面的命令来获取:
$ kubectl -n argocd get secret argocd-initial-admin-secret -o jsonpath="{.data.password}" | base64 -d && echo
使用用户名 admin 和上面输出的密码即可登录 Dashboard。

同样我们也可以通过 ArgoCD CLI 命令行工具进行登录:
- $ argocd login grpc.argocd.k8s.local
- WARNING: server certificate had error: x509: “Kubernetes Ingress Controller Fake Certificate” certificate is not trusted. Proceed insecurely (y/n)? y
- Username: admin
- Password:
- 'admin:login' logged in successfully
- Context 'grpc.argocd.k8s.local' updated
需要注意的是这里登录的地址为 gRPC 暴露的服务地址。
CLI 登录成功后,可以使用如下所示命令更改密码:
- $ argocd account update-password
- *** Enter current password:
- *** Enter new password:
- *** Confirm new password:
- Password updated
- Context 'argocd.k8s.local' updated
- $ argocd version
- argocd: v2.4.9+1ba9008
- BuildDate: 2022-08-11T15:41:08Z
- GitCommit: 1ba9008536b7e61414784811c431cd8da356065e
- GitTreeState: clean
- GoVersion: go1.18.5
- Compiler: gc
- Platform: darwin/arm64
- argocd-server: v2.4.9+1ba9008
- BuildDate: 2022-08-11T15:22:41Z
- GitCommit: 1ba9008536b7e61414784811c431cd8da356065e
- GitTreeState: clean
- GoVersion: go1.18.5
- Compiler: gc
- Platform: linux/amd64
- Kustomize Version: v4.4.1 2021-11-11T23:36:27Z
- Helm Version: v3.8.1+g5cb9af4
- Kubectl Version: v0.23.1
- Jsonnet Version: v0.18.0
由于 Argo CD 支持部署应用到多集群,所以如果你要将应用部署到外部集群的时候,需要先将外部集群的认证信息注册到 Argo CD 中,如果是在内部部署(运行 Argo CD 的同一个集群,默认不需要配置),直接使用 https://kubernetes.default.svc 作为应用的 K8S APIServer 地址即可。
首先列出当前 kubeconfig 中的所有集群上下文:
$ kubectl config get-contexts -o name
从列表中选择一个上下文名称并将其提供给 argocd cluster add CONTEXTNAME,比如对于 kind-kind上下文,运行:
$ argocd cluster add kind-kind
Git 仓库 https://github.com/argoproj/argocd-example-apps.git 是一个包含留言簿应用程序的示例库,我们可以用该应用来演示 Argo CD 的工作原理。
我们可以通过 argocd app create xxx 命令来创建一个应用:
- $ argocd app create --help
- Create an application
-
- Usage:
- argocd app create APPNAME [flags]
-
- Examples:
-
- # Create a directory app
- argocd app create guestbook --repo https://github.com/argoproj/argocd-example-apps.git --path guestbook --dest-namespace default --dest-server https://kubernetes.default.svc --directory-recurse
-
- # Create a Jsonnet app
- argocd app create jsonnet-guestbook --repo https://github.com/argoproj/argocd-example-apps.git --path jsonnet-guestbook --dest-namespace default --dest-server https://kubernetes.default.svc --jsonnet-ext-str replicas=2
-
- # Create a Helm app
- argocd app create helm-guestbook --repo https://github.com/argoproj/argocd-example-apps.git --path helm-guestbook --dest-namespace default --dest-server https://kubernetes.default.svc --helm-set replicaCount=2
-
- # Create a Helm app from a Helm repo
- argocd app create nginx-ingress --repo https://charts.helm.sh/stable --helm-chart nginx-ingress --revision 1.24.3 --dest-namespace default --dest-server https://kubernetes.default.svc
-
- # Create a Kustomize app
- argocd app create kustomize-guestbook --repo https://github.com/argoproj/argocd-example-apps.git --path kustomize-guestbook --dest-namespace default --dest-server https://kubernetes.default.svc --kustomize-image gcr.io/heptio-images/ks-guestbook-demo:0.1
-
- # Create a app using a custom tool:
- argocd app create kasane --repo https://github.com/argoproj/argocd-example-apps.git --path plugins/kasane --dest-namespace default --dest-server https://kubernetes.default.svc --config-management-plugin kasane
-
-
- Flags:
- ......
直接执行如下所示命令即可:
- $ argocd app create guestbook --repo https://github.com/argoproj/argocd-example-apps.git --path guestbook --dest-server https://kubernetes.default.svc --dest-namespace default
- application 'guestbook' created
除了可以通过 CLI 工具来创建应用,我们也可以通过 UI 界面来创建,定位到 argocd.k8s.local 页面,登录后,点击 +New App 新建应用按钮,如下图:

将应用命名为 guestbook,使用 default project,并将同步策略设置为 Manual:

然后在下面配置 Repository URL 为 https://github.com/argoproj/argocd-example-apps.git,由于某些原因我们这里使用的是一个 GitHub 仓库加速地址 https://github.91chi.fun/https://github.com/cnych/argocd-example-apps.git,将 Revision 设置为 HEAD,并将路径设置为 guestbook。然后下面的 Destination 部分,将 cluster 设置为 inCluster 和 namespace 为 default:

填写完以上信息后,点击页面上方的 Create 安装,即可创建 guestbook 应用,创建完成后可以看到当前应用的处于 OutOfSync 状态:

Argo CD 默认情况下每 3 分钟会检测 Git 仓库一次,用于判断应用实际状态是否和 Git 中声明的期望状态一致,如果不一致,状态就转换为 OutOfSync。默认情况下并不会触发更新,除非通过 syncPolicy 配置了自动同步。
除了可以通过 CLI 和 Dashboard 可以创建 Application 之外,其实也可以直接通过声明一个 Application 的资源对象来创建一个应用,如下所示:
- apiVersion: argoproj.io/v1alpha1
- kind: Application
- metadata:
- name: guestbook
- spec:
- destination:
- name: ""
- namespace: default
- server: "https://kubernetes.default.svc"
- source:
- path: guestbook
- repoURL: "https://github.com/cnych/argocd-example-apps"
- targetRevision: HEAD
- project: default
- syncPolicy:
- automated: null
由于上面我们在创建应用的时候使用的同步策略为 Manual,所以应用创建完成后没有自动部署,需要我们手动去部署应用。同样可以通过 CLI 和 UI 界面两种同步方式。
应用创建完成后,我们可以通过如下所示命令查看其状态:
- $ argocd app get guestbook
- Name: guestbook
- Project: default
- Server: https://kubernetes.default.svc
- Namespace: default
- URL: https://grpc.argocd.k8s.local/applications/guestbook
- Repo: https://github.91chi.fun/https://github.com/cnych/argocd-example-apps.git
- Target: HEAD
- Path: guestbook
- SyncWindow: Sync Allowed
- Sync Policy: <none>
- Sync Status: OutOfSync from HEAD (67bda3d)
- Health Status: Missing
-
- GROUP KIND NAMESPACE NAME STATUS HEALTH HOOK MESSAGE
- Service default guestbook-ui OutOfSync Missing
- apps Deployment default guestbook-ui OutOfSync Missing
应用程序状态为初始 OutOfSync 状态,因为应用程序尚未部署,并且尚未创建任何 Kubernetes 资源。要同步(部署)应用程序,可以执行如下所示命令:
$ argocd app sync guestbook
此命令从 Git 仓库中检索资源清单并执行 kubectl apply 部署应用,执行上面命令后 guestbook 应用便会运行在集群中了,现在我们就可以查看其资源组件、日志、事件和评估其健康状态了。
直接添加 UI 界面上应用的 Sync 按钮即可开始同步:

同步完成后可以看到我们的资源状态:

甚至还可以直接查看应用的日志信息:

也可以通过 kubectl 查看到我们部署的资源:
- ➜ ~ kubectl get pods
- NAME READY STATUS RESTARTS AGE
- guestbook-ui-6c96fb4bdc-bdwh9 1/1 Running 0 3m3s
- ➜ ~ kubectl get svc
- NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) AGE
- guestbook-ui ClusterIP 10.100.170.117 <none> 80/TCP 3m16s
- kubernetes ClusterIP 10.96.0.1 <none> 443/TCP
和我们从 Git 仓库中同步 guestbook 目录下面的资源状态也是同步的,证明同步成功了。

前面我们使用 Tekton 完成了应用的 CI/CD 流程,但是 CD 是在 Tekton 的任务中去完成的,现在我们使用 GitOps 的方式来改造我们的流水线,将 CD 部分使用 Argo CD 来完成。

这里我们要先去回顾下前面的 Tekton 实战部分的内容,整个流水线包括 clone、test、build、docker、deploy、rollback 几个部分的任务,最后的 deploy 和 rollback 属于 CD 部分,我们只需要这部分使用 Argo CD 来构建即可。
首先我们将项目 http://git.k8s.local/course/devops-demo.git 仓库中的 Helm Chart 模板单独提取出来放到一个独立的仓库中 http://git.k8s.local/course/devops-demo-deploy,这样方便和 Argo CD 进行对接,整个项目下面只有用于应用部署的 Helm Chart 模板。

如果有多个团队,每个团队都要维护大量的应用,就需要用到 Argo CD 的另一个概念:项目(Project)。Argo CD 中的项目(Project)可以用来对 Application 进行分组,不同的团队使用不同的项目,这样就实现了多租户环境。项目还支持更细粒度的访问权限控制:
限制部署内容(受信任的 Git 仓库);
限制目标部署环境(目标集群和 namespace);
限制部署的资源类型(例如 RBAC、CRD、DaemonSets、NetworkPolicy 等);
定义项目角色,为 Application 提供 RBAC(例如 OIDC group 或者 JWT 令牌绑定)。
比如我们这里创建一个名为 demo 的项目,将该应用创建到该项目下,只需创建一个如下所示的 AppProject 对象即可:
- apiVersion: argoproj.io/v1alpha1
- kind: AppProject
- metadata:
- # 项目名
- name: demo
- namespace: argocd
- spec:
- # 目标
- destinations:
- # 此项目的服务允许部署的 namespace,这里为全部
- - namespace: "*"
- # 此项目允许部署的集群,这里为默认集群,即为Argo CD部署的当前集群
- server: https://kubernetes.default.svc
- # 允许的数据源
- sourceRepos:
- - http://git.k8s.local/course/devops-demo-deploy.git
该对象中有几个核心的属性:
sourceRepos:项目中的应用程序可以从中获取清单的仓库引用
destinations:项目中的应用可以部署到的集群和命名空间
roles:项目内资源访问定义的角色
直接创建该对象即可:
- $ kubectl get AppProject -n argocd
- NAME AGE
- default 79m
- demo 24s
然后前往 Argo CD 添加仓库:

需要注意的是这里的密码需要使用 AccessToken,我们可以前往 GitLab 的页面 http://git.k8s.local/-/profile/personal_access_tokens 创建。

项目创建完成后,在该项目下创建一个 Application,代表环境中部署的应用程序实例。
- apiVersion: argoproj.io/v1alpha1
- kind: Application
- metadata:
- name: devops-demo
- namespace: argocd
- spec:
- destination:
- namespace: default
- server: "https://kubernetes.default.svc"
- project: demo
- source:
- path: helm # 从 Helm 存储库创建应用程序时,chart 必须指定 path
- repoURL: "http://git.k8s.local/course/devops-demo-deploy.git"
- targetRevision: HEAD
- helm:
- parameters:
- - name: replicaCount
- value: "2"
- valueFiles:
- - my-values.yaml
这里我们定义了一个名为 devops-demo 的应用,应用源来自于 helm 路径,使用的是 my-values.yaml 文件,此外还可以通过 source.helm.parameters 来配置参数,同步策略我们仍然选择使用手动的方式,我们可以在 Tekton 的任务中去手动触发同步。上面的资源对象创建完成后应用就会处于 OutOfSync 状态,因为集群中还没部署该应用。

现在接下来我们去修改之前的 Tekton 流水线,之前的 Pipeline 流水线如下所示:
- # pipeline.yaml
- apiVersion: tekton.dev/v1beta1
- kind: Pipeline
- metadata:
- name: pipeline
- spec:
- workspaces: # 声明 workspaces
- - name: go-repo-pvc
- params:
- # 定义代码仓库
- - name: git_url
- - name: revision
- type: string
- default: "main"
- # 定义镜像参数
- - name: image
- - name: registry_url
- type: string
- default: "harbor.k8s.local"
- - name: registry_mirror
- type: string
- default: "https://dockerproxy.com"
- # 定义 helm charts 参数
- - name: charts_dir
- - name: release_name
- - name: release_namespace
- default: "default"
- - name: overwrite_values
- default: ""
- - name: values_file
- default: "values.yaml"
- tasks: # 添加task到流水线中
- - name: clone
- taskRef:
- name: git-clone
- workspaces:
- - name: output
- workspace: go-repo-pvc
- params:
- - name: url
- value: $(params.git_url)
- - name: revision
- value: $(params.revision)
- - name: test
- taskRef:
- name: test
- runAfter:
- - clone
- - name: build # 编译二进制程序
- taskRef:
- name: build
- runAfter: # 测试任务执行之后才执行 build task
- - test
- - clone
- workspaces: # 传递 workspaces
- - name: go-repo
- workspace: go-repo-pvc
- - name: docker # 构建并推送 Docker 镜像
- taskRef:
- name: docker
- runAfter:
- - build
- workspaces: # 传递 workspaces
- - name: go-repo
- workspace: go-repo-pvc
- params: # 传递参数
- - name: image
- value: $(params.image)
- - name: registry_url
- value: $(params.registry_url)
- - name: registry_mirror
- value: $(params.registry_mirror)
- - name: deploy # 部署应用
- taskRef:
- name: deploy
- runAfter:
- - docker
- workspaces:
- - name: source
- workspace: go-repo-pvc
- params:
- - name: charts_dir
- value: $(params.charts_dir)
- - name: release_name
- value: $(params.release_name)
- - name: release_namespace
- value: $(params.release_namespace)
- - name: overwrite_values
- value: $(params.overwrite_values)
- - name: values_file
- value: $(params.values_file)
- - name: rollback # 回滚
- taskRef:
- name: rollback
- when:
- - input: "$(tasks.deploy.results.helm-status)"
- operator: in
- values: ["failed"]
- params:
- - name: release_name
- value: $(params.release_name)
- - name: release_namespace
- value: $(params.release_namespace)
现在我们需要去掉最后的 deploy 和 rollback 两个任务,当 Docker 镜像构建推送完成后,我们只需要去修改部署代码仓库中的 values 文件,然后再去手动触发 ArgoCD 同步状态即可(如果开启了自动同步这一步都可以省略了),而回滚操作也是通过操作 Git 仓库来实现的,不需要定义一个单独的 Task 任务。
定义一个如下所的 Taks 任务:
- apiVersion: tekton.dev/v1beta1
- kind: Task
- metadata:
- name: sync
- spec:
- volumes:
- - name: argocd-secret
- secret:
- secretName: $(inputs.params.argocd_secret)
- params:
- - name: argocd_url
- description: "The URL of the ArgoCD server"
- - name: argocd_secret
- description: "The secret containing the username and password for the tekton task to connect to argo"
- - name: app_name
- description: "The name of the argo app to update"
- - name: app_revision
- default: "HEAD"
- description: "The revision of the argo app to update"
- steps:
- - name: deploy
- image: argoproj/argocd:v2.4.9
- volumeMounts:
- - name: argocd-secret
- mountPath: /var/secret
- command:
- - sh
- args:
- - -ce
- - |
- set -e
- echo "starting argocd sync app"
- argocd login --insecure $(params.argocd_url) --username $(/bin/cat /var/secret/username) --password $(/bin/cat /var/secret/password)
- argocd app sync $(params.app_name) --revision $(params.app_revision)
- argocd app wait $(params.app_name) --health
由于我们这里只需要修改 Helm Chart 的 Values 文件中的 image.tag 参数,最好的方式当然还是在一个 Task 中去修改 values.yaml 文件并 commit 到 Repo 仓库中去,当然也可以为了简单直接在 ArgoCD 的应用侧配置参数即可,比如可以使用 argocd app set 命令来为应用配置参数,然后下面再用 argocd app sync 命令手动触发同步操作,这里其实就可以有很多操作了,比如我们可以根据某些条件来判断是否需要部署,满足条件后再执行 sync 操作,最后使用 wait 命令等待应用部署完成。
当然除了通过手动 argocd app set 的方式来配置参数之外,可能更好的方式还是直接去修改 Repo 仓库中的 values 值,这样在源代码仓库中有一个版本记录,我们可以新建如下所示的一个任务用来修改 values 值:
- apiVersion: tekton.dev/v1beta1
- kind: Task
- metadata:
- name: change-manifests
- spec:
- params:
- - name: git_url
- description: Git repository containing manifest files to update
- - name: git_email
- default: pipeline@k8s.local
- - name: git_name
- default: Tekton Pipeline
- - name: git_manifest_dir
- description: Manifests files dir
- - name: tool_image
- default: cnych/helm-kubectl-curl-git-jq-yq
- - name: image_tag
- description: Deploy docker image tag
- steps:
- - name: git-push
- image: $(params.tool_image)
- env:
- - name: GIT_USERNAME
- valueFrom:
- secretKeyRef:
- name: gitlab-auth
- key: username
- optional: true
- - name: GIT_PASSWORD
- valueFrom:
- secretKeyRef:
- name: gitlab-auth
- key: password
- optional: true
- command: ["/bin/bash"]
- args:
- - -c
- - |
- set -eu
- git config --global user.email "$(params.git_email)"
- git config --global user.name "$(params.git_name)"
- git clone --branch main --depth 1 http://${GIT_USERNAME}:${GIT_PASSWORD}@$(params.git_url) repo
- cd "repo/$(params.git_manifest_dir)"
- ls -l
- echo old value:
- cat my-values.yaml | yq r - 'image.tag'
- echo replacing with new value:
- echo $(params.image_tag)
- yq w --inplace my-values.yaml 'image.tag' "$(params.image_tag)"
- echo verifying new value
- yq r my-values.yaml 'image.tag'
- if ! git diff-index --quiet HEAD --; then
- git status
- git add .
- git commit -m "helm values updated by tekton pipeline in change-manifests task"
- git push
- else
- echo "no changes, git repository is up to date"
- fi
现在我们的流水线就变成了如下所示的清单:
- # pipeline.yaml
- apiVersion: tekton.dev/v1beta1
- kind: Pipeline
- metadata:
- name: pipeline
- spec:
- workspaces: # 声明 workspaces
- - name: go-repo-pvc
- params:
- # 定义代码仓库
- - name: git_url
- - name: git_infra_url
- - name: revision
- type: string
- default: "main"
- # 定义镜像参数
- - name: image
- - name: image_tag
- - name: registry_url
- type: string
- default: "harbor.k8s.local"
- - name: registry_mirror
- type: string
- default: "https://ot2k4d59.mirror.aliyuncs.com/"
- - name: git_manifest_dir
- default: "helm"
- # 定义 argocd 参数
- - name: argocd_url
- - name: argocd_secret
- - name: app_name
- - name: app_revision
- type: string
- default: "HEAD"
- tasks: # 添加task到流水线中
- - name: clone
- taskRef:
- name: git-clone
- workspaces:
- - name: output
- workspace: go-repo-pvc
- params:
- - name: url
- value: $(params.git_url)
- - name: revision
- value: $(params.revision)
- - name: test
- taskRef:
- name: test
- runAfter:
- - clone
- - name: build # 编译二进制程序
- taskRef:
- name: build
- runAfter: # 测试任务执行之后才执行 build task
- - test
- - clone
- workspaces: # 传递 workspaces
- - name: go-repo
- workspace: go-repo-pvc
- - name: docker # 构建并推送 Docker 镜像
- taskRef:
- name: docker
- runAfter:
- - build
- workspaces: # 传递 workspaces
- - name: go-repo
- workspace: go-repo-pvc
- params: # 传递参数
- - name: image
- value: $(params.image):$(params.image_tag)
- - name: registry_url
- value: $(params.registry_url)
- - name: registry_mirror
- value: $(params.registry_mirror)
- - name: manifests
- taskRef:
- name: change-manifests
- runAfter:
- - docker
- params:
- - name: git_url
- value: $(params.git_infra_url)
- - name: git_manifest_dir
- value: $(params.git_manifest_dir)
- - name: image_tag
- value: $(params.image_tag)
- - name: sync
- taskRef:
- name: sync
- runAfter:
- - manifests
- params:
- - name: argocd_url
- value: $(params.argocd_url)
- - name: argocd_secret
- value: $(params.argocd_secret)
- - name: app_name
- value: $(params.app_name)
- - name: app_revision
- value: $(params.app_revision)
最后创建用于 ArgoCD 登录使用的 Secret 对象:
- apiVersion: v1
- kind: Secret
- metadata:
- name: argocd-auth
- type: Opaque
- stringData:
- username: admin
- password: admin321 # argocd 的密码
最后修改 Tekton Triggers 中的 Template,如下所示:
- # gitlab-template.yaml
- apiVersion: triggers.tekton.dev/v1alpha1
- kind: TriggerTemplate
- metadata:
- name: gitlab-template
- spec:
- params: # 定义参数,和 TriggerBinding 中的保持一致
- - name: gitrevision
- - name: gitrepositoryurl
- resourcetemplates: # 定义资源模板
- - apiVersion: tekton.dev/v1beta1
- kind: PipelineRun # 定义 pipeline 模板
- metadata:
- generateName: gitlab-run- # TaskRun 名称前缀
- spec:
- serviceAccountName: tekton-build-sa
- pipelineRef:
- name: pipeline
- workspaces:
- - name: go-repo-pvc
- persistentVolumeClaim:
- claimName: go-repo-pvc
- params:
- - name: git_url
- value: $(tt.params.gitrepositoryurl)
- - name: git_infra_url
- value: git.k8s.local/course/devops-demo-deploy.git
- - name: image
- value: "harbor.k8s.local/course/devops-demo"
- - name: image_tag
- value: "$(tt.params.gitrevision)"
- - name: argocd_url
- value: argocd.k8s.local
- - name: argocd_secret
- value: argocd-auth
- - name: app_name
- value: devops-demo
现在我们的整个流水线就更加精简了。现在我们去应用仓库中修改下源代码并提交就可以触发我们的流水线了。

同样可以访问下应用来验证结果是否正确:
- $ curl devops-demo.k8s.local
- {"msg":"Hello Tekton On GitLab With ArgoCD (GitOps)"}
现在查看 Argo CD 中的应用可以发现都是已同步状态了。

如果需要回滚,则可以直接在 Argo CD 页面上点击 HISTORY AND ROLLBACK 安装查看部署的历史记录选择回滚的版本即可:

可以查看整个 Tekton 流水线的状态:
- $ tkn pr describe gitlab-run-4npk7
-
- Name: gitlab-run-4npk7
- Namespace: default
- Pipeline Ref: pipeline
- Service Account: tekton-build-sa
- Timeout: 1h0m0s
- Labels:
- tekton.dev/pipeline=pipeline
- triggers.tekton.dev/eventlistener=gitlab-listener
- triggers.tekton.dev/trigger=gitlab-push-events-trigger
- triggers.tekton.dev/triggers-eventid=6e21e686-79dc-421c-951a-e1591dcfd2f8
-
- 🌡️ Status
-
- STARTED DURATION STATUS
- 10 minutes ago 4m11s Succeeded
-
- ⚓ Params
-
- NAME VALUE
- ∙ git_url http://git.k8s.local/course/devops-demo.git
- ∙ git_infra_url git.k8s.local/course/devops-demo-deploy.git
- ∙ image harbor.k8s.local/course/devops-demo
- ∙ image_tag 1a49370f2708a01e8eef14c25688c5e0acf3a07c
- ∙ argocd_url grpc.argocd.k8s.local
- ∙ argocd_secret argocd-auth
- ∙ app_name devops-demo
-
- 📂 Workspaces
-
- NAME SUB PATH WORKSPACE BINDING
- ∙ go-repo-pvc --- PersistentVolumeClaim (claimName=go-repo-pvc)
-
- 🗂 Taskruns
-
- NAME TASK NAME STARTED DURATION STATUS
- ∙ gitlab-run-4npk7-sync sync 6 minutes ago 26s Succeeded
- ∙ gitlab-run-4npk7-manifests manifests 7 minutes ago 19s Succeeded
- ∙ gitlab-run-4npk7-docker docker 10 minutes ago 3m6s Succeeded
- ∙ gitlab-run-4npk7-build build 10 minutes ago 10s Succeeded
- ∙ gitlab-run-4npk7-test test 10 minutes ago 3s Succeeded
- ∙ gitlab-run-4npk7-clone clone 10 minutes ago 7s Succeeded
最后用一张图来总结下我们使用 Tekton 结合 Argo CD 来实现 GitOps 的工作流:

除此之外,GitOps 中还有一项非常重要的事情要做就是安全,关于如何实施安全 GitOps 请关注后续文章......