基于ACK One Gitops使用Argo Rollouts实现金丝雀发布

在rollout.yaml文件中，修改如下内容，然后保存并提交。

apiVersion: argoproj.io/v1alpha1
kind: Rollout
metadata:
  name: rollouts-demo
spec:
  replicas: 4
  strategy:
    canary:            # 无需添加analysis指标采集部分。
      canaryService: rollouts-demo-canary
      stableService: rollouts-demo-stable
      trafficRouting:
        nginx:
          stableIngress: rollouts-demo-stable
      steps:
        - setWeight: 20
        - pause: {}          # 该处为暂停，需要介入处理。
        - setWeight: 40
        - pause: {duration: 5m}
        - setWeight: 60
        - pause: {duration: 5m}
        - setWeight: 80
        - pause: {duration: 5m}
  revisionHistoryLimit: 2
  selector:
    matchLabels:
      app: rollouts-demo
  template:
    metadata:
      labels:
        app: rollouts-demo
    spec:
      containers:
      - name: rollouts-demo
        image: argoproj/rollouts-demo:yellow   # 修改镜像Tag。
        ports:
        - name: http
          containerPort: 8080
          protocol: TCP
        resources:
          requests:
            memory: 32Mi
            cpu: 5m        

执行以下命令，查看Rollouts运行状态。

kubectl argo rollouts get rollout rollouts-demo --watch

预期输出：

在rollout.yaml文件中，在第一个puase的位置，由于未设置暂停时间，因此金丝雀发布会一直暂停在该处，直到有resumed或promoted动作为止。

恢复金丝雀发布。

1. 在rollout.yaml文件中，修改如下内容，然后保存并提交。

         steps:
           - setWeight: 20
           - pause: {duration: 10s}   # 此处增加一个较短的duration，使其快速进入下一步。

2. 再次执行以下命令，恢复金丝雀发布。

   kubectl argo rollouts get rollout rollouts-demo --watch

   预期输出：

金丝雀发布完成后，效果如下图所示。

在rollout.yaml文件中，修改如下内容，然后保存并提交。

  strategy:
    canary:
      analysis:        # 指标分析配置。
        templates:     # 指标分析模板。
        - templateName: success-rate
        startingStep: 2 #delay starting analysis run until setWeight: 40%
        args:
          - name: service-name
            value: rollouts-demo-stable
      canaryService: rollouts-demo-canary
      stableService: rollouts-demo-stable
      trafficRouting:
        nginx:
          stableIngress: rollouts-demo-stable
      steps:
        - setWeight: 20
        - pause: {duration: 5m}
        - setWeight: 40
        - pause: {duration: 5m}
        - setWeight: 60
        - pause: {duration: 5m}
        - setWeight: 80
        - pause: {duration: 5m}
  revisionHistoryLimit: 2
  selector:
    matchLabels:
      app: rollouts-demo
  template:
    metadata:
      labels:
        app: rollouts-demo
    spec:
      containers:
      - name: rollouts-demo
        image: argoproj/rollouts-demo:blue  # 设置新的镜像Tag。        

获取ARMS Prometheus的服务地址address。

该服务地址为标准的Kubernetes Service地址格式{ServiceName}.{Namespace}.svc.{ClusterDomain}:{ServicePort}，例如，本文ARMS Prometheus的Service部署在arms-prom命名空间下，暴露的服务名称为arms-prom-server，并且集群默认的ClusterDomain为cluster.local，服务端口为9090，所以ARMS Prometheus的服务地址为http://arms-prom-server.arms-prom.svc.cluster.local:9090。

在analysis.yaml文件中，增加如下关于ARMS Prometheus业务指标的配置内容。

以下ARMS Prometheus的服务地址address为上一步获取的服务地址adress。例如下方示例代码中金丝雀发布成功的条件为当在采集周期内请求灰度应用成功的比例达到95%时，金丝雀发布将会自动进入下一流程。关于更多采集指标的配置，请参见指标采集官方文档。

apiVersion: argoproj.io/v1alpha1
kind: AnalysisTemplate
metadata:
  name: success-rate
spec:
  args:
  - name: service-name
  metrics:
  - name: success-rate
    interval: 5m
    successCondition: result[0] >= 0.95   # 指标判断条件。
    failureLimit: 10
    provider:
      prometheus:   # 指标采集服务地址。
        address: http://arms-prom-server.arms-prom.svc.cluster.local:9090  # ARMS Prometheus服务地址，为上一步获取的服务地址address。
        query: |
          sum(
            irate(nginx_ingress_controller_requests{status=~"(1|2).*", canary!="" ,service="{{args.service-name}}"}[5m]))
            /
            sum(irate(nginx_ingress_controller_requests{canary!="",service="{{args.service-name}}"}[5m])
          )

确保Arms Prometheus有持续的指标数据。

1. 执行以下命令，持续访问应用的Ingress入口，获取ACK集群的Ingress信息。

   kubectl get ingress

   预期输出：

   NAME                                        CLASS   HOSTS                 ADDRESS         PORTS   AGE
   rollouts-demo-rollouts-demo-stable-canary   nginx   rollouts-demo.local   8.217.XX.XX   80      9h
   rollouts-demo-stable                        nginx   rollouts-demo.local   8.217.XX.XX   80      9h

2. 修改本地Hosts文件，新增如下配置。

   8.217.XX.XX  rollouts-demo.local

3. 在新的窗口中，执行以下命令，持续为应用增加访问流量。

    while true; do curl -s "http://rollouts-demo.local/" | grep -o "<title>.*</title>" ;sleep 200ms;done

执行以下命令，查看Rollouts运行状态。

kubectl argo rollouts get rollout rollouts-demo --watch

预期输出：

查看ARMS Prometheus监控指标。

1. 登录容器服务管理控制台，在左侧导航栏选择集群列表。

2. 在集群列表页面，单击目标集群名称，然后在左侧导航栏，选择运维管理 > Prometheus 监控。

3. 在Prometheus 监控页面，单击网络监控页签，然后单击集群Ingress流量监控。

   查看ARMS监控指标如下图所示。

   

金丝雀发布完成后，效果如下图所示。