草庐IT

Kubernetes(K8S) Deployment 升级和回滚

VipSoft 2023-03-28 原文

创建部署详见 Kubernetes(K8S) Deployment 部署 Pod
传统应用升级,一般是V1.0的jar包,有一个应对 1.0 的 shell 启动脚本。升级时,传 2.0 的 jar包,配置 2.0 的 shell 脚本。
执行顺序为,停1.0的服务,启2.0的服务,有问题时,把2.0停掉再执行 1.0的shell脚本,手动恢复到1.0 版本,服务多的情况下,就很崩溃,而且服务会中断不可用。

高并发、高可用系统普及的今天,服务的升级更新至少要做到“业务不中断”。而滚动更新(Rolling-update)恰是满足这一需求的一种系统更新升级方案。对于Kubernetes集群部署的Service来说,Rolling update就是指一次仅更新一个Pod,然后逐个进行更新,而不是在同一时刻将该Service下面的所有Pod shutdown,然后去更新,逐个更新可以避免将业务中断;

RollingUpdate命令:通过自动扩缩容实现自动滚动升级
指令格式:kubectl rolling-update 旧控制器 新控制器 --image=新镜像

1. 发布新版到阿里云镜像仓库

Last login: Tue Oct 18 16:39:53 2022 from 172.16.0.66
[root@localhost ~]# cd /opt/demo/
[root@localhost demo]# ll
总用量 17160
-rw-r--r--. 1 root root 17566582 10月 19 11:50 demojenkins.jar
-rw-r--r--. 1 root root      126 10月 18 17:56 Dockerfile
[root@localhost demo]# docker login --username=hiXXXXXX@aliyun.com registry.cn-shanghai.aliyuncs.com
Password: 
WARNING! Your password will be stored unencrypted in /root/.docker/config.json.
Configure a credential helper to remove this warning. See
https://docs.docker.com/engine/reference/commandline/login/#credentials-store

Login Succeeded
[root@localhost demo]# docker build -t demo:2.0 .
Sending build context to Docker daemon  17.57MB
Step 1/4 : FROM openjdk:8-jdk-alpine
 ---> a3562aa0b991
Step 2/4 : VOLUME /tmp
 ---> Using cache
 ---> a98cf1fbeb9d
Step 3/4 : ADD ./demojenkins.jar demojenkins.jar
 ---> 12bfc15e5295
Step 4/4 : ENTRYPOINT ["java","-jar","/demojenkins.jar", "&"]
 ---> Running in 2908dd94dfa7
Removing intermediate container 2908dd94dfa7
 ---> 3041db93b6df
Successfully built 3041db93b6df
Successfully tagged demo:2.0
[root@localhost demo]# docker images
REPOSITORY                                          TAG            IMAGE ID       CREATED              SIZE
demo                                                2.0            3041db93b6df   About a minute ago   122MB
demo                                                1.0            1952e02daef9   19 hours ago         122MB 
openjdk                                             8-jdk-alpine   a3562aa0b991   3 years ago          105MB
java                                                8              d23bdf5b1b1b   5 years ago          643MB
[root@localhost demo]# docker tag 3041db93b6df registry.cn-shanghai.aliyuncs.com/vipsoft/vipsoft:2.0
[root@localhost demo]# docker push registry.cn-shanghai.aliyuncs.com/vipsoft/vipsoft:2.0
The push refers to repository [registry.cn-shanghai.aliyuncs.com/vipsoft/vipsoft]
c38fa2e9a247: Pushed 
ceaf9e1ebef5: Layer already exists 
9b9b7f3d56a0: Layer already exists 
f1b5933fe4b5: Layer already exists 
2.0: digest: sha256:785c4707e7e629d22b5609310d8f945c107b277b94925cc0dbebdb3621b size: 1159
[root@localhost demo]# 

2. 查看现有Pod信息(升级后对比用)

# 查看创建的 Deployment 对象
[root@k8smaster ~]# kubectl get deployments
NAME        READY   UP-TO-DATE   AVAILABLE   AGE
javademo1   3/3     3            3           19h
nginx       1/1     1            1           5d21h

# 查看 Deployment 上线状态
[root@k8smaster ~]# kubectl rollout status deployment/javademo1
deployment "javademo1" successfully rolled out

# 查看 Deployment 对象创建的 ReplicaSet:
[root@k8smaster ~]# kubectl get rs
NAME                   DESIRED   CURRENT   READY   AGE 
javademo1-84dd5c9485   3         3         3       4h25m
nginx-f89759699        1         1         1       5d21h

# 查看 Deployment 对象操作 ReplicaSet 创建的 Pod,并显示生成的标签:
[root@k8smaster ~]# kubectl get pods --show-labels
NAME                         READY   STATUS    RESTARTS   AGE     LABELS
javademo1-84dd5c9485-7vgkr   1/1     Running   0          4h20m   app=javademo1,pod-template-hash=84dd5c9485
javademo1-84dd5c9485-8ckk6   1/1     Running   0          4h26m   app=javademo1,pod-template-hash=84dd5c9485
javademo1-84dd5c9485-8hfmd   1/1     Running   0          4h20m   app=javademo1,pod-template-hash=84dd5c9485
nginx-f89759699-5hkdw        1/1     Running   0          5d21h   app=nginx,pod-template-hash=f89759699

#查看当前运行的 Pod
[root@k8smaster ~]# kubectl get pods
NAME                         READY   STATUS    RESTARTS   AGE
javademo1-84dd5c9485-7vgkr   1/1     Running   0          4h31m
javademo1-84dd5c9485-8ckk6   1/1     Running   0          4h37m
javademo1-84dd5c9485-8hfmd   1/1     Running   0          4h31m
nginx-f89759699-5hkdw        1/1     Running   0          5d21h 

# 查看 Deployeement 详情
[root@k8smaster ~]# kubectl describe deployment/javademo1
Name:                   javademo1
Namespace:              default
CreationTimestamp:      Tue, 18 Oct 2022 18:51:25 +0800
Labels:                 app=javademo1
Annotations:            deployment.kubernetes.io/revision: 2
Selector:               app=javademo1
Replicas:               3 desired | 3 updated | 3 total | 3 available | 0 unavailable
StrategyType:           RollingUpdate
MinReadySeconds:        0
RollingUpdateStrategy:  25% max unavailable, 25% max surge
Pod Template:
  Labels:  app=javademo1
  Containers:
   vipsoft:
    Image:        registry.cn-shanghai.aliyuncs.com/vipsoft/vipsoft:1.0
    Port:         <none>
    Host Port:    <none>
    Environment:  <none>
    Mounts:       <none>
  Volumes:        <none>
Conditions:
  Type           Status  Reason
  ----           ------  ------
  Progressing    True    NewReplicaSetAvailable
  Available      True    MinimumReplicasAvailable
OldReplicaSets:  <none>
NewReplicaSet:   javademo1-84dd5c9485 (3/3 replicas created)
Events:          <none>

Deployment, kubectl get deployments 所显示的字段有:

  • NAME:列出了名字空间中 Deployment 的名称。
  • READY:显示应用程序的可用的“副本”数。显示的模式是“就绪个数/期望个数”。
  • UP-TO-DATE:显示为了达到期望状态已经更新的副本数。
  • AVAILABLE:显示应用可供用户使用的副本数。
  • AGE:显示应用程序运行的时间。

ReplicaSet, kubectl get rs 输出中包含以下字段:

  • NAME:列出名字空间中 ReplicaSet 的名称;[Deployment名称]-[随机字符串]
  • DESIRED:显示应用的期望副本个数,即在创建 Deployment 时所定义的值。 此为期望状态;
  • CURRENT:显示当前运行状态中的副本个数;
  • READY:显示应用中有多少副本可以为用户提供服务;
  • AGE:显示应用已经运行的时间长度。

3. Deployment 升级

方法1

# 查看 Deployeement 详情 里可以看到 Containers 内容 
#  Containers:
#   vipsoft:
#    Image:        registry.cn-shanghai.aliyuncs.com/vipsoft/vipsoft:1.0
# 设置vipsoft容器中的镜像,镜像版本变了,就会触发重新拉取动作
[root@k8smaster ~]# kubectl set image deployment/javademo1 vipsoft=registry.cn-shanghai.aliyuncs.com/vipsoft/vipsoft:2.0
deployment.apps/javademo1 image updated
[root@k8smaster ~]# kubectl rollout status deployment/javademo1
deployment "javademo1" successfully rolled out
[root@k8smaster ~]# 

方法2:Jenkins 的时候比较常用,早期使用 Kubernetes Continuous Deploy 插件,现已重淘汰,可使用 Config File Provider 代替

# Containers:
#   vipsoft:
#    Image:        registry.cn-shanghai.aliyuncs.com/vipsoft/vipsoft:1.0  #将 :1.0 改成 2.0
# 一旦镜像名(或 Pod 定义)发生了修改,则触发 k8s 系统完成 Deployment 所有运行 Pod 的滚动升级操作
[root@k8smaster ~]# kubectl edit deployment/javademo1
deployment "javademo1" edited

查看已更新的 Deployment 的信息

[root@k8smaster ~]# kubectl get deployments
NAME        READY   UP-TO-DATE   AVAILABLE   AGE
javademo1   3/3     3            3           20h
nginx       1/1     1            1           5d22h

# 扩容了3个副本,将旧的 ReplicaSet 缩容到了 0 个副本,完成了Pod的升级
[root@k8smaster ~]# kubectl get rs
NAME                   DESIRED   CURRENT   READY   AGE
javademo1-5476dc8d7d   3         3         3       11m
javademo1-84dd5c9485   0         0         0       5h17m
nginx-f89759699        1         1         1       5d22h

#只有最新的  5476dc8d7d 信息
[root@k8smaster ~]# kubectl get pods
NAME                         READY   STATUS    RESTARTS   AGE
javademo1-5476dc8d7d-bf6m5   1/1     Running   0          11m
javademo1-5476dc8d7d-ttt5b   1/1     Running   0          11m
javademo1-5476dc8d7d-zd4c7   1/1     Running   0          11m
nginx-f89759699-5hkdw        1/1     Running   0          5d22h
[root@k8smaster ~]# kubectl describe deployment/javademo1
Name:                   javademo1
Namespace:              default
CreationTimestamp:      Tue, 18 Oct 2022 18:51:25 +0800
Labels:                 app=javademo1
Annotations:            deployment.kubernetes.io/revision: 3
Selector:               app=javademo1
Replicas:               3 desired | 3 updated | 3 total | 3 available | 0 unavailable
StrategyType:           RollingUpdate
MinReadySeconds:        0
RollingUpdateStrategy:  25% max unavailable, 25% max surge
Pod Template:
  Labels:  app=javademo1
  Containers:
   vipsoft:
    Image:        registry.cn-shanghai.aliyuncs.com/vipsoft/vipsoft:2.0
    Port:         <none>
    Host Port:    <none>
    Environment:  <none>
    Mounts:       <none>
  Volumes:        <none>
Conditions:
  Type           Status  Reason
  ----           ------  ------
  Available      True    MinimumReplicasAvailable
  Progressing    True    NewReplicaSetAvailable
OldReplicaSets:  <none>
NewReplicaSet:   javademo1-5476dc8d7d (3/3 replicas created)
Events:
  Type    Reason             Age   From                   Message
  ----    ------             ----  ----                   -------
  Normal  ScalingReplicaSet  12m   deployment-controller  Scaled up replica set javademo1-5476dc8d7d to 1
  Normal  ScalingReplicaSet  11m   deployment-controller  Scaled down replica set javademo1-84dd5c9485 to 2
  Normal  ScalingReplicaSet  11m   deployment-controller  Scaled up replica set javademo1-5476dc8d7d to 2
  Normal  ScalingReplicaSet  11m   deployment-controller  Scaled down replica set javademo1-84dd5c9485 to 1
  Normal  ScalingReplicaSet  11m   deployment-controller  Scaled up replica set javademo1-5476dc8d7d to 3
  Normal  ScalingReplicaSet  11m   deployment-controller  Scaled down replica set javademo1-84dd5c9485 to 0
[root@k8smaster ~]# 

上面 Events: 可以看出,先 up javademo1-5476dc8d7d to 1,再停 javademo1-84dd5c9485 to 2,Pod 逐个 滚动式更新,如下图:

Deployment 更新策略
在 Deployment 的定义中,可以通过 spec.strategy 指定 Pod 的更新策略,目前支持两种更新策略:
Recreate(重建):设置 spec.strategy.type=Recreate,表示 Deployment 在更新 Pod 时,会先杀掉所有正在运行的 Pod,然后创建新的 Pod。
RollingUpdate(滚动更新):设置 spec.strategy.type=RollingUpdate,表示 Deployment 会以滚动更新的方式来逐个更新 Pod。同时,可以通过设置 spec.strategy.rollingUpdate 下的两个参数(maxUnavailable 和 maxSurge)来控制滚动更新的过程。

4. Deployment 回滚

# 查看 Deployment 部署历史, CHANGE-CAUSE 里没有值,需要在创建 Deployment 时,使用 --record 参数,就可以在 CHANGE-CAUSE 列看到每个版本使用的命令了
[root@k8smaster ~]# kubectl rollout history deployment/javademo1
deployment.apps/javademo1 
REVISION  CHANGE-CAUSE
1         <none>
2         <none> 
# 查看版本 2 的信息: 
[root@k8smaster ~]# kubectl rollout history deployment/javademo1 --revision=2
deployment.apps/javademo1 with revision #2
Pod Template:
  Labels:       app=javademo1
        pod-template-hash=84dd5c9485
  Containers:
   vipsoft:
    Image:      registry.cn-shanghai.aliyuncs.com/vipsoft/vipsoft:1.0
    Port:       <none>
    Host Port:  <none>
    Environment:        <none>
    Mounts:     <none>
  Volumes:      <none>


# kubeetl rollout undo deployment/javademo1 --to-revision=2  加上参数,回滚到指定版本
# 这边没加参加,回滚到上一个版本
[root@k8smaster ~]# kubectl rollout undo deployment/javademo1
deployment.apps/javademo1 rolled back
[root@k8smaster ~]# kubectl describe deployment/javademo1
Name:                   javademo1
Namespace:              default
CreationTimestamp:      Tue, 18 Oct 2022 18:51:25 +0800
Labels:                 app=javademo1
Annotations:            deployment.kubernetes.io/revision: 4
Selector:               app=javademo1
Replicas:               3 desired | 3 updated | 3 total | 3 available | 0 unavailable
StrategyType:           RollingUpdate
MinReadySeconds:        0
RollingUpdateStrategy:  25% max unavailable, 25% max surge
Pod Template:
  Labels:  app=javademo1
  Containers:
   vipsoft:
    Image:        registry.cn-shanghai.aliyuncs.com/vipsoft/vipsoft:1.0
    Port:         <none>
    Host Port:    <none>
    Environment:  <none>
    Mounts:       <none>
  Volumes:        <none>
Conditions:
  Type           Status  Reason
  ----           ------  ------
  Available      True    MinimumReplicasAvailable
  Progressing    True    NewReplicaSetAvailable
OldReplicaSets:  <none>
NewReplicaSet:   javademo1-84dd5c9485 (3/3 replicas created)
Events:
  Type    Reason             Age                  From                   Message
  ----    ------             ----                 ----                   -------
  Normal  ScalingReplicaSet  51m                  deployment-controller  Scaled up replica set javademo1-5476dc8d7d to 1
  Normal  ScalingReplicaSet  50m                  deployment-controller  Scaled down replica set javademo1-84dd5c9485 to 2
  Normal  ScalingReplicaSet  50m                  deployment-controller  Scaled up replica set javademo1-5476dc8d7d to 2
  Normal  ScalingReplicaSet  50m                  deployment-controller  Scaled up replica set javademo1-5476dc8d7d to 3
  Normal  ScalingReplicaSet  50m                  deployment-controller  Scaled down replica set javademo1-84dd5c9485 to 1
  Normal  ScalingReplicaSet  50m                  deployment-controller  Scaled down replica set javademo1-84dd5c9485 to 0
  Normal  ScalingReplicaSet  20s (x2 over 5h57m)  deployment-controller  Scaled up replica set javademo1-84dd5c9485 to 1
  Normal  ScalingReplicaSet  17s                  deployment-controller  Scaled down replica set javademo1-5476dc8d7d to 2
  Normal  ScalingReplicaSet  17s                  deployment-controller  Scaled up replica set javademo1-84dd5c9485 to 2
  Normal  ScalingReplicaSet  15s                  deployment-controller  Scaled down replica set javademo1-5476dc8d7d to 1
  Normal  ScalingReplicaSet  14s (x2 over 5h51m)  deployment-controller  Scaled up replica set javademo1-84dd5c9485 to 3
  Normal  ScalingReplicaSet  9s                   deployment-controller  Scaled down replica set javademo1-5476dc8d7d to 0
[root@k8smaster ~]#

history 中 CHANGE-CAUSE 里没有值,需要在创建 Deployment 时,使用 --record 参数,就可以在 CHANGE-CAUSE 列看到每个版本使用的命令了

看了很多贴子,这篇不错:Pod 的升级和回滚

有关Kubernetes(K8S) Deployment 升级和回滚的更多相关文章

  1. ruby - 通过 rvm 升级 ruby​​gems 的问题 - 2

    尝试通过RVM将RubyGems升级到版本1.8.10并出现此错误:$rvmrubygemslatestRemovingoldRubygemsfiles...Installingrubygems-1.8.10forruby-1.9.2-p180...ERROR:Errorrunning'GEM_PATH="/Users/foo/.rvm/gems/ruby-1.9.2-p180:/Users/foo/.rvm/gems/ruby-1.9.2-p180@global:/Users/foo/.rvm/gems/ruby-1.9.2-p180:/Users/foo/.rvm/gems/rub

  2. ruby-on-rails - 项目升级后 Pow 不会更改 ruby​​ 版本 - 2

    我在我的Rails项目中使用Pow和powifygem。现在我尝试升级我的ruby​​版本(从1.9.3到2.0.0,我使用RVM)当我切换ruby​​版本、安装所有gem依赖项时,我通过运行railss并访问localhost:3000确保该应用程序正常运行以前,我通过使用pow访问http://my_app.dev来浏览我的应用程序。升级后,由于错误Bundler::RubyVersionMismatch:YourRubyversionis1.9.3,butyourGemfilespecified2.0.0,此url不起作用我尝试过的:重新创建pow应用程序重启pow服务器更新战俘

  3. ruby - 如何在 Lion 上安装 Xcode 4.6,需要用 RVM 升级 ruby - 2

    我实际上是在尝试使用RVM在我的OSX10.7.5上更新ruby,并在输入以下命令后:rvminstallruby我得到了以下回复:Searchingforbinaryrubies,thismighttakesometime.Checkingrequirementsforosx.Installingrequirementsforosx.Updatingsystem.......Errorrunning'requirements_osx_brew_update_systemruby-2.0.0-p247',pleaseread/Users/username/.rvm/log/138121

  4. ruby - 在不使用 RVM 的情况下在 Mac 上卸载和升级 Ruby - 2

    我最近决定从我的系统中卸载RVM。在thispage提出的一些论点说服我:实际上,我的决定是,我根本不想担心Ruby的多个版本。我只想使用1.9.2-p290版本而不用担心其他任何事情。但是,当我在我的Mac上运行ruby--version时,它告诉我我的版本是1.8.7。我四处寻找如何简单地从我的Mac上卸载这个Ruby,但奇怪的是我没有找到任何东西。似乎唯一想卸载Ruby的人运行linux,而使用Mac的每个人都推荐RVM。如何从我的Mac上卸载Ruby1.8.7?我想升级到1.9.2-p290版本,并且我希望我的系统上只有一个版本。 最佳答案

  5. ruby - 我正在学习编程并选择了 Ruby。我应该升级到 Ruby 1.9 吗? - 2

    我完全不是程序员,正在学习使用Ruby和Rails框架进行编程。我目前正在使用Ruby1.8.7和Rails3.0.3,但我想知道我是否应该升级到Ruby1.9,因为我真的没有任何升级的“遗留”成本。缺点是什么?我是否会遇到与普通gem的兼容性问题,或者甚至其他我不太了解甚至无法预料的问题? 最佳答案 你应该升级。不要坚持从1.8.7开始。如果您发现不支持1.9.2的gem,请避免使用它们(因为它们很可能不被维护)。如果您对gem是否兼容1.9.2有任何疑问,您可以在以下位置查看:http://www.railsplugins.or

  6. ruby-on-rails - 从 Rails 2.3 升级到 Rails 4.0 - 2

    我们有一个目前在Rails2.3.12版和Ruby1.8.7版上运行的应用程序。我们想将我们的应用程序更新到Rails4.0和Ruby2.1.0。我们有大约200个模型和150个Controller。我想知道升级过程需要多大的努力。您还可以提供升级可以遵循的步骤。我们应该先升级Ruby然后再升级Rails还是相反? 最佳答案 您想要实现的目标将是史诗般的努力。我无法为您提供分步说明,因为不可能在一个答案中涵盖所有情况。我建议不要同时升级Ruby和Rails,而是分步升级。升级本身的复杂性是巨大的,但只要您的应用程序具有合理的测试覆盖

  7. ruby-on-rails - Rails 4.1.0.beta1 升级失败 - 2

    我最近尝试安装rails4.1.0.beta1,但是railss导致以下错误。[RVM]/gems/ruby-2.0.0-p247/gems/activesupport-4.1.0.beta1/lib/active_support/core_ext/module/aliasing.rb:32:in`alias_method':undefinedmethod`graft'forclass`ActiveRecord::Associations::JoinDependency'(NameError)[RVM]/gems/ruby-2.0.0-p247/gems/activesupport-4

  8. ruby-on-rails - ActionCable 无需升级到 Rails 5 beta - 2

    我目前有一个运行在4.2.5上的Rails应用程序,我想使用ActionCable而不必将整个应用程序升级到Rails5.0.0.beta3版本并冒破坏所有其他gem的风险。按照我在互联网上看到的指南,我已经尝试过gem'actioncable',github:'rails/actioncable'这不起作用,因为ActionCable存储库已合并到Rails存储库中。我什至试过gem'actioncable',github:'rails/rails'但这似乎不适用于ActionCable合并到Rails时发生的版本重新编号。(唯一低于5.0.0.beta*的版本是0.0.0,这似乎是

  9. ruby-on-rails - Rails 5 升级 :/actionpack-5. 0.0/lib/action_controller/test_case.rb:49:in `initialize':参数数量错误(0 代表 2)(ArgumentError) - 2

    我最近正在进行Rails5升级,当我尝试启动Rails控制台时遇到了这个错误:/actionpack-5.0.0/lib/action_controller/test_case.rb:49:ininitialize':wrongnumberofarguments(0for2)(ArgumentError)当前bundleupdaterails已经完成了gem依赖项的解决,足以更新到5.0.0,rspec正在运行(尽管我正在修复很多中断)。我也可以运行railss没有错误。这里是代码中断行:https://github.com/rails/rails/blob/master/action

  10. ruby-on-rails - 无法加载 lib 目录模块 - 未初始化的常量 - rails 2 到 rails 3 升级 - 2

    我目前正在将Railsv2中的应用程序迁移到v3在我的lib/我在子目录中有一些模块,例如,我有lib/search/host_search.rb有一个moduleHostSearchdefdo_search(args)#...endend然后我需要在名为Discovery::HostController的Controller中使用它defsearch_resultsoutput=HostSearch.do_search(:search_string=>@search_string,:page=>params[:page],:user=>@current_user)#...end但是我

随机推荐