草庐IT

K8S集群安装和迁移

Felix_ 2023-03-28 原文

原内部测试环境K8S集群为3节点集群(一主二从)，不知从哪天开始起，主节点从每两天异常停机，到后来每天异常停机，再后来每两小时异常停机，排查结果后怀疑是硬件故障，只能更换主节点。但是上面挂载了太多的服务（数据由NFS进行存储），所以需要进行集群迁移，经过资料查阅，总结了以下迁移步骤和详情，以新建集群环境为例，部署服务后进行集群迁移。

至于为何新建集群环境，是因为首次迁移失败了，只能手动进行恢复T_T

测试环境信息

系统版本: Ubuntu20.04 * 2
K8S版本: v1.21.5 单节点 * 2
Virtualbox版本: 6.1.32
Vagrant版本: 2.2.14

环境准备

虚拟机安装Ubuntu20.04操作系统(这里采用vagrant进行快速安装,配置文件如下)

Vagrant.configure("2") do |config|
    (1..2) .each do |i|
        config.vm.define "k8s-node#{i}" do |node|
            node.vm.box = "ubuntu/focal64"
            node.vm.hostname = "k8s-node#{i}"
            node.vm.network "public_network", ip: "192.168.50.#{220+i}"
            node.vm.provider "virtualbox" do |v|
                v.name = "k8s-node#{i}"
                v.memory = 4096
                v.cpus = 2
            end
        end
    end
end

随后启动系统

vagrant up

安装K8S
这里采用kubesphere进行K8S的快速单节点安装

#临时使用代理
export KKZONE=cn

#下载安装文件
curl -sfL https://get-kk.kubesphere.io | VERSION=v2.0.0 sh -

# 只安装k8s
./kk create cluster --with-kubernetes v1.21.5

服务部署

创建命名空间

kubectl create namespace test

创建nginx的deployment和service

apiVersion: apps/v1
kind: Deployment
metadata:
  name: nginx
  labels:
    app: nginx
  namespace: test
spec:
  replicas: 2
  selector:
    matchLabels:
      app: nginx
  template:
    metadata:
      name: nginx
      labels:
        app: nginx
    spec:
      containers:
        - name: nginx
          image: nginx:1.10
          imagePullPolicy: IfNotPresent
---
apiVersion: v1
kind: Service
metadata:
  name: nginx
  labels:
    app: nginx
  namespace: test
spec:
  selector:
    app: nginx
  type: NodePort
  ports:
    - name: http-80
      nodePort: 32001
      port: 80
      targetPort: 80

部署服务

kubectl apply -f nginx.yml

查看当前集群资源


image.png

集群迁移

备份etcd

etcdctl snapshot save --cacert=/etc/ssl/etcd/ssl/ca.pem --cert=/etc/ssl/etcd/ssl/admin-k8s-node1.pem --key=/etc/ssl/etcd/ssl/admin-k8s-node1-key.pem test.db

复制etcd数据到新集群

scp /root/test.db root@192.168.50.222

停止新集群的etcd

systemctl stop etcd

停止新集群的apiserver

mv /etc/kubernetes/manifests/*.yaml /tmp

备份新集群的etcd文件夹

mv /var/lib/etcd /var/lib/etcd.bak

还原前集群etcd数据到新集群

etcdctl snapshot restore --cacert=/etc/ssl/etcd/ssl/ca.pem --cert=/etc/ssl/etcd/ssl/admin-k8s-node2.pem --key=/etc/ssl/etcd/ssl/admin-k8s-node2-key.pem --data-dir=/var/lib/etcd test.db

启动etcd

systemctl stop etcd

启动apiserver

mv /tmp/*.yaml  /etc/kubernetes/manifests

稍等片刻，验证迁移结果


image.png

这个结果显然是错误的，可以看到，有双份的资源，原因是这个集群的node为k8s-node2,原集群的node为k8s-node1，在新集群上启动后出现此问题，所以建议新旧环境（node名称）尽量保持一致，当然这个情况也能解决

kubectl delete node k8s-node1

然后删除所有node为k8s-node1的pod，集群恢复就正常了，再次验证结果


image.png

至此，集群及资源迁移完毕。

以上内容转载请注明出处，同时也请大家不吝你的关注和下面的赞赏
↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓

K8SK8codesection新集

有关K8S集群安装和迁移的更多相关文章

  1. ruby-on-rails - Ruby on Rails 迁移，将表更改为 MyISAM - 2

    如何正确创建Rails迁移，以便将表更改为MySQL中的MyISAM？目前是InnoDB。运行原始执行语句会更改表，但它不会更新db/schema.rb，因此当在测试环境中重新创建表时，它会返回到InnoDB并且我的全文搜索失败。我如何着手更改/添加迁移，以便将现有表修改为MyISAM并更新schema.rb，以便我的数据库和相应的测试数据库得到相应更新？ 最佳答案 我没有找到执行此操作的好方法。您可以像有人建议的那样更改您的schema.rb，然后运行:rakedb:schema:load，但是，这将覆盖您的数据。我的做法是(假设

  2. ruby - 在 64 位 Snow Leopard 上使用 rvm、postgres 9.0、ruby 1.9.2-p136 安装 pg gem 时出现问题 - 2

    我想为Heroku构建一个Rails3应用程序。他们使用Postgres作为他们的数据库，所以我通过MacPorts安装了postgres9.0。现在我需要一个postgresgem并且共识是出于性能原因你想要pggem。但是我对我得到的错误感到非常困惑当我尝试在rvm下通过geminstall安装pg时。我已经非常明确地指定了所有postgres目录的位置可以找到但仍然无法完成安装:$envARCHFLAGS='-archx86_64'geminstallpg--\--with-pg-config=/opt/local/var/db/postgresql90/defaultdb/po

  3. ruby - 使用 Vim Rails，您可以创建一个新的迁移文件并一次性打开它吗？ - 2

    使用带有Rails插件的vim，您可以创建一个迁移文件，然后一次性打开该文件吗？textmate也可以这样吗？ 最佳答案 你可以使用rails.vim然后做类似的事情::Rgeneratemigratonadd_foo_to_bar插件将打开迁移生成的文件，这正是您想要的。我不能代表textmate。 关于ruby-使用VimRails，您可以创建一个新的迁移文件并一次性打开它吗？，我们在StackOverflow上找到一个类似的问题： https://sta

  4. ruby - 完全离线安装RVM - 2

    我打算为ruby​​脚本创建一个安装程序，但我希望能够确保机器安装了RVM。有没有一种方法可以完全离线安装RVM并且不引人注目(通过不引人注目，就像创建一个可以做所有事情的脚本而不是要求用户向他们的bash_profile或bashrc添加一些东西)我不是要脚本本身，只是一个关于如何走这条路的快速指针(如果可能的话)。我们还研究了这个很有帮助的问题:RVM-isthereawayforsimpleofflineinstall?但有点误导，因为答案只向我们展示了如何离线在RVM中安装ruby。我们需要能够离线安装RVM本身，并查看脚本https://raw.github.com/wayn

  5. ruby-on-rails - rails 目前在重启后没有安装 - 2

    我有一个奇怪的问题:我在rvm上安装了ruby​​onrails。一切正常，我可以创建项目。但是在我输入“railsnew”时重新启动后，我有“程序'rails'当前未安装。”。SystemUbuntu12.04ruby-v"1.9.3p194"gemlistactionmailer(3.2.5)actionpack(3.2.5)activemodel(3.2.5)activerecord(3.2.5)activeresource(3.2.5)activesupport(3.2.5)arel(3.0.2)builder(3.0.0)bundler(1.1.4)coffee-rails(

  6. ruby - 如何为 emacs 安装 ruby​​-mode - 2

    我刚刚为fedora安装了emacs。我想用emacs编写ruby。为ruby​​提供代码提示、代码完成类型功能所需的工具、扩展是什么？ 最佳答案 ruby-mode已经包含在Emacs23之后的版本中。不过，它也可以通过ELPA获得。您可能感兴趣的其他一些事情是集成RVM、feature-mode(Cucumber)、rspec-mode、ruby-electric、inf-ruby、rinari(用于Rails)等。这是我当前用于Ruby开发的Emacs配置:https://github.com/citizen428/emacs

  7. ruby-on-rails - 无法在centos上安装therubyracer(V8和GCC出错) - 2

    我正在尝试在我的centos服务器上安装therubyracer，但遇到了麻烦。$geminstalltherubyracerBuildingnativeextensions.Thiscouldtakeawhile...ERROR:Errorinstallingtherubyracer:ERROR:Failedtobuildgemnativeextension./usr/local/rvm/rubies/ruby-1.9.3-p125/bin/rubyextconf.rbcheckingformain()in-lpthread...yescheckingforv8.h...no***e

  8. ruby - 通过 RVM (OSX Mountain Lion) 安装 Ruby 2.0.0-p247 时遇到问题 - 2

    我的最终目标是安装当前版本的RubyonRails。我在OSXMountainLion上运行。到目前为止，这是我的过程:已安装的RVM$\curl-Lhttps://get.rvm.io|bash-sstable检查已知(我假设已批准)安装$rvmlistknown我看到当前的稳定版本可用[ruby-]2.0.0[-p247]输入命令安装$rvminstall2.0.0-p247注意:我也试过这些安装命令$rvminstallruby-2.0.0-p247$rvminstallruby=2.0.0-p247我很快就无处可去了。结果:$rvminstall2.0.0-p247Search

  9. ruby - 如何在 Lion 上安装 Xcode 4.6，需要用 RVM 升级 ruby - 2

    我实际上是在尝试使用RVM在我的OSX10.7.5上更新ruby，并在输入以下命令后:rvminstallruby我得到了以下回复:Searchingforbinaryrubies,thismighttakesometime.Checkingrequirementsforosx.Installingrequirementsforosx.Updatingsystem.......Errorrunning'requirements_osx_brew_update_systemruby-2.0.0-p247',pleaseread/Users/username/.rvm/log/138121

  10. ruby - Fast-stemmer 安装问题 - 2

    由于fast-stemmer的问题，我很难安装我想要的任何ruby​​gem。我把我得到的错误放在下面。Buildingnativeextensions.Thiscouldtakeawhile...ERROR:Errorinstallingfast-stemmer:ERROR:Failedtobuildgemnativeextension./System/Library/Frameworks/Ruby.framework/Versions/2.0/usr/bin/rubyextconf.rbcreatingMakefilemake"DESTDIR="cleanmake"DESTDIR=

随机推荐