草庐IT

keepalived+nginx+nginx web script实现双主模型

文丑非良将 2023-03-28 原文
思路: 1. 配置双机互信(非必须) 2. 添加主机名解析 3. 设置时间同步 4. 实现主机的高可用 5. 实现web服务器的高可用 6. 测试 架构: Master1: 172.16.16.16  node2.ja.com   软件: keepalived+nginx  网卡Vmnet2 Master2: 172.16.16.17  node3.ja.com   软件: keepalived+nginx  网卡Vmnet2 宿主机:仅作为测试使用的客户端一、准备工作

1)编辑/etc/hosts文件,分别为node3,node4添加主机名称解析,添加内容如下:

172.16.16.16 node2.ja.com 172.16.16.17 node3.ja.com2)配置双机互信,实现免密钥、免密码登录(方便以后的管理,如软件安装,文件分发)

node2: ssh-keygen -t rsa -P '' ssh-copy-id -i .ssh/id_rsa.pub node4.ja.com node3: ssh-keygen -t rsa -P '' ssh-copy-id -i .ssh/id_rsa.pub node3.ja.com3)时间同步

命令行同步,立即生效:

ssh node2.ja.com 'ntpdate 172.16.0.1';ntpdate 172.16.0.1设置定时任务,永久有效:

echo '*/5 * * * * /usr/sbin/ntpdate 172.16.0.1 &>/dev/null;/sbin/hwclock -w' >>/var/spool/cron/root4)分别为node2,node3安装keepalived和nginx

yum -y install keepalived nginx ipvsadm

二、编写外部脚本

1)主机维护脚本(这个配置在keepalived.conf中)

vrrp_script chk_mantaince {             # chk_mantaince定义脚本的名称,可随意取     script "[[ -f /etc/keepalived/down ]] && exit 1 || exit 0"    #命令(其实这里可以是自己定义好的脚本路径也可以是判断命令)#这里的意思是如果在这个文件下有down这个文件就表示期望这 个节点为备用状态。    interval 1           #每隔1秒钟执行一次    weight -2            #一旦命令执行失败,权重降低2个 }2)keepalived状态转换通知脚本(这个放在/etc/keepalived/命目录下)

这个脚本2个节点都要有

[root@node2 keepalived]# cat notify.sh #!/bin/bash # Author: liuyuan <www.ja.com> # description: An example of notify script #   vip=172.16.16.10 contact='root@localhost'   notify() {     mailsubject="`hostname` to be $1: $vip floating"     mailbody="`date '+%F %H:%M:%S'`: vrrp transition, `hostname` changed to be $1"     echo $mailbody | mail -s "$mailsubject" $contact }   case "$1" in     master)         notify master         /etc/rc.d/init.d/nginx start         exit 0     ;;     backup)         notify backup         /etc/rc.d/init.d/nginx stop         exit 0     ;;     fault)         notify fault         /etc/rc.d/init.d/nginx stop         exit 0     ;;     *)         echo 'Usage: `basename $0` {master|backup|fault}'         exit 1     ;; esac添加可执行权限

chmod +x notify.sh


3)nginx web服务健康检测脚本及邮件通知脚本(这个放在/etc/keepalived/命目录下)

这个脚本2个节点都要有

[root@node2 keepalived]# cat monitor_nginx.sh #!/bin/bash #Author: liuyuan Contact='root@localhost' Subject="Web server is bad" Mailbody="Date: `date +"%F %T"` Event: 'nginx is down' Host: `uname -n`"   while true;do       nginx_status=`killall -0 nginx &>/dev/null`       if [ `echo $?` -ne 0 ];then          echo $Mailbody|mail -s $Subject $Contact          /etc/init.d/nginx start &> /dev/null       fi          sleep 5 done添加可执行权限

chmod +x  monitor_nginx.sh


三、配置keepalived

node2上keepalived的完整配置如下:

[root@node2 keepalived]# cat keepalived.conf ! Configuration File for keepalived   global_defs {    notification_email {      root@localhost    }    notification_email_from Alexandre.Cassen@firewall.loc    smtp_server 127.0.0.1    smtp_connect_timeout 30    router_id LVS_DEVEL }   vrrp_script chk_maintaince {               script "[[ -e /etc/keepalived/down ]] && exit 1 || exit 0"      interval 1             weight -2            }   vrrp_instance VI_1 {     state MASTER     interface eth0     virtual_router_id 51     priority 100     advert_int 1     authentication {         auth_type PASS         auth_pass 2222     }     virtual_ipaddress {         172.16.16.10     }     track_script {     chk_maintaince        }     notify_master "/etc/keepalived/notify.sh master"     notify_backup "/etc/keepalived/notify.sh backup"     notify_fault  "/etc/keepalived/notify.sh fault" }   vrrp_instance VI_2 {     state BACKUP     interface eth0     virtual_router_id 52     priority 99     advert_int 1     authentication {         auth_type PASS         auth_pass 3333     }     virtual_ipaddress {         172.16.16.11     }     track_script {         chk_maintaince     }     notify_master "/etc/keepalived/notify.sh master"     notify_backup "/etc/keepalived/notify.sh backup"     notify_fault  "/etc/keepalived/notify.sh fault" }       real_server 172.16.16.16 80 {         weight 1         HTTP_GET {             url {               path /           status_code 200             }             connect_timeout 3             nb_get_retry 3             delay_before_retry 3         }     }     real_server 172.16.16.17 80 {         weight 1         HTTP_GET {             url {               path /           status_code 200             }             connect_timeout 3             nb_get_retry 3             delay_before_retry 3             }         }    } }


node3节点上keepalived的配置,与上面大部分相同,仅需作出如下修改即可

vrrp_instance VI_1中  state BACKUP priority 99          vrrp_instance VI_1中  state MASTER priority 100注: 相同实例通信时的密码要相同;每个实例都要有一个独立的VIP地址

     定义完检测脚本还需在实例中调用检测跟踪机制,这样检测脚本才会生效;

     主、备节点的priority大小和 weight的大小一定要合适,不然vip会转移失败的;


将nginx web服务的守护进程调入后台运行

[root@node2 keepalived]# nohup sh monitor_nginx.sh & [1] 32071 [root@node3 keepalived]# nohup sh monitor_nginx.sh & [1] 30106

查看正在后台运行的nginx web服务的守护进程

[root@node2 keepalived]# ps -elf|grep "sh monitor_nginx.sh"|grep -v grep 0 S root     32071 30943  0  80   0 - 26523 wait   13:29 pts/4    00:00:00 sh monitor_nginx.sh [root@node3 keepalived]# ps -elf|grep "sh monitor_nginx.sh"|grep -v grep 0 S root     30106 27606  0  80   0 - 26523 wait   02:13 pts/0    00:00:00 sh monitor_nginx.sh

查看nginx的80端口是否启用

[root@node2 keepalived]# lsof -i:80 COMMAND   PID  USER   FD   TYPE DEVICE SIZE/OFF NODE NAME nginx   31880  root    6u  IPv4 160257      0t0  TCP *:http (LISTEN) nginx   31882 nginx    6u  IPv4 160257      0t0  TCP *:http (LISTEN) [root@node3 keepalived]# lsof -i:80 COMMAND   PID  USER   FD   TYPE DEVICE SIZE/OFF NODE NAME nginx   29815  root    6u  IPv4 310255      0t0  TCP *:http (LISTEN) nginx   29817 nginx    6u  IPv4 310255      0t0  TCP *:http (LISTEN)


四、主机和服务高可用测试

测试双主高可用前的测试:确保2个web服务器均可正常提供服务

分别在浏览器输入2个VIP的地址看是否可以看到各自对应的web页面

主节点1 VIP:http://172.16.16.10/  参考截图:双主-node2


主节点2 VIP: http://172.16.16.11/  参考截图:双主-node3

测试主机(node2,node3)的高可用

思路:

(1)停止node2的keepalived服务或者直接将node2的虚拟机挂起,模拟keepalived应用程序或服务器故障

验证node2上的VIP地址是否已经成功转移到node3

(2)在浏览器分别使用http://172.16.16.10/和http://172.16.16.11/访问web资源,验证是否可以看到node3上提供的web服务

参考截图10,11

截图10:


截图11:


(3)当node2的keepalived再次启动后,又会把原有的VIP资源抢夺回来,web页面也会是自己提供的


停掉node2上的keepalived服务

[root@node2 keepalived]# service keepalived stop查看node2上的VIP是否成功转移

[root@node2 keepalived]# ip addr show|grep 'eth0' 2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000     inet 172.16.16.16/16 brd 172.16.255.255 scope global eth0

查看node3是否成功接收了从node2转移来的VIP

[root@node3 keepalived]# ip addr show|grep 'eth0' 2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000     inet 172.16.16.17/16 brd 172.16.255.255 scope global eth0     inet 172.16.16.11/32 scope global eth0     inet 172.16.16.10/32 scope global eth0如上,可以证明VIP资源已成功转移.


当node2的keepalived再次启动后,又会把原有的VIP资源抢夺回来,web页面也会是自己提供的

[root@node2 keepalived]# service keepalived start [root@node2 keepalived]# ip addr show|grep 'eth0' 2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000     inet 172.16.16.16/16 brd 172.16.255.255 scope global eth0     inet 172.16.16.10/32 scope global eth0

访问http://172.16.16.10,看页面是否是node2自己提供的

参考截图12

在node3上执行如上的操作,那么node3上的VIP将会转移到node2,另外在访问web时,会看到node2提供的页面,这个操作就交给你了

至此,模拟keepalived应用程序故障后,实现主机的高可用已成功实现



下面我们将模拟nginx 提供的web的高可用

思路:

由于我在前面写的是一个守护进程形式的脚本,所以当服务器上nginx web服务,停掉的时候,守护进程脚本就会尝试去启动nginx,

这可以应对nginx服务意外终止的情况;除非,监控nginx的守护进程脚本被停止了

[root@node2 ~]#  jobs -l [1]+ 32071 Running                 nohup sh monitor_nginx.sh & [root@node3 ~]#  jobs -l [1]+ 30106 Running                 nohup sh monitor_nginx.sh &

停掉node2上的nginx服务

[root@node2 ~]# service nginx stop Stopping nginx:                                            [  OK  ] [root@node2 ~]# service nginx stop [root@node2 ~]# lsof -i:80 [root@node2 ~]# lsof -i:80 COMMAND  PID  USER   FD   TYPE DEVICE SIZE/OFF NODE NAME nginx   7598  root    6u  IPv4 173882      0t0  TCP *:http (LISTEN) nginx   7600 nginx    6u  IPv4 173882      0t0  TCP *:http (LISTEN)为了看到守护进程尝试启动nginx web服务的瞬间,我们在停掉nginx后,要立即执行端口反查命令,看nginx的web服务是否在线


至此,nginx web服务的高可用和主机的高可用已成功实现。

###################################################################################################



有关keepalived+nginx+nginx web script实现双主模型的更多相关文章

  1. ruby-on-rails - Rails - 子类化模型的设计模式是什么? - 2

    我有一个模型:classItem项目有一个属性“商店”基于存储的值,我希望Item对象对特定方法具有不同的行为。Rails中是否有针对此的通用设计模式?如果方法中没有大的if-else语句,这是如何干净利落地完成的? 最佳答案 通常通过Single-TableInheritance. 关于ruby-on-rails-Rails-子类化模型的设计模式是什么?,我们在StackOverflow上找到一个类似的问题: https://stackoverflow.co

  2. ruby-on-rails - Rails - 一个 View 中的多个模型 - 2

    我需要从一个View访问多个模型。以前,我的links_controller仅用于提供以不同方式排序的链接资源。现在我想包括一个部分(我假设)显示按分数排序的顶级用户(@users=User.all.sort_by(&:score))我知道我可以将此代码插入每个链接操作并从View访问它,但这似乎不是“ruby方式”,我将需要在不久的将来访问更多模型。这可能会变得很脏,是否有针对这种情况的任何技术?注意事项:我认为我的应用程序正朝着单一格式和动态页面内容的方向发展,本质上是一个典型的网络应用程序。我知道before_filter但考虑到我希望应用程序进入的方向,这似乎很麻烦。最终从任何

  3. ruby-on-rails - 在混合/模块中覆盖模型的属性访问器 - 2

    我有一个包含模块的模型。我想在模块中覆盖模型的访问器方法。例如:classBlah这显然行不通。有什么想法可以实现吗? 最佳答案 您的代码看起来是正确的。我们正在毫无困难地使用这个确切的模式。如果我没记错的话,Rails使用#method_missing作为属性setter,因此您的模块将优先,阻止ActiveRecord的setter。如果您正在使用ActiveSupport::Concern(参见thisblogpost),那么您的实例方法需要进入一个特殊的模块:classBlah

  4. ruby-on-rails - 如何优雅地重启 thin + nginx? - 2

    我的瘦服务器配置了nginx,我的ROR应用程序正在它们上运行。在我发布代码更新时运行thinrestart会给我的应用程序带来一些停机时间。我试图弄清楚如何优雅地重启正在运行的Thin实例,但找不到好的解决方案。有没有人能做到这一点? 最佳答案 #Restartjustthethinserverdescribedbythatconfigsudothin-C/etc/thin/mysite.ymlrestartNginx将继续运行并代理请求。如果您将Nginx设置为使用多个上游服务器,例如server{listen80;server

  5. ruby-on-rails - 如何验证非模型(甚至非对象)字段 - 2

    我有一个表单,其中有很多字段取自数组(而不是模型或对象)。我如何验证这些字段的存在?solve_problem_pathdo|f|%>... 最佳答案 创建一个简单的类来包装请求参数并使用ActiveModel::Validations。#definedsomewhere,atthesimplest:require'ostruct'classSolvetrue#youcouldevencheckthesolutionwithavalidatorvalidatedoerrors.add(:base,"WRONG!!!")unlesss

  6. ruby-on-rails - form_for 中不在模型中的自定义字段 - 2

    我想向我的Controller传递一个参数,它是一个简单的复选框,但我不知道如何在模型的form_for中引入它,这是我的观点:{:id=>'go_finance'}do|f|%>Transferirde:para:Entrada:"input",:placeholder=>"Quantofoiganho?"%>Saída:"output",:placeholder=>"Quantofoigasto?"%>Nota:我想做一个额外的复选框,但我该怎么做,模型中没有一个对象,而是一个要检查的对象,以便在Controller中创建一个ifelse,如果没有检查,请帮助我,非常感谢,谢谢

  7. ruby-on-rails - 如何将验证与模型分开 - 2

    我有一些非常大的模型,我必须将它们迁移到最新版本的Rails。这些模型有相当多的验证(User有大约50个验证)。是否可以将所有这些验证移动到另一个文件中?说app/models/validations/user_validations.rb。如果可以,有人可以提供示例吗? 最佳答案 您可以为此使用关注点:#app/models/validations/user_validations.rbrequire'active_support/concern'moduleUserValidationsextendActiveSupport:

  8. ruby - 如何根据特征实现 FactoryGirl 的条件行为 - 2

    我有一个用户工厂。我希望默认情况下确认用户。但是鉴于unconfirmed特征,我不希望它们被确认。虽然我有一个基于实现细节而不是抽象的工作实现,但我想知道如何正确地做到这一点。factory:userdoafter(:create)do|user,evaluator|#unwantedimplementationdetailshereunlessFactoryGirl.factories[:user].defined_traits.map(&:name).include?(:unconfirmed)user.confirm!endendtrait:unconfirmeddoenden

  9. ruby-on-rails - Rails 模型——非持久类成员或属性? - 2

    对于Rails模型,是否可以/建议让一个类的成员不持久保存到数据库中?我想将用户最后选择的类型存储在session变量中。由于我无法从我的模型中设置session变量,我想将值存储在一个“虚拟”类成员中,该成员只是将值传递回Controller。你能有这样的类(class)成员吗? 最佳答案 将非持久属性添加到Rails模型就像任何其他Ruby类一样:classUser扩展解释:在Ruby中,所有实例变量都是私有(private)的,不需要在赋值前定义。attr_accessor创建一个setter和getter方法:classUs

  10. ruby-on-rails - Rails - 从另一个模型中创建一个模型的实例 - 2

    我有一个正在构建的应用程序,我需要一个模型来创建另一个模型的实例。我希望每辆车都有4个轮胎。汽车模型classCar轮胎模型classTire但是,在make_tires内部有一个错误,如果我为Tire尝试它,则没有用于创建或新建的activerecord方法。当我检查轮胎时,它没有这些方法。我该如何补救?错误是这样的:未定义的方法'create'forActiveRecord::AttributeMethods::Serialization::Tire::Module我测试了两个环境:测试和开发,它们都因相同的错误而失败。 最佳答案

随机推荐