Centos Keepalived-Ha集群+Lvs-DR+Nginx集群配置

CentOS 前端之家
前端之家收集整理的这篇文章主要介绍了Centos Keepalived-Ha集群+Lvs-DR+Nginx集群配置，前端之家小编觉得挺不错的，现在分享给大家，也给大家做个参考。

背景介绍

我们都知道一台服务器能提供的资源是有限的，如果想打破这个限制，只有两个办法，一个是购买硬件，提升服务器性能，但是性价比过高，而第二种方法这则是，使用集群软件让两台服务器处理一个服务的不同请求，分带单台服务器的负载，从而提升性能，实现这一的软件开源著名的有Nginx或者Lvs，这里我们使用的是LVS，但是lvs需要一个调度服务器，这样调度服务器就是一个集训的单点故障，一旦调度服务器出现故障，整个集群便崩溃，所以我们需要两台调度节点，一旦一个调度节点损坏，那么另一台调度节点开始工作，这里我们使用Keepalived开源软件实现调度器的高可用。

wKioL1kYbLygKCAQAAB3ZXC3Rb4015.png

逻辑图介绍

1.用户在访问Nginx的时候，先通过VIP访问Master1，由Master指定那个real-server提供服务

2.在Master通过lvs-Dr指定的算法选定由Nginx1来提供服务，那么数据在通过VIP发送到Nginx1上

3.Nginx处理完请求后，在通过自身的VIP将处理后的请求直接发送给User

注明：

如果Master出现故障，那么Baskup将替代Master工作

如果Nginx1出现故障，那么Nginx2将提点Nginx1工作

如果Nginx1没有出现故障，那么LVS服务使用算法会将请求平均到Nginx1和Nginx2上

如果两台Nginx同时出现故障，那么Master会提供Sorry Server服务

wKioL1kYaDWxsZK6AACK3vx4cBU466.png

物理拓扑图及环境介绍

服务器：使用虚拟机虚拟4套服务器

操作系统：CentOS7.3

HA软件/LVs软件：keepalived

Web软件：Nginx


IP及主机名配置

VIP：172.18.17.30

Master：

主机名：shiyan7.one

IP地址：172.18.17.31

Backup

主机名：shiyan7.fore

IP地址：172.18.17.34

Nginx1

主机名：shiyan7.two

IP地址：172.18.17.34

Nginx2

主机名：shiyan7.thy

IP地址：172.18.17.34



4台服务器初始化配置

同步时间服务

  1. #Master配置NTP服务器
  2. [root@shiyan7~]#vim/etc/ntp.conf
  3. restrict172.18.17.0mask255.255.0.0nomodifynotrap
  4. server127.127.1.0
  5. fudge127.1.1.0stratum8
  6. [root@shiyan7~]#ntpdate172.18.17.31

关闭Selinux

  1. [root@shiyan7~]#vim/etc/selinux/config
  2. SELINUX=disabled

关闭防火墙

  1. [root@shiyan7~]#systemctlstopfirewalld
  2. [root@shiyan7~]#systemctldisablefirewalld
  3. [root@shiyan7~]#iptables-F

主机名解析配置

  1. [root@shiyan7~]#cat/etc/hosts
  2. 127.0.0.1localhostlocalhost.localdomainlocalhost4localhost4.localdomain4
  3. ::1localhostlocalhost.localdomainlocalhost6localhost6.localdomain6
  4. 172.18.17.34shiyan.fore
  5. 172.18.17.31shiyan.one
  6. 172.18.17.32shiyan7.two
  7. 172.18.17.33shiyan7.thy

Master/Backup初始化配置

安装KeepAlived、Nginx软件

  1. [root@shiyan7~]#yuminstallkeepalivedNginxipvsadm

Nginx1/2初始化配置

安装Nginx软件

  1. [root@shiyan7~]#yuminstallNginx
  2. #这里配置一个配置VIP及更改内核参数的脚本。
  3. [root@shiyan7~]#touchroush.sh
  4. [root@shiyan7~]#chmod+xroush.sh
  5. [root@shiyan7~]#vimroush.sh
  6. #!/bin/bash
  7. #
  8.  
  9. vip="172.18.17.30"
  10. netmask="255.255.255.255"
  11. iface="lo:0"
  12.  
  13. case$1in
  14. start)
  15. echo1>/proc/sys/net/ipv4/conf/all/arp_ignore
  16. echo1>/proc/sys/net/ipv4/conf/lo/arp_ignore
  17. echo2>/proc/sys/net/ipv4/conf/all/arp_announce
  18. echo2>/proc/sys/net/ipv4/conf/lo/arp_announce
  19. ifconfig$iface$vipnetmask$netmaskbroadcast$vipup
  20. routeadd-host$vipdev$iface
  21. ;;
  22. stop)
  23. ifconfig$ifacedown
  24. echo0>/proc/sys/net/ipv4/conf/all/arp_ignore
  25. echo0>/proc/sys/net/ipv4/conf/lo/arp_ignore
  26. echo0>/proc/sys/net/ipv4/conf/all/arp_announce
  27. echo0>/proc/sys/net/ipv4/conf/lo/arp_announce
  28. ;;
  29. esac


Ngxin1配置

  1. [root@shiyan7~]#./roush.shstart
  2. [root@shiyan7~]#mkdir/app/Nginx/html
  3. [root@shiyan7~]#echo"<h1>RS1:172.18.17.32</h1>">/app/Nginx/html/index.html
  4. [root@shiyan7~]#cp/etc/Nginx/Nginx/conf{,.bak}#备份原文件
  5. [root@shiyan7~]#vim/etc/Nginx/Nginx/conf
  6. server{
  7. listen80default_server;
  8. listen[::]:80default_server;
  9. server_name_;
  10. root/app/Nginx/html;#修改root这里的路径，其他不需要
  11. #Loadconfigurationfilesforthedefaultserverblock.
  12. include/etc/Nginx/default.d/*.conf;
  13.  
  14. location/{
  15. }
  16.  
  17. error_page404/404.html;
  18. location=/40x.html{
  19. }
  20.  
  21. error_page500502503504/50x.html;
  22.  
  23. }
  24. [root@shiyan7~]#systemctlstartNginx
  25. #测试Nginx服务
  26. [root@yum~]#curlhttp://172.18.17.33
  27. <h1>RS1:172.18.17.33</h1>


Ngxin2配置

  1. [root@shiyan7~]#./roush.shstart
  2. [root@shiyan7~]#mkdir/app/Nginx/html
  3. [root@shiyan7~]#echo"<h1>RS1:172.18.17.33</h1>">/app/Nginx/html/index.html
  4. [root@shiyan7~]#cp/etc/Nginx/Nginx/conf{,.bak}#备份原文件
  5. [root@shiyan7~]#vim/etc/Nginx/Nginx/conf
  6. server{
  7. listen80default_server;
  8. listen[::]:80default_server;
  9. server_name_;
  10. root/app/Nginx/html;#修改root这里的路径，其他不需要
  11. #Loadconfigurationfilesforthedefaultserverblock.
  12. include/etc/Nginx/default.d/*.conf;
  13.  
  14. location/{
  15. }
  16.  
  17. error_page404/404.html;
  18. location=/40x.html{
  19. }
  20.  
  21. error_page500502503504/50x.html;
  22.  
  23. }
  24. [root@shiyan7~]#systemctlstartNginx
  25. #测试Nginx服务
  26. [root@yum~]#curlhttp://172.18.17.34
  27. <h1>RS1:172.18.17.34</h1>



Master上的配置

  1. #配置Nginx1-SorryServer
  2. [root@shiyan7~]#mkdir/app/Nginx/html
  3. [root@shiyan7~]#echo"Sorryserver-1">/app/Nginx/html/index.html
  4. [root@shiyan7~]#cp/etc/Nginx/Nginx/conf{,.bak}#备份原文件
  5. [root@shiyan7~]#vim/etc/Nginx/Nginx/conf
  6. server{
  7. listen80default_server;
  8. listen[::]:80default_server;
  9. server_name_;
  10. root/app/Nginx/html;#修改root这里的路径，其他不需要
  11. #Loadconfigurationfilesforthedefaultserverblock.
  12. include/etc/Nginx/default.d/*.conf;
  13.  
  14. location/{
  15. }
  16.  
  17. error_page404/404.html;
  18. location=/40x.html{
  19. }
  20.  
  21. error_page500502503504/50x.html;
  22.  
  23. }
  24. [root@shiyan7~]#systemctlstartNginx
  25. #测试Nginx1-SorryServer
  26. [root@yum~]#curlhttp://172.18.17.31
  27. Sorryserver-1
  28.  
  29. #配置Keepalived服务
  30. [root@shiyan7~]#cp/etc/keepalived/keepalived.conf{,.bak}
  31. [root@shiyan7~]#vim/etc/keepalived/keepalived.conf
  32. vrrp_instanceHa_1{
  33. stateMASTER
  34. interfaceens33
  35. virtual_router_id51
  36. priority100
  37. advert_int1
  38. authentication{
  39. auth_typePASS
  40. auth_pass1111
  41. }
  42. virtual_ipaddress{
  43. 172.18.17.30/16devens33
  44. }
  45. }
  46.  
  47. virtual_server172.18.17.3080{
  48. delay_loop6
  49. lb_algolc
  50. lb_kindDR
  51. persistence_timeout50
  52. protocolTCP
  53. sorry_server172.18.17.3180
  54.  
  55. real_server172.18.17.3280{
  56. weight1
  57. HTTP_GET{
  58. url{
  59. path/
  60. status_code200
  61. }
  62. connect_timeout3
  63. nb_get_retry3
  64. delay_before_retry3
  65. }
  66. }
  67. real_server172.18.17.3380{
  68. weight1
  69. HTTP_GET{
  70. url{
  71. path/
  72. status_code200
  73. }
  74. connect_timeout3
  75. nb_get_retry3
  76. delay_before_retry3
  77. }
  78. }
  79. }
  80. [root@shiyan7~]#systemctlstartkeepalived
  81. #查看配置是否成功
  82. [root@shiyan7~]#ipal
  83. 2:ens33:<BROADCAST,MULTICAST,UP,LOWER_UP>mtu1500qdiscpfifo_faststateUPqlen1000
  84. link/ether00:0c:29:1b:f5:aebrdff:ff:ff:ff:ff:ff
  85. inet172.18.17.31/16brd172.18.255.255scopeglobalens33
  86. valid_lftforeverpreferred_lftforever
  87. inet172.18.17.30/16scopeglobalsecondaryens33
  88. valid_lftforeverpreferred_lftforever
  89. [root@shiyan7~]#ipvsadm-ln
  90. IPVirtualServerversion1.2.1(size=4096)
  91. ProtLocalAddress:PortSchedulerFlags
  92. ->RemoteAddress:PortForwardWeightActiveConnInActConn
  93. TCP172.18.17.30:80lcpersistent50
  94. ->172.18.17.32:80Route100
  95. ->172.18.17.33:80Route100

Backup上的配置

  1. #配置Nginx1-SorryServer
  2. [root@shiyan7~]#mkdir/app/Nginx/html
  3. [root@shiyan7~]#echo"Sorryserver-2">/app/Nginx/html/index.html
  4. [root@shiyan7~]#cp/etc/Nginx/Nginx/conf{,.bak}#备份原文件
  5. [root@shiyan7~]#vim/etc/Nginx/Nginx/conf
  6. server{
  7. listen80default_server;
  8. listen[::]:80default_server;
  9. server_name_;
  10. root/app/Nginx/html;#修改root这里的路径，其他不需要
  11. #Loadconfigurationfilesforthedefaultserverblock.
  12. include/etc/Nginx/default.d/*.conf;
  13.  
  14. location/{
  15. }
  16.  
  17. error_page404/404.html;
  18. location=/40x.html{
  19. }
  20.  
  21. error_page500502503504/50x.html;
  22.  
  23. }
  24. [root@shiyan7~]#systemctlstartNginx
  25. #测试Nginx1-SorryServer
  26. [root@yum~]#curlhttp://172.18.17.34
  27. Sorryserver-2
  28.  
  29. #配置Keepalived服务
  30. [root@shiyan7~]#cp/etc/keepalived/keepalived.conf{,.bak}
  31. [root@shiyan7~]#vim/etc/keepalived/keepalived.conf
  32. vrrp_instanceHa_1{
  33. stateMASTER
  34. interfaceens33
  35. virtual_router_id51
  36. priority100
  37. advert_int1
  38. authentication{
  39. auth_typePASS
  40. auth_pass1111
  41. }
  42. virtual_ipaddress{
  43. 172.18.17.30/16devens33
  44. }
  45. }
  46.  
  47. virtual_server172.18.17.3080{
  48. delay_loop6
  49. lb_algolc
  50. lb_kindDR
  51. persistence_timeout50
  52. protocolTCP
  53. sorry_server172.18.17.3280
  54.  
  55. real_server172.18.17.3280{
  56. weight1
  57. HTTP_GET{
  58. url{
  59. path/
  60. status_code200
  61. }
  62. connect_timeout3
  63. nb_get_retry3
  64. delay_before_retry3
  65. }
  66. }
  67. real_server172.18.17.3380{
  68. weight1
  69. HTTP_GET{
  70. url{
  71. path/
  72. status_code200
  73. }
  74. connect_timeout3
  75. nb_get_retry3
  76. delay_before_retry3
  77. }
  78. }
  79. }
  80. [root@shiyan7~]#systemctlstartkeepalived
  81. [root@shiyan7~]#ipal
  82. 2:ens33:<BROADCAST,LOWER_UP>mtu1500qdiscpfifo_faststateUPqlen1000
  83. link/ether00:0c:29:1b:f5:aebrdff:ff:ff:ff:ff:ff
  84. inet172.18.17.34/16brd172.18.255.255scopeglobalens33
  85. valid_lftforeverpreferred_lftforever
  86. #这里是Baskup服务所以不会有VIP地址
  87. [root@shiyan7~]#ipvsadm-ln
  88. IPVirtualServerversion1.2.1(size=4096)
  89. ProtLocalAddress:PortSchedulerFlags
  90. ->RemoteAddress:PortForwardWeightActiveConnInActConn
  91. TCP172.18.17.30:80lcpersistent50
  92. ->172.18.17.32:80Route100
  93. ->172.18.17.33:80Route100



测试服务

  1. #正常测试
  2. [root@yum~]#curlhttp://172.18.17.30
  3. <h1>RS1:172.18.17.32</h1>
  4.  
  5. [root@yum~]#curlhttp://172.18.17.30
  6. <h1>RS1:172.18.17.34</h1>
  7.  
  8. #关闭Nginx1测试
  9. [root@yum~]#curlhttp://172.18.17.30
  10. <h1>RS1:172.18.17.33</h1>
  11.  
  12. #关闭所有Nginx服务测试
  13. [root@yum~]#curlhttp://172.18.17.30
  14. Sorryserver-1
  15.  
  16. #关闭Master测试
  17. [root@yum~]#curlhttp://172.18.17.30
  18. Sorryserver-2

猜你在找的CentOS相关文章

Centos7离线安装gcc4.8
有时候CentOS工作在无互联网的环境下，需要在离线环境下安装一些组件，这次实现的是模拟在...
CentOS7离线安装devtoolset-9并编译redis6.0.5
首先参照https://www.cnblogs.com/wdw984/p/13330074.html，来进行如何安装Centos和离线下...
使用Nginx在80端口上代理多个.NET CORE网站
有两个.NET CORE3.1网站部署在CentOS7上（内网IP是192.168.2.32），现在想实现访问http://...
CentOS7中配置vsftpd
1、yum -y install vsftpd 安装vsftpd 2、配置vsftpd的配置文件（/etc/vsftpd/vsftpd.conf...
CentOS7离线安装Mysql8.0
首先去mysql官网下载mysql的离线rpm安装包（https://downloads.mysql.com/archives/commun...
CentOS中增加网络连接数的方法
CentOS默认对外访问，发起的TCP链接总数小于28232个。 可以通过以下命令的结果计算出来 $ ...
VMware安装Centos7虚拟机
首先安装虚拟机很简单，所以呢，具体的安装过程就引用别人的博客，这篇文字很详细，引用之...
[Linux] 解决CentOS下Requires: libjson-c.so错误
当安装某些rpm包的时候 , 会爆出这个错误 Requires: libjson-c.so json-c是c语言下的json库...
阿里云centos7安装mysql8数据库
linux系统安装mysql8
centos安装mysql
一、安装 二、修改密码 三、修改远程连接权限(为了使用navicat)
LinuxWindowsCentOSUbuntuNginxWebServiceScalaMemcacheApacheRedisDockerBashAzureTomcatLNMPShell数据结构服务器运维网络安全
xebugnodemondocker-copydcoselasticsearcwindows-contdocker-windodocker-awsamazon-cloudenvoyproxyhashicorp-vaswisscomdevkafka-pythonzscalerphoton-osdocker-swarmkamongoogle-cloudconcoursewso2-ampersistent-vapi-managerprocess-manamanjarojenkins-workhypriotremoteapikeystonejsbitcoindbitcoin-test