LVS-DR+Keepalived+动静分离实验

首页
互联网
正文

架构图

解释一下架构，大概就是用Kee p a live d 实现两台DR服务器的LVS负载均衡，然后后端服务器是两台Ngin x 服务器两台To m cat 服务器并且实现动静分离
这个实验其实就是把 LVS-DR+Kee p a live d 和动静分离给拼起来，真的是拼起来，两个部分其实就像是独立的部分，互相之间的影响很小

主DR服务器：192.168.188.11   (ens33:0)192.168.188.188
备DR服务器：192.168.188.12   (ens33:0)192.168.188.188
Nginx服务器1：192.168.188.13    (lo:0)192.168.188.188
Nginx服务器2：192.168.188.14    (lo:0)192.168.188.188
VIP（虚拟IP）：192.168.188.188
To m cat服务器1：192.168.188.15
To m cat服务器2：192.168.188.16
如果只想用四台机器实现，那么就把To m cat和Nginx部署到同一台就行，比如说To m ca t1和Nginx1同一台，Tomca t2和Nginx2同一台。只需要改一下nginx.conf就行，底下会说

DR服务器部署
1. 关闭防火墙
   systemctl stop firewalld
  set e n force 0
2. 安装 ipvs adm和keepalived
  yum –y install ipvs adm keepalived
3. 加载 ipvs 内核模块并查看
   modprobe ip _vs
  ca t /proc/net/ip _vs
4. 配置 keepalived
  cd /etc/keepalived
  备份配置文件
   cp keepalived.conf keepalived.conf.b a k
  对配置文件进行修改
   vim keepalived.conf
  主备服务器都要配置，下面这张图是主的配置截图，备的配置除了router _id改成LVS_02，state改成BACKUP，pr io r i t y改成90，其他都一样
5. 配置虚拟IP（VIP）
  vim /etc/sysconfig/network–script s/i f cfg–ens33:0
```
DEVICE=ens33:0
ONBOOT=yes
IPADDR=192.168.188.188
NETMASK=255.255.255.255
```
  配置完重启网卡
   systemctl restart network
  打开虚拟网卡
   i f up ens33:0
  查看一下有没有生效
   ip addr
  
  启动 keepalived服务
  systemctl start keepalive d
  关于虚拟网卡，在实验过程中总会碰到一个问题，那就是虚拟网卡连接很不稳定，打开后总是过一段时间就断开，具体原因我也排查不出来，也可能是网络不好，如果在后面测试过程中发现失败，可以用i p addr看一下虚拟网卡是不是断开了，如果没了，那就用systemctl re start network 重启网络
6. 启动 ipvs adm服务
  主DR服务器（192.168.188.11）：
  备份
   ipvs adm-save &g t; /etc/sysconfig/ipvs adm
  systemctl start ipv s adm
  
  配置规则
  先清空
   i p vs adm -C
  ipvs adm -A -t 192.168.188.188:80 –s rr
  ipvs adm -a -t 192.168.188.188:80 -r 192.168.188.13:80 –g
  ipvsadm -a -t 192.168.188.188:80 -r 192.168.188.14:80 –g
  查看分发策略
  
  备DR服务器（192.168.188.12）：
  备份
   ipvsadm–save > /etc/sysconfig/ipv sa dm
  systemctl start ipv sa dm
  直接查看
  ipv sa dm –ln，目前并没有策略
  
  当主服务器断开后，备服务器会接收到主服务器的策略，测试的时候可以来这看一下
7. 调整proc 响应参数，关闭Linux内核的重定向参数响应
   vim /etc/sysctl.conf
```
net.ipv4.conf.all.send_redirects = 0
net.ipv4.conf.default.send_redirects = 0
net.ipv4.conf.ens33.send_redirects = 0
```
  sysctl -p
Nginx服务器部署
1. 关闭防火墙
   systemctl stop firewall d
  set e n force 0
2. 安装Nginx，不再赘述，这里只说一件事，pid改不改不影响使用，但是如果你改了nginx.con f 里面的pid 位置，那么就必须创建相应的目录
3. 为了方便测试，在Ng inx1和Nginx2的index.html 文件里随便写点东西以示区分就行
4. 配置虚拟网卡（lo:0）
  vim /etc/sysconfig/network–scripts/ifc fg-lo:0
```
DEVICE=lo:0
ONBOOT=yes
IPADDR=192.168.188.188
NETMASK=255.255.255.255
```
  重启网卡
   systemctl restart network
  启动虚拟网卡
  ifup lo:0
  查看
  ip addr
  
  添加路由规则
   route add –host 192.168.188.188 dev lo:0
5. 调整proc响应参数
  vim /etc/sysctl.con f
```
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
```
  sysctl -p
6. 配置文件后面再改

Tomcat服务器部署

关闭防火墙
 systemctl stop firewall d
set e nforc e 0
安装JDK、Tomcat不再赘述，不知道怎么安装可以看前面的实验

创建测试的应用目录
 mk dir /usr/local/tomcat/webapps/test
写一个页面，这是Tomcat1的
vim /usr/local/tomcat/webapps/test/index.jsp

<%@ page language="java" import="java.util.*" pageEncoding="UTF-8"%>
<html>
<head>
<title>JSP test1 page</title>   #指定为 test1 页面
</head>
<body>
<% out.println("动态页面 1,http://www.test1.com");%>
</body>
</html>

写一个页面，这是Tomcat2的
vim /usr/local/tomcat/webapps/test/index.jsp

<%@ page language="java" import="java.util.*" pageEncoding="UTF-8"%>
<html>
<head>
<title>JSP test2 page</title>   #指定为 test2 页面
</head>
<body>
<% out.println("动态页面 2,http://www.test2.com");%>
</body>
</html>

修改配置文件 server.xml
vim /usr/local/tomcat/co nf/server.xml
因为新增的Host的name也是localhost和原本的重名了，所以把原本的删掉

<Host name="localhost" appBase="webapps" unpackWARs="true" autoDeploy="true" xmlValidation="false" xmlNamespaceAware="false">
	<Context docBase="/usr/local/tomcat/webapps/test" path="" reloadable="true">
	</Context>
</Host>

重启服务
/usr/local/tomcat/bin/shutdown.sh
/usr/local/tomcat/bin/startup.sh

动静分离配置（只需要在Nginx服务器上修改就行）
1. 修改 nginx主配置文件
  vim /usr/local/nginx/co nf/nginx.co nf
  如果你只用了4台机器，也就是说Nginx服务器同时是Tomcat服务器，那么就把服务器地址池里的IP地址改成Nginx的IP地址就行，端口不变
2. 保存并重启服务
  system ctl rest art nginx
测试，在客户端的浏览器输入VIP，也就是192.168.188.188可以访问到静态页面，多刷新几次看看负载均衡有没有问题
这里要说一下，可能是LVS本身有问题，导致Nginx1的页面和Nginx2的页面总有一个很难刷新出来，这并不代表就是错的，如果一直只能看到Nginx1，那就把Nginx1服务器上的Nginx服务直接停了，再刷新，如果能访问到Nginx2那就说明没问题
再输入192.168.188.188/index.jsp就能访问到动态页面，多刷新几次看看负载均衡有没有问题，这里用的Nginx的调度算法，就能正常显示Tomcat1和Tomcat2的动态页面