开源http加速器varnish

varnish

简介

当大量的请求访问到达一台服务器后,容易造成服务器宕机,在服务器前加一台(批)缓存机器,将大量请求分散到各个缓存机器上,就能大大减少服务器工作量.
简而言之,varnish会将服务器中的一部分内容缓存到自己的缓存空间中,客户对服务器的访问会先到达varnish服务器,当varnish里有客户需要的东西,就直接给予回应,如果没有,varnish会向服务器请求这部分内容,缓存在自己身上,从而减少后台的访问量.
流程图：
在这里插入图片描述

varnish与squid的对比

squid：Squid是一个高性能的代理缓存服务器，Squid支持FTP、gopher、HTTPS和HTTP协议。和一般的代理缓存软件不同，Squid用一个单独的、非模块化的、I/O驱动的进程来处理所有的客户端请求。
Varnish与Squid之间的相同点：

都是一个反向代理服务器。
都是开源软件。

Varnish与Squid之间的不同点:

Varnish的稳定性很高。两者在完成相同负荷的工作时，Squid服务器发生故障的几率要高于Varnish，因为Squid需要经常重启。(优点)
Varnish访问速度更快。Varnish采用了“Visual Page Cache”技术，所有缓存数据都直接从内存读取，而Squid是从硬盘读取缓存数据，因此Varnish在访问速度方面会更快。(优点)
Varnish可以支持更多的并发连接。因为Varnish的TCP连接释放要比Squid快，所以在高并发连接情况下可以支持更多的TCP连接。(优点)
Varnish可以通过管理端口，使用正则表达式批量清除部分缓存，而Squid做不到。(优点)
Varnish在高并发状态下CPU、I/O和内存等资源开销都高于Squid。(缺点)
Varnish进程一旦挂起、崩溃或者重启，缓存数据都会从内存中完全释放，此时所有请求都会被发送到后端服务器，在高并发情况下，这会给后端服务器造成很大压力。(缺点)

varnish相关实验

实验环境

这个实验我们使用Redhat6.5系统的虚拟机三台
server1 172.25.66.1
server2 172.25.66.2
server3 172.25.66.3
安装包：varnish-3.0.5-1.el6.x86_64.rpm、varnish-libs-3.0.5-1.el6.x86_64.rpm

相关操作

1：将varnish安装包放入server1并下载
在这里插入图片描述
2：im /etc/sysconfig/varnish
第66行端口改为80

3：vim /etc/security/limits.conf ##资源限制配置文件
限制用户进程的数量对于linux系统的稳定性是非常重要的。
写入：
varnish - nofile 131073 ##varnish用户可以打开的最大的文件描述符数量
varnish - memlock 82000 ##最大锁定内存地址空间
varnish - nproc unlimited ##varnish用户可以打开的最大进程数,unlimited表示无限制
在这里插入图片描述
4：打开varnish /etc/init.d/varnish start
5：查看varnish端口

6：在server2中
下载httpd
开启服务：/etc/init.d/httpd start
cd /var/www/html/
vim index.html
写入：www.westos.org

7：在server1中：vim /etc/varnish/default.vcl
###配置一个后端服务器
backend web1 {
.host = “172.25.66.2”; ###此处写安装http服务的主机IP
.port = “80”;
}

sub vcl_deliver {
if (obj.hits > 0) {
set resp.http.X-Cache = “HIT cache”; #命中
}
else {
set resp.http.X-Cache = “MISS cache”; ##未命中
}
return(deliver);
}
在这里插入图片描述
重启varnish /etc/init.d/varnish reload
8：测试缓存命中
在真机中执行：curl -I 172.25.66.1
第一次：

由于还没有缓存，所以第一次直接访问后端服务器server2，因此显示未名中MISS
第二次：

第一次访问过后端server2服务器之后，server1的varnish服务器将数据缓存，所以第二次直接从缓存中读取数据，显示HIT命中
通过 varnishadm 手动清除缓存：

varnishadm ban.url .*$             #清除所有
varnishadm ban.url /index.html     #清除 index.html 页面缓存
varnishadm ban.url /admin/$        #清除 admin 目录缓存

负载均衡配置

配置varnish服务器server1

vim /etc/varnish/default.vcl

###定义多个不同域名站点的后端服务器
backend web1 {
.host = "172.25.66.2";
.port = "80";
}
backend web2 {
.host = "172.25.66.3";
.port = "80";
}
director lb round-robin {     ###轮询
{
.backend = web1;
{
}
.backend = web2;
#把多个后端聚合为一个组,并检测后端健康状况
}
#当访问 www.westos.org 域名时从 web1 上取数据,访问 bbs.westos.org 域名时到 web2 取数据,
访问其他页面报错。
sub vcl_recv {
if (req.http.host ~ "^(www.)?westos.org") {
set req.http.host = "www.westos.org";
set req.backend = lb;
return (pass);  #为了测试方便,不进行缓存。
} elsif (req.http.host ~ "^bbs.westos.org") {
set req.backend = web2;
} else {error 404 "westos cache";
}
}

在这里插入图片描述
/etc/init.d/varnish restart

配置后端Apache服务器

server2:
cd /var/www/html
vim index.html
写入：www.westos.org - server2
server3:
1:下载httpd
/etc/init.d/httpd start
vim /etc/httpd/conf/httpd.conf

 990 NameVirtualHost *:80
 1003 <VirtualHost *:80>
 1004     DocumentRoot /var/www/html
 1005     ServerName bbs.westos.org
 1006 </VirtualHost>
 1007 
 1008 <VirtualHost *:80>      ##虚拟主机
 1009     DocumentRoot /www1
 1010     ServerName www.westos.org
 1011 </VirtualHost>

在这里插入图片描述
2：mkdir /www1
3：cd /var/www/html
vim index.html
写入：
bbs.westos.org
4:cd /www1
vim index.html
写入：
www.westos.org - server3
5: /etc/init.d/httpd restart

6：最后在真机中测试