nginx 负载均衡，缓存

本来想总结一份文档，看到netseek的nginx指南已经整理的很详细，没必要再整了。理论就不废话了，nginx主要配置都在nginx.conf配置文件中.　希望能给正学习ing的童鞋一个参考... 有误的还请指出..

一、nginx框架结构说明

....... 定义运行nginx worker进程的用户/组,worker进程数，可以打开的最大文件描述符数.Log/pid path
events{ 　　　　事件模块，控制nginx处理连接的方式
……………….
}
http { 　　　　　　　　　　　　　nginx处理http的核心模块
………………. 　　　　　　　　　　
upstrearm 负载组名｛　　　　　负载均衡模块，可以有多个均衡组.
……………………. nginx作反向代理方式有：轮询，权重，ip_hash,url_hash,fair
｝
Server{ 　　　　　　　定义虚拟主机模块，可以有多个
………………
}
Server{
………………….
Location ~ /purge(/.*) {　　　　　location匹配访问目录/文件的控制模块
………..
}
Location ~ .*\.(ico\mp3\avi\jpg\jpeg\swf\.......) {
………..
}
Location ~ .*\.(thtml|thtm)$ {
………..
}
Location ./ {
………..
}
Location ~ .*\.(php|jsp|cgi)$ {
………..
}
Location /unlimit/ {
………..
}
………………….
}
Server{
……………….
Location ~ .*\.(ico\mp3\avi\jpg\jpeg\swf\.......) {
………..
}
Location ./ {
………..
}
…………………….
}
}

二、nginx作反向代理，利用upstream负载均衡模块说明参考:

user nginx nginx;
worker_processes 10; 　　　　　工作进程数一般是cpu核数*2
error_log /var/log/nginx/error.log crit;
pid /var/run/nginx.pid;
worker_rlimit_nofile 51200; 文件描述符，每个进程所能打开的最大文件数量/socket.
events
{
use epoll; 使用的I/O网络模型
worker_connections 51200;
}
http
{
includ mime.types;
default_type application/octet-stream;
#charset uft-8; 如果有多个字符类型，最好在程序中定义
      log_format main  '$remote_addr - $remote_user [$time_local] $request '
                  '"$status" $body_bytes_sent "$http_referer" '
                  '"$http_user_agent" "$http_x_forwarded_for"' ' up_ip: $upstream_addr '
                  'up_type $upstream_http_content_type' ' gzip "$gzip_ratio"';
注：添加header头信息x_forwarded_for获取客户端真实IP。 $remote_addr.....nginx内部变量
access_log /var/log/nginx/access.log  main;
server_names_hash_bucket_size 128;
client_header_buffer_size 32k;
large_client_header_buffer 4 32k;
sendfile on;
tcp_nopush on;
tcp_nodelay on;
keepalive_timeout 65;
gzip on; 开启gzip压缩
gzip_min_length 1k;
gzip_buffers 4 16k;
gzip_http_version 1.1;
gzip_comp_level 2;
limit_zone myzone $binary_remote_addr 10m;　　nginx限制并发各速率。　将myzone区域分配10M，1M可含约16000个会话状态。
　　client_max_body_size 50m; 允许客户端请求的最大单个字节数
client_body_buffer_size 256k;　缓冲区代理缓冲客户端请求的最大字节数
proxy_connect_timeout 190;　　　　　后端server超时时间
proxy_send_timeout 290;　　　　　　后端server回传时间
proxy_read_timeout 290;　　　　　　后端server响应时间
proxy_buffer_size 4k; 缓存区保护的用户头信息大小，供nginx进行规则处理.
proxy_buffers 4 32k;　　　　　　几个buffer最大用多大空间
proxy_busy_buffers_size 64k; 忙时可申请更大的空间
proxy_temp_file_write_size 64k;　　proxy缓存临时文件的大小
proxy_next_upstream error timeout invalid_header http_500 http_503 http_404; 如遇500,503,404状态码转发到后端另一服务器。
　　proxy_max_temp_file_size 128m;
　　　upstream mysvr { 定义负载均衡池，可以有多个,这里后端是squid-server组
server 192.168.1.10;
server 192.168.1.11;
hash $http_host$request_uri;
} 根据url来hash,后端为缓存server的如squid，可提高命中率
　　　upstream websvr{ 定义后端websrv的均衡池,这里后端是web-server组
server 192.168.1.20;
server 192.168.1.21;
} 　采用轮询
　　注：nginx负载均衡方式：轮询，权重，ip_hash,url_hash,fair.具体解释下面有说明。
upstream message_server{ 定义后端message_server的均衡池
server 192.168.1.30;
server 192.168.1.31;
}
　　
　 server { 　　　　定义虚拟主机,第一个虚拟主机,反向代理mysrv负载组
listen 80;
server_name www.domain.com
　　　location ~.*\.(ico|mp3|avi|wma|wmv|asf|mpg|mov|mid|js|css|jpg|ping|gif|swf|flv)$
　　　{
　　　　proxy_set_header Host $host;
　　　　proxy_set_header X-Real-IP $remote_addr;
　　　　proxy_set_header X-Forwarded-For $proxy_add_x_forwaded_for;自定义变量获取原客户端真实IP。
　　　　
　　　 proxy_pass http://mysrv;　反向代理到mysrv负载池。
　　　　root html; 网页文件根目录，后端server 默认路径。
　　　}
　　　location ~.*\.(php|jsp|cgi)?${
　　　　　动态可直接proxy_pass到后端web池.http://websrv;
　　　}
　　　location / 匹配以/开头的url
　　　{
　　　　proxy_next_upstream http_502 http_504 error timeout invalid_header;
　　　如果后端服务器返回502，504，执行超时错误，自动请求转发到后端另一台server,故障切换。
　　　　proxy_pass http://mysrv;
　　　　proxy_set_header Host $host;
　　　　proxy_set_header X-Forwarded-For $remote_addr;
}
　 limit_conn myzone 100; 　限制单个IP的100个并发访问数.
　　　access_log /var/log/nginx/access.log main;
}
server{ 第二个虚拟主机,反向代理websrv负载组
listen 80;
server_name www1.domain.com;
访问http://www1.domain.com/message/...地址，反向代理到message_server池
　　　
location /message/
{
proxy_pass http://message_server;
proxy_set_header Host $host;
}
访问除了/message/之外的http://www1.domain.com/.....地址，反向代理到websrv
location /
{
proxy_pass http://websrv;
proxy_set_header Host $host;
proxy_set_header X-Forwarded-For $remote_addr;
}
access_log /var/log/nginx/message.access;
}
}

Nginx作为反向代理，利用upstream模块支持多组负载均衡，方式：
a) 轮询：每个请求按时间顺序依次分配到不同后端server.如何后端server down掉，能自动排除。
b) 权重：　根据weight值越大的后端server优先。指定轮询机率。
c) Ip_hash:如客户端IP第一次访问后端A-server,输入用户名密码后第二次可能分发到后端B-server,ip_hash利用hash_key值按访问ip的hash结果分配即进行哈希算法使其同一IP第二次会话保持访问至同一后端server. 此种方式能解决session问题，每个访客固定访问一个后端server.
d) 利用hash算法此种方式无法进行负载均衡。
e) url_hash:按访问url的hash结果分配，使每个url定向到同一后端server.如果后端是缓存server比较长有效，,如squid,可以增加squid命中率。
f) Fair:按后端服务器响应时间来分配请，响应时间短的优先分配。

Location 对url进行匹配，可以进行重定向或新的代理，负载均衡。

三、nginx缓存模块proxy_cache说明参考（这里省去全局配置部分，只列http标签部分）：

http{
....
proxy_temp_path /data/proxy_temp_path;
proxy_cache_path /data/proxy_cache_path levels=1:2 keys_zone=cache_one:200m inactive=1d
max_size=30g;
proxy_temp_path,proxy_cache_path路径须在同一分区下。
　设置web缓存区名cache_one，内存缓存空间大小200M，自动清除超过1天没有访问的缓存数据，硬盘缓存空间大小30G。
　.....
upstream my_srv{
server ....
server ....
}
server{
........
location /
{
proxy_set_header Host $host;
proxy_set_header X-Forwarded-For $remote_addr;
proxy_pass http:mysrv;
location ~.*\.(gif|jpg|jpeg|png|bmp|swf|js|css)$
{
proxy_cache cache_one; 使用缓存区
proxy_cache_valid 200 304 12h;
proxy_cache_valid 301 302 1m;
proxy_cache_valid any 1m;
对不同状态码缓存时间不一样。
proxy_cache_key $host$uri$is_args$args;
nginx根据key值md5哈希存储缓存，一般根据域名，URL，参数组成key.
proxy_set_header Host $host;
proxy_set_header X-Forwarded-For $remote_addr;
proxy_pass http:mysrv;
反向代理，访问后端.
location ~/purge(/.*) 清除缓存http://.../purge/..
{
allow 127.0.0.1; 允许执行清除的IP段
allow 192.168.1.0/16;
deny all;
proxy_cache_purge cache-one $host$1$is_args$args;
}
access_log /var/log/nginx/purge.access main;
}
}

四、nginx作web服务器，相关网上nginx+php(利用fastcgi技术)实现高性能WEB服务器的博文已经很多，不作总结了....

配置只是现学现卖，知其然，知其所以然，了其原理，有个清晰的思路才是最重要的...
如上只是个人博客总结文, 若有误，欢迎指正...

nginx相关模块可参考nginx官方或nginx中文手册，张宴的那本nginx书写的很不错，很详细可以参考....

nginx 负载均衡，缓存

nginx 负载均衡，缓存

猜你喜欢