nginx1.6.2配ngx_cache_purge实现cdn cache服务器

nginx默认安装就会带有反向代理的功能,但想要更好的使用,还得配备frickle.com的ngx_cache_purge模块,用于清除指定URL的缓存。
引用在功能上,Nginx已经具备Squid所拥有的Web缓存加速功能、清除指定URL缓存的功能。而在性能上,Nginx对多核CPU的利用,胜过Squid不少。另外,在反向代理、负载均衡、健康检查、后端服务器故障转移、Rewrite重写、易用性上,Nginx也比Squid强大得多。这使得一台Nginx可以同时作为“负载均衡服务器”与“CDN缓存服务器”来使用.

wget http://labs.frickle.com/files/ngx_cache_purge-2.3.tar.gz
tar zxf ngx_cache_purge-2.3.tar.gz

切换到nginx目录
cd nginx-1.6.2
./configure –user=www –group=www –prefix=/usr/local/nginx –add-module=../ngx_cache_purge-2.3 –with-http_stub_status_module –with-http_ssl_module –with-http_gzip_static_module –with-ipv6
make;make install

安装完成!

安装完后在/usr/local/webserver/nginx下多了四个目录,分别是fastcgi_temp,proxy_temp,scgi_temp和uwsgi_temp。

proxy_temp这个目录用于存储临时文件,需要看下是否www有权限写入,如果不可写,无法在这个目录生成文件的话,会导致反向代理失败。也可以在nginx的配置里设置proxy_temp_path指定存储临时文件的目录。

nginx配置文件参考:

http {
    #proxy_temp_path   /www/proxy_temp;
    #设置Web缓存区名称为cache_one,内存缓存空间大小为100MB,1天没有被访问的内容自动清除,硬盘缓存空间大小为10GB。
    proxy_cache_path  /www/proxy_cache  levels=1:2   keys_zone=cache_one:100m inactive=1d max_size=10g;
  
     server {
        listen       80;
        server_name  s.9enjoy.com;

            location / {
            proxy_cache cache_one;
            proxy_cache_valid  200 304 12h;
            proxy_cache_key $uri$is_args$args;
            proxy_set_header Host  $host;
            proxy_set_header X-Forwarded-For  $remote_addr;
            proxy_pass http://www.9enjoy.com;
            expires      1d;
                }

            location ~ /purge(/.*) {
                allow              all;
                allow               127.0.0.1;
            #    deny               all;
                proxy_cache_purge cache_one $1$is_args$args;
            }
            access_log /www/logs/s.log access;
        }
    ……
}

这样访问s.9enjoy.com/images/logo.gif,反向代理就会去请求http://www.9enjoy.com/images/logo.gif,保存在内存中,然后输出。
如果logo.gif这个文件发生了变化,则需要刷新缓存,访问s.9enjoy.com/purge/images/logo.gif,就会提示:Successful purge

Key : /images/logo.gif 
Path: /www/proxy_cache/39aaa70038997e0e5e77beaa4392848d
如果这个文件没有被缓存过,则提示:404 Not Found

————————————————————————————————————————-
如果是已经安装过nginx了,请一定注意,使用nginx -s reload重启是无效的!一定要-s stop之后再启动,这样才会使用新版本的nginx!

我今天就没注意这点,在这上面化了N个小时!

/usr/local/webserver/nginx/sbin/nginx -V       
nginx version: nginx/1.6.2
built by gcc 4.4.7 20120313 (Red Hat 4.4.7-11) (GCC) 
TLS SNI support enabled
configure arguments: –user=www –group=www –prefix=/usr/local/nginx –add-module=../ngx_cache_purge-2.3 –with-http_stub_status_module –with-http_ssl_module –with-http_gzip_static_module –with-ipv6

一直以为是装成功了,但反复测试均清除失败,很郁闷!明明开启了访问日志,日志也没记录任何信息!
晚上继续测试时,在nginx_error.log里看到有如下的错误提示:
2011/05/11 21:23:40 [emerg] 20976#0: unknown directive “proxy_cache_purge” in /usr/local/webserver/nginx/conf/nginx.conf:481

才确认这个模块跟本没装上,当然不能用了。后来在一个论坛看到一个人的回复说要restart,但reload是无效的。才想到前段搞nginx升级时就发现,如果不用make upgrade升级,重新编译升级的话,必须停掉,再启动才会使用新的版本!

server配置文件:注意purge的location需要处于被缓存的内容的location的前面,否则会被匹配拦截,无法准确匹配到purge!
刷新缓存办法:
wget -S -O /dev/null –header=”host:www.dnsdizhi.com”  http://127.0.0.1/purge/ngx_cache_purge.html
返回200就是刷新缓存了,
wget -S -O /dev/null –header=”host:www.dnsdizhi.com”  http://127.0.0.1/ngx_cache_purge.html 看看是不是更新了?

更加详细配置说明参考:

server {
listen 80;
server_name zhang.ge;
#缓存清理模块
location ~ /purge(/.*) {
allow 127.0.0.1;
allow 192.168.1.101; #此处表示允许访问缓存清理页面的IP
deny all;
proxy_cache_purge cache_one $host$1$is_args$args;
}
#缓存html页面,可以缓存伪静态【这是亮点!】
location ~ .*\.html$ {
proxy_pass http://127.0.0.1:8080;
proxy_cache_key $host$uri$is_args$args;
proxy_redirect off;
proxy_set_header Host $host;
proxy_cache cache_one;
#状态为200、302的缓存1天
proxy_cache_valid 200 302 1d;
#状态为301的缓存2天
proxy_cache_valid 301 2d;
proxy_cache_valid any 1m;
#浏览器过期时间设置4小时
expires 4h;
#忽略头部禁止缓存申明,类似与CDN的强制缓存功能
proxy_ignore_headers “Cache-Control” “Expires” “Set-Cookie”;
#在header中插入缓存状态,命中缓存为HIT,没命中则为MISS
add_header Nginx-Cache $upstream_cache_status;
}
#图片缓存设置,如果不是使用了Nginx缩略图功能,这个可以不用,效果不明显
location ~ .*\.(gif|jpg|png|css|jsico)(.*) {
proxy_pass http://127.0.0.1:8080;
proxy_cache_key $host$uri$is_args$args;
proxy_redirect off;
proxy_set_header Host $host;
proxy_cache cache_one;
proxy_cache_valid 200 302 30d;
proxy_cache_valid 301 1d;
proxy_cache_valid any 1m;
expires 30d;
proxy_ignore_headers “Cache-Control” “Expires” “Set-Cookie”;
add_header Nginx-Cache $upstream_cache_status;
}
#动态页面直接放过不缓存
location ~ .*\.(php)(.*){
proxy_pass http://127.0.0.1:8080;
proxy_set_header Host $host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
}
#设置缓存黑名单,不缓存指定页面,比如wp后台或其他需要登录态的页面,用分隔符隔开
location ~ ^/(wp-admin|system)(.*)$ {
proxy_pass http://127.0.0.1:8080;
proxy_set_header Host $host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
}
#缓存以斜杠结尾的页面,类似于CDN的目录缓存,如果存在问题请取消缓存机制
location ~ ^(.*)/$ {
proxy_pass http://127.0.0.1:8080;
proxy_redirect off;
proxy_cache_key $host$uri$is_args$args;
proxy_set_header Host $host;
proxy_cache cache_one;
proxy_cache_valid 200 302 1d;
proxy_cache_valid 301 1d;
proxy_cache_valid any 1m;
expires 1h;
proxy_ignore_headers “Cache-Control” “Expires” “Set-Cookie”;
add_header Nginx-Cache $upstream_cache_status;
}
location / {
proxy_pass http://127.0.0.1:8080;
proxy_set_header Host $host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
}
}

nginx1.6.2配ngx_cache_purge实现cdn cache服务器》有1个想法

  1. fredzeng

    server {
    listen 80;
    server_name zhang.ge;
    #缓存清理模块
    location ~ /purge(/.*) {
    allow 127.0.0.1;
    allow 192.168.1.101; #此处表示允许访问缓存清理页面的IP
    deny all;
    proxy_cache_purge cache_one $host$1$is_args$args;
    }
    #缓存html页面,可以缓存伪静态【这是亮点!】
    location ~ .*\.html$ {
    proxy_pass http://127.0.0.1:8080;
    proxy_cache_key $host$uri$is_args$args;
    proxy_redirect off;
    proxy_set_header Host $host;
    proxy_cache cache_one;
    #状态为200、302的缓存1天
    proxy_cache_valid 200 302 1d;
    #状态为301的缓存2天
    proxy_cache_valid 301 2d;
    proxy_cache_valid any 1m;
    #浏览器过期时间设置4小时
    expires 4h;
    #忽略头部禁止缓存申明,类似与CDN的强制缓存功能
    proxy_ignore_headers “Cache-Control” “Expires” “Set-Cookie”;
    #在header中插入缓存状态,命中缓存为HIT,没命中则为MISS
    add_header Nginx-Cache “$upstream_cache_status”;
    }
    #图片缓存设置,如果不是使用了Nginx缩略图功能,这个可以不用,效果不明显
    location ~ .*\.(gif|jpg|png|css|jsico)(.*) {
    proxy_pass http://127.0.0.1:8080;
    proxy_cache_key $host$uri$is_args$args;
    proxy_redirect off;
    proxy_set_header Host $host;
    proxy_cache cache_one;
    proxy_cache_valid 200 302 30d;
    proxy_cache_valid 301 1d;
    proxy_cache_valid any 1m;
    expires 30d;
    proxy_ignore_headers “Cache-Control” “Expires” “Set-Cookie”;
    add_header Nginx-Cache “$upstream_cache_status”;
    }
    #动态页面直接放过不缓存
    location ~ .*\.(php)(.*){
    proxy_pass http://127.0.0.1:8080;
    proxy_set_header Host $host;
    proxy_set_header X-Real-IP $remote_addr;
    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    }
    #设置缓存黑名单,不缓存指定页面,比如wp后台或其他需要登录态的页面,用分隔符隔开
    location ~ ^/(wp-admin|system)(.*)$ {
    proxy_pass http://127.0.0.1:8080;
    proxy_set_header Host $host;
    proxy_set_header X-Real-IP $remote_addr;
    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    }
    #缓存以斜杠结尾的页面,类似于CDN的目录缓存,如果存在问题请取消缓存机制
    location ~ ^(.*)/$ {
    proxy_pass http://127.0.0.1:8080;
    proxy_redirect off;
    proxy_cache_key $host$uri$is_args$args;
    proxy_set_header Host $host;
    proxy_cache cache_one;
    proxy_cache_valid 200 302 1d;
    proxy_cache_valid 301 1d;
    proxy_cache_valid any 1m;
    expires 1h;
    proxy_ignore_headers “Cache-Control” “Expires” “Set-Cookie”;
    add_header Nginx-Cache “$upstream_cache_status”;
    }
    location / {
    proxy_pass http://127.0.0.1:8080;
    proxy_set_header Host $host;
    proxy_set_header X-Real-IP $remote_addr;
    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    }
    }

发表评论