论坛首页 综合技术论坛

nginx 反向代理,动静态请求分离,proxy_cache缓存及缓存清除

浏览 27121 次
精华帖 (5) :: 良好帖 (0) :: 新手帖 (0) :: 隐藏帖 (0)
作者 正文
   发表时间:2011-03-18   最后修改:2011-03-18

今天工作之余,继续拘捣鼓了一下nginx,尝试了一下,nginx反向代理,动静态请求分离,以及nginx缓存应用,以及使用ngx_cache_purge清除指定URL

 

 

一,nginx反向代理配置

 

     #tomcat

    upstream tomcat_server{
	server 127.0.0.1:8080;	
    }



server{
	listen 80;
	server_name www.wolfdream.com;
	
	location / {

	      proxy_redirect off;
	      proxy_set_header Host $host;
	      proxy_set_header X-Real-IP $remote_addr;
	      proxy_set_header X-Forwarded-For   $proxy_add_x_forwarded_for;
	      proxy_pass http://tomcat_server;

	}

 

显然就是用户访问www.wolfdream.com(需要设置本地localhost,将www.wolfdream.com指向nginx所在IP)的时候(或将www.wolfdream.com直接写在nginx所在的IP地址),将请求转到到后台的tomcat服务器,即127.0.0.1:8080,并将请求到的数据转发给client

 

 

二,动静态请求相分离

 

   神马意思?图片,JS,HTML等静态的东西去访问一台专门的服务器,而动态的请求去访问另一台服务器。就这么简单,上例子:

 

 

 

 server {
        listen       192.168.154.128:80;
        server_name  image.wolfdream.com;
	 index index.html;
	 
	 
	 #proxy_pass http://tomcat_server;   
      
        #charset koi8-r;

        #access_log  logs/host.access.log  main;
	 
         

        location / {
            root   html;
            #index  index.html index.htm;
              proxy_redirect off;
	      proxy_set_header Host $host;
	      proxy_set_header X-Real-IP $remote_addr;
	      proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
	

         }
	
	
       
	location ~ .*\.(gif|jpg|jpeg|png|bmp|swf)$
	{
		
		valid_referers none blocked 192.168.154.128 192.168.154.1;
		if ($invalid_referer)
		{
			rewrite ^  /403.jpg break;
		}
                
               if (!-f $request_filename) {
                  rewrite ^ /404.jpg last;
                } 
               
                expires 30d;

	}
        #error_page  404              /404.html;

        # redirect server error pages to the static page /50x.html
        #
        error_page   500 502 503 504  /50x.html;
        location = /404.jpg {
            root   html;
        }

     }

#tomcat
    upstream tomcat_server{
	server 127.0.0.1:8080;	
    }
    
    
    server{
	listen 192.168.154.128;
	server_name www.wolfdream.com;
	
	location / {
	       

	      proxy_redirect off;
	      proxy_set_header Host $host;
	      proxy_set_header X-Real-IP $remote_addr;
	      proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
	      proxy_pass http://tomcat_server;

	}
	

	
    }


 

 

 

上面这种方式是通过设定不同的域名,可不可以在同一个域名中,通过判断后缀来将动态与静态请求相分离呢?

 

 

 #tomcat
    upstream tomcat_server{
	server 127.0.0.1:8080;	
    }
    
    
    server{
	listen 192.168.154.128;
	server_name www.wolf.com;
	
	location ~ .*\.(gif|jpg|jpeg|png|bmp|swf)$
	{
	       
	      root html;

	}
	

	location ~ .*\.(jsp|do)$ {
	       
	      proxy_redirect off;
	      proxy_set_header Host $host;
	      proxy_set_header X-Real-IP $remote_addr;
	      proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
	      proxy_pass http://tomcat_server;

	}

 

 

OK!同一个域名,根据后缀不同,请求不同的服务,实现动态静态请求相分离。仔细想一想,如果又出现了一种静态的文件,比如*.abc ,那难道又去修改那个配制文件吗?显然不太合理,所以可以考虑将所有的表态文件放在同一个根目录下面,比如/static那么可以将上面的静态页面请求修改一下:

 

 

location  /static
	{
	       
	      root html/static;

	}

 

 

咦这样是不是就好一些了,而且文件的存放也比较有规范了。

 

 

三,nginx缓存应用

nginx具有web缓存服务,proxy_cache,但是有一个问题就是,proxy_cache不能清除指定的URL缓存,只能设置URL过期时间,但是有问题,有人就会很快解决问题,nginx第三方模块ngx_cache_purge能清除指定URL。

 

  nginx安装时需要将ngx_cache_purege加载进去。

 

./configure --user=www --group=www --add-module=/root/dxm/nginx/ngx_cache_purge-1.2 

 

其中,/root/dxm/nginx/ngx_cache_purge-1.2为ngx_cache_purge解压路径(附件中提供ngx_cache_purge tar包下载)

 

现在来一段实例,实现图片缓存:

   话说proxy_tem_path,与proxy_cache_path必须在同一个分区之下!

 

proxy_temp_path /usr/local/nginx/proxy_temp;
proxy_cache_path /usr/local/nginx/proxy_cache_path levels=1:2 keys_zone=cache_one:200m inactive=1d max_size=1g;

upstream tomcat_server{
	server 127.0.0.1:8080;	
    }
    
    
    server{
	listen 192.168.154.128;
	server_name www.wolf.com;
	
	location ~ .*\.(gif|jpg|jpeg|png|bmp|swf)$
	{
	       
	       proxy_cache cache_one;
	       proxy_cache_methods GET HEAD POST;
     	       proxy_cache_min_uses 1;
              proxy_cache_valid 200 302 10m;
              proxy_cache_valid 404 1m;
	       proxy_cache_valid any 1m;
              proxy_cache_key "$host:$server_port$uri$is_args$args";

	      proxy_redirect off;
	      proxy_set_header Host $host;
	      proxy_set_header X-Real-IP $remote_addr;
	      proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
	      proxy_pass http://tomcat_server;
	     

	}
	

	location ~ .*\.(jsp)$ {
	       
	      proxy_redirect off;
	      proxy_set_header Host $host;
	      proxy_set_header X-Real-IP $remote_addr;
	      proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
	      proxy_pass http://tomcat_server;

	}
	

	location ~ /purge(/.*)
	{
 	   allow 192.168.154.128;
	   allow 192.168.154.1;
           deny  all;
           proxy_cache_purge cache_one $host:$server_port$1$is_args$args;
        } 

 

恩,静态页面缓存,动态请求不缓存!

 

大家看一下最后一段的那个purege配置,很显然,表示哪些IP可以手动清除指定的URL

 

比如,www.wolfdraem.cn/1.jpg可以访问到我的图片,那么用www.wolfdream.cn/purge/1.jpg  就可以清除图片缓存了。

 

恩。好了。好像今天是周五了。。。祝大家周未快乐。哈哈。。。。。

   发表时间:2011-03-26  
好很,前段时间,我也刚搞完这个
1 请登录后投票
   发表时间:2011-03-27  
写的挺详细的!~
0 请登录后投票
   发表时间:2011-03-28  
css,js,图片缓存正常,html静态页面不起作用,不知道为什么
0 请登录后投票
   发表时间:2011-03-28  
rolenz 写道
css,js,图片缓存正常,html静态页面不起作用,不知道为什么

 

不对啊。你是不是配制有问题?贴一下你的配制。

0 请登录后投票
   发表时间:2011-03-29   最后修改:2011-03-29
proxy_temp_path   c:/nginx/tempcache;
proxy_cache_path c:/nginx/cache levels=1:2 keys_zone=test_cache:10m max_size=2m inactive=1m;

upstream localhost
{
server localhost:18081 weight=1 max_fails=2 fail_timeout=10s;
server localhost:18080 weight=1 max_fails=2 fail_timeout=10s;
}

server
{
listen       80;
server_name  localhost;
index index.html index.htm;  
root   html;                                     #静态文件目录,包括html网页和css,js

#缓存
location /
{
#如果后端的服务器返回502、504、执行超时等错误,
#自动将请求转发到upstream负载均衡池中的另一台服务器,实现故障转移。
proxy_next_upstream http_502 http_504 error timeout invalid_header;

#缓存
#使用上面定义的proxy_cache
proxy_cache test_cache;
#缓存
#以域名、URI、参数组合成Web缓存的Key值,Nginx根据Key值哈希,
#存储缓存内容到二级缓存目录内
proxy_cache_key $host$uri$is_args$args;

#缓存
#对不同的HTTP状态码设置不同的缓存时间
proxy_cache_valid 200 302 1m;#一分钟测试
proxy_cache_valid 301 1m;#一分钟测试
proxy_cache_valid any 1m;#其它的保存一分钟

if (!-f $request_filename)     # rewrite所有jsp页面为html页面,如果静态文件目录没有该文件
{
rewrite ^/(.*)\.html$ /$1.jsp last;
proxy_pass http://localhost;            # 动态网页分发给后台的tomcat服务器
break;
}

}

# tomcat中扩展名以.php、.jsp、.cgi结尾的动态应用程序不缓存。
location ~ .*\.(php|jsp|do|cgi)?$
{
proxy_set_header   Host             $host;  
proxy_set_header   X-Forwarded-For  $proxy_add_x_forwarded_for;
proxy_pass http://localhost;
}

error_page  404              /404.html;

# redirect server error pages to the static page /50x.html
error_page   500 502 503 504  /50x.html;

location = /50x.html
{
root   html;
}

}#server结束
0 请登录后投票
   发表时间:2011-03-29  
说一下我的目录结构
静态文件: root   root/html  root/css root/js root/img
动态文件: 工程名目录testroot   root/jsp
0 请登录后投票
   发表时间:2011-03-31  
rolenz 写道
说一下我的目录结构
静态文件: root   root/html  root/css root/js root/img
动态文件: 工程名目录testroot   root/jsp

 

 

if (!-f $request_filename)     # rewrite所有jsp页面为html页面,如果静态文件目录没有该文件 
{ 
rewrite ^/(.*)\.html$ /$1.jsp last; 
proxy_pass http://localhost;            # 动态网页分发给后台的tomcat服务器 
break; 
} 

 

 

你这个rewrite 规则搞错了吧,

 

  # rewrite所有jsp页面为html页面....
....
rewrite ^/(.*)\.html$ /$1.jsp last; 
....

 

 如果一个请求文件不存在,

如果这个文件是*.html结尾则将其转换为*.jsp,

而不是你所说的将所有的JSP页面rewrite为HTML页面吧

 

 

而且你这个缓存写的也不怎么规范,一般是将需要缓存的文件的location标签和不需要缓存的文件的location标签分开才对啊。

 

 

ocation ~ .*\.(gif|jpg|jpeg|png|bmp|swf|html)$  
    {  
           #静态文件缓存
           proxy_cache cache_one;  
           proxy_cache_methods GET HEAD POST;  
               proxy_cache_min_uses 1;  
              proxy_cache_valid 200 302 10m;  
              proxy_cache_valid 404 1m;  
           proxy_cache_valid any 1m;  
              proxy_cache_key "$host:$server_port$uri$is_args$args";  
  
          proxy_redirect off;  
          proxy_set_header Host $host;  
          proxy_set_header X-Real-IP $remote_addr;  
          proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;  
          proxy_pass http://tomcat_server;  
           
  
    }  
      
  
    location ~ .*\.(jsp)$ {  
          #JSP动态请求,不缓存
          proxy_redirect off;  
          proxy_set_header Host $host;  
          proxy_set_header X-Real-IP $remote_addr;  
          proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;  
          proxy_pass http://tomcat_server;  
  
    }  
      
 

 

 

0 请登录后投票
   发表时间:2011-04-02  
rewrite的注释写错了。按照你上面给的配置html静态页面还是不能cache,其他的就行
0 请登录后投票
   发表时间:2011-04-06  
我也刚刚开始研究ngnix,在看金山一哥们出版的书,写的还算不错。
听他说这个web server
性能比阿帕奇好几个数量级。
0 请登录后投票
论坛首页 综合技术版

跳转论坛:
Global site tag (gtag.js) - Google Analytics