Nginx常用模块与内置变量

 1
 2Active connections: 291 
 3server accepts handled requests
 416630948 16630948 31070465 
 5Reading: 6 Writing: 179 Waiting: 106     
 6Active connections: 活动状态的连接数；
 7accepts：已经接受的客户端请求的总数；
 8handled：已经处理完成的客户端请求的总数；
 9requests：客户端发来的总的请求数；
10Reading：处于读取客户端请求报文首部的连接的连接数；
11Writing：处于向客户端发送响应报文过程中的连接数；
12Waiting：处于等待客户端发出请求的空闲连接数；
1330、stub_status;
14配置示例：
15        location  /basic_status {
16                    stub_status;
17        }
18    curl http://www.xxx.com/basic_status

 1#实现基于用户的访问控制，使用basic机制进行用户认证；
 2auth_basic string | off;
 3auth_basic_user_file file;
 4        location /admin/ {
 5                        alias /webapps/app1/data/;
 6                        auth_basic "Admin Area";
 7                        auth_basic_user_file /etc/nginx/.ngxpasswd;
 8        }
 9#注意：htpasswd命令由httpd-tools所提供；
10        
11        

1yum -y install httpd-tools
2Usage:
3    htpasswd [-cimBdpsDv] [-C cost] passwordfile username
4    htpasswd -b[cmBdpsDv] [-C cost] passwordfile username password
5
6
7生成新的密码文件 htpasswd -bc passwordfile   username password
8如果还要添加新用户  htpasswd -b passwordfile  username1 password1
9htpasswd -m -c .ngpasswd maozhongyu

1location / {
2	deny  192.168.1.1;
3	allow 192.168.1.0/24;
4	allow 47.98.147.49;
5	deny  all; #  拒绝除 allow的
6}

1location ~.*\.(sql|log|txt|jar|war|sh|py|php) {
2		deny all;
3}

1location /download/ {
2		root /opt/source;
3		autoindex on;
4		auto0ndex_exact_size off;
5		autoindex_format html;
6		autoindex_localtime off;
7	}

1实现基于用户的访问控制，使用basic机制进行用户认证；
2auth_basic string | off;
3auth_basic_user_file file;
4        location /admin/ {
5                        alias /webapps/app1/data/;
6                        auth_basic "Admin Area";
7                        auth_basic_user_file /etc/nginx/.ngxpasswd;
8        }

1yum -y install httpd-tools
2Usage:
3    htpasswd [-cimBdpsDv] [-C cost] passwordfile username
4    htpasswd -b[cmBdpsDv] [-C cost] passwordfile username password
5htpasswd -m -c .ngpasswd maozhongyu

1location  /basic_status {
2    stub_status;
3}

 1Active connections: 291 
 2server accepts handled requests
 316630948 16630948 31070465 
 4Reading: 6 Writing: 179 Waiting: 106     
 5Active connections: 活动状态的连接数；
 6accepts：已经接受的客户端请求的总数；
 7handled：已经处理完成的客户端请求的总数；
 8requests：客户端发来的总的请求数；
 9Reading：处于读取客户端请求报文首部的连接的连接数；
10Writing：处于向客户端发送响应报文过程中的连接数；
11Waiting：处于等待客户端发出请求的空闲连接数；

1log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
2'$status $body_bytes_sent "$http_referer" '
3'"$http_user_agent" "$http_x_forwarded_for"';

1语法:access_log path [format [buffer=size]];
2			access_log logs/access.log [log_format_name] ;
3		access_log off;
4		
5默认值:
6		access_log logs/access.log combined ;
7上下文:http, server, location, if in location, limit_except

1 log_format  mylog '$remote_addr-"$request" '
2			      '$status $body_bytes_sent "$http_referer" '
3					'"$http_user_agent" "$http_x_forwarded_for"';

 1#!/bin/bash
 2
 3base_path='/usr/local/nginx/logs'
 4
 5log_path=$(date -d yesterday +"%Y%m")
 6
 7day=$(date -d yesterday +"%d")
 8
 9mkdir -p $base_path/$log_path
10
11mv $base_path/access.log $base_path/$log_path/access_$day.log
12
13#echo $base_path/$log_path/access_$day.log
14
15kill -USR1 `cat /usr/local/nginx/logs/nginx.pid`
16# nginx -s reload 和上面等价

 1http {
 2     limit_req_zone $binary_remote_addr zone=one:10m rate=1r/s;
 3     limit_conn_status 503;
 4     limit_conn_log_level error;
 5    ...　　#定义一个名为one的limit_req_zone用来存储session，大小是10M内存，　　
 6
 7　　#以$binary_remote_addr 为key,限制平均每秒的请求为1个，
 8　　#1M能存储16000个状态，rete的值必须为整数，
 9　　
10    server {
11        ...
12        location /search/ {
13            limit_req zone=one burst=5 ;
14　　　　　　　　#      limit_req zone=one burst=5 nodelay;
15　　　　　　　　#限制每ip每秒不超过1个请求，漏桶数burst为5,也就是队列．
16　　　　　　　　#nodelay，如果不设置该选项，严格使用平均速率限制请求数，超过的请求被延时处理．
17　　　　　　　　#举个栗子：
18　　　　　　　　＃设置rate=20r/s每秒请求数为２０个，漏桶数burst为5个，
19　　　　　　　　#brust的意思就是，如果第1秒、2,3,4秒请求为19个，第5秒的请求为25个是被允许的，可以理解为20+5
20　　　　　　　　#但是如果你第1秒就25个请求，第2秒超过20的请求返回503错误．
21　　　　　　　　＃如果区域存储空间不足，服务器将返回503（服务临时不可用）错误　
22　　　　　　　　＃速率在每秒请求中指定（r/s）。如果需要每秒少于一个请求的速率，则以每分钟的请求（r/m）指定。　
23     	}
24     	
25    }

 1http { 
 2    limit_conn_zone $binary_remote_addr zone=addr:10m; 
 3   
 4    ... 
 5    server { 
 6        ... 
 7        location /download/ { 
 8            limit_conn addr 1; 　　
 9        }
10        
11        

 1http { 
 2    limit_conn_zone $binary_remote_addr zone=perip:10m; 
 3    limit_conn_zone $server_name zone=perserver:10m 
 4		# 如果binary_remote_addr为空则限制失败
 5    ... 
 6
 7    server { 
 8        ... 
 9        limit_conn perip 10;  　　　　 #单个客户端ip与服务器的连接数．
10        limit_conn perserver 20000;　　＃限制与服务器的总连接数
11        }

 1http{
 2	 ...
 3    #判断客户端地址是否在白名单列表，如果在返回0在白名单列表，否则返回1
 4    geo  $white  {
 5        default        1;
 6        #include '/conf/ip.conf';
 7        # ip.conf 内容如下
 8        # 192.169.168.120 0;
 9				# 192.168.169.137 0;
10        127.0.0.1/32   0;
11        192.168.1.0/24 0;
12    }
13
14    #映射 $white => $limit,1=>二进制ip，0=>“”  
15    #如果满足条件返回二进制ip地址 ,黑名单的就要使用二进制ip地址
16    map   $white  $limit {
17       1  $binary_remote_addr;
18       0  "";
19    } 
20     #$limit ""  是不生效的
21     limit_req_zone $limit  zone=two:10m  rate=1r/s;
22     limit_req_status 503;
23     limit_req_log_level info;
24
25    server {
26    			location / {
27    			     limit_req zone=one burst=3 nodelay; #这个是请求限流。 
28    			}
29    }
30}

 1   	server {
 2   		...
 3   		location /if {
 4   				if ( $http_user_agent ~* (mobile|nokia|iphone|ipad|android|samsung|htc|blackberry|Mozilla) ) {
 5               rewrite  ^(.*)    http://crm.mms.com/test permanent;
 6      	 }
 7   		}
 8   		
 9   		   #匹配文件不存在
10          if (!-e $request_filename) {
11                  proxy_pass http://127.0.0.1:9501;
12          }
13   		 
14   	}

1location ~ .*\.(sh|bash)?$ {
2    return  403;
3}

 1if  ($remote_addr = 192.168.1.100) {
 2        return 403;
 3}
 4
 5if ($http_user_agent ~ MSIE) {
 6    rewrite ^.*$ /ie.htm;
 7     break; #(不break会循环重定向)
 8 }
 9if (!-e $document_root$fastcgi_script_name) {
10        rewrite ^.*$ /404.html break;
11} 
12注, 此处还要加break,
13以 xx.com/dsafsd.html这个不存在页面为例,
14我们观察访问日志, 日志中显示的访问路径,依然是GET /dsafsd.html HTTP/1.1
15提示: 服务器内部的rewrite和302跳转不一样. 
16跳转的话URL都变了,变成重新http请求404.html, 而内部rewrite, 上下文没变,
17就是说 fastcgi_script_name 仍然是 dsafsd.html,因此 会循环重定向.

 1if ($http_user_agent ~* msie) {
 2    set $isie 1;
 3}
 4
 5if ($fastcgi_script_name = ie.html) {
 6    set $isie 0;
 7}
 8
 9if ($isie = 1) {
10    rewrite ^.*$ ie.html;
11}

 1#商品页面
 2goods-3.html ---->goods.php?id=3
 3    # 栏目页面 
 4/ecshop/category-2-b1.html -> /ecshop/category.php?id=3&brand=1
 5
 6
 7Goods-3.html ---->Goods.php?goods_id=3
 8goods-([\d]+)\.html ---> goods.php?goods_id =$1  
 9
10
11location /ecshop {
12index index.php;
13rewrite goods-([\d]+)\.html$ /ecshop/goods.php?id=$1;
14rewrite article-([\d]+)\.html$ /ecshop/article.php?id=$1;
15rewrite category-(\d+)-b(\d+)\.html /ecshop/category.php?id=$1&brand=$2;
16
17rewrite category-(\d+)-b(\d+)-min(\d+)-max(\d+)-attr([\d\.]+)\.html /ecshop/category.php?id=$1&brand=$2&price_min=$3&price_max=$4&filter_attr=$5;
18
19rewrite category-(\d+)-b(\d+)-min(\d+)-max(\d+)-attr([\d+\.])-(\d+)-([^-]+)-([^-]+)\.html /ecshop/category.php?id=$1&brand=$2&price_min=$3&price_max=$4&filter_attr=$5&page=$6&sort=$7&order=$8;
20}
21
22注意:用url重写时, 正则里如果有”{}”,正则要用双引号包起来

1location ~* ^.+\.(jpg|gif|png|swf|flv|wma|wmv|asf|mp3|mmf|zip|rar)$ {
2    valid_referers none blocked  www.23673.com  23673.com;
3    if ($invalid_referer) {
4       #return 302  http://nginx.23673.com/img/nolink.jpg;
5       return 404;
6       break;
7     }
8 }

1location /img {
2 alias /export/img/;
3 expires 10s;
4}
5expires 30s;#30秒 
6expires 30m;#30分钟 
7expires 2h;#2个小时 
8expires 30d;#30天

1tcpdump -i enp0s3 port 8888 -A 

 1				#请求头传递
 2				proxy_redirect off ;
 3        proxy_set_header Host $host;
 4        proxy_set_header X-Real-IP $remote_addr;
 5        proxy_set_header REMOTE-HOST $remote_addr;
 6        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
 7        client_max_body_size 50m;
 8        client_body_buffer_size 256k;
 9        proxy_connect_timeout 30;
10        proxy_send_timeout 30;  // 30s 没往上游发，自动关闭链接
11        proxy_read_timeout 60;
12        proxy_buffer_size 256k;
13        proxy_buffers 4 256k;
14        proxy_busy_buffers_size 256k;
15        proxy_temp_file_write_size 256k;
16        proxy_max_temp_file_size 128m;
17        proxy_pass  http://nginx.23673.com;
18
19 		   #proxy_set_body  修改请求体信息 
20 		   # proxy_ignore_client_bort on |off ,默认off， 就算客户端关闭了 发往上游服务器还是继续的。 
21 		   
22 		   
23 http {
24    #设置缓存目录
25    #levels=1:2   设置2级目录 第一级1个字母  第二级2个字母    ，     inactive 缓存清楚时间策略
26    proxy_cache_path  /usr/local/nginx/cache  levels=1:2 keys_zone=my_cache:10m  max_size=1g inactive=10s  use_temp_path=off; 
27        location  /nginx {
28                        proxy_http_version  1.1;
29                        proxy_pass       http://127.0.0.1:9502;//一个swoole 写的简单http服务 ,可以写成upstream_name
30                        #请求头设置
31                        proxy_set_header X-Real-IP $remote_addr;
32                        proxy_set_header connection keep-alive;
33                        proxy_set_header REMOTE-HOST $remote_addr;
34                       # add_header Nginx-Cache-Status "$upstrem_cache_status"  # 如果proxy_pass到upstream,看是否缓存成功了
35                        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; 
36                        #时间设置
37                        proxy_connect_timeout 30;
38                        proxy_send_timeout 30;
39                        proxy_read_timeout 60;
40                        proxy_cache my_cache;         #开启缓存了
41                        proxy_cache_valid 200 302 2s; #不同的响应头设置不同缓存时间
42                        proxy_cache_valid 404     1s;
43                        #默认get
44                        #proxy_cache_methods GET HEAD POST;
45                        #不想源服务器(目标服务器)控制是否缓存 ,一般不开启 ，如果目标服务器设置header("cache-control:private") 就让目标服务器控制
46                        #proxy_ignore_headers Cache-Control;
47                        #最少使用10次，累计的，缓存文件计数器 同样的请求达到10次，那么就开始缓存生效
48                        proxy_cache_min_uses 10;
49      }
50 }

1server{
2	add_header X-Accel-Expires 5;  告诉只能缓存5秒
3}

1map $request_url $no_cache {
2		default 0;
3		~*/admin 1; #url 当中包含admin
4}
5#设置当前请求是否缓存 ,$no_cache 有值就不会被缓存
6proxy_cache_bypass $no_cache

 1proxy_cache_purge
 2syntax: proxy_cache_purge zone_name  key
 3default: none
 4context: location
 5
 6注意：要在proxy_cache 指令下方
 7
 8proxy_cache_purge tmp-test $uri; 
 9tmp-test：指定的key_zone
10$uri：指定的生成key的参数
11
12   比如：匹配url当中包含了purge关键字的就清除
13缓存 xxx.com/nginx/shop/?a=1
14清除 xxxx.com/purge/shop/?a=1

 1	#缓存。  http://www.test.com/nginx/shop?a=1。 
 2	#清楚。  http://www.test.com/purge/nginx/shop?a=1
 3   location ~ /purge(/.*) {
 4           proxy_cache_purge  my_cache $host$1$is_args$args;
 5           #allow 127.0.0.1;
 6            #deny all;
 7            #default_type text/html;
 8            #return 200 $host$1$is_args$args;
 9        }
10    location /nginx {
11                        proxy_http_version  1.1;
12                        proxy_pass       http://127.0.0.1:9502;
13              					#测试 proxy_cache_key 
14#                       default_type text/html;
15#                       return 200 $host$uri$is_args$args;
16             						#请求头设置 
17                        proxy_set_header X-Real-IP $remote_addr;
18                        proxy_set_header connection keep-alive;
19                        proxy_set_header REMOTE-HOST $remote_addr;
20                        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
21
22                        #时间设置
23                        proxy_connect_timeout 30;
24                        proxy_send_timeout 30;
25                        proxy_read_timeout 60;
26                        proxy_cache my_cache;  #开启缓存了
27                        proxy_cache_valid 200 302 20s;  #不同的响应头设置不同缓存时间
28                        proxy_cache_valid 404     1s;
29                        #默认get
30                        #proxy_cache_methods GET HEAD POST;
31                        #不想源服务器(目标服务器)控制是否缓存
32                        #proxy_ignore_headers Cache-Control;
33                        #最少使用10次
34                        #proxy_cache_min_uses 10;
35                        # 必须放在后面才生效
36                        proxy_cache_key    $host$uri$is_args$args;
37
38        }
39
40
41#成功返回结果 失败会返回404 ，可以设置错误页面
42Successful purge
43Key : www.test.com/nginx/shop?a=1
44Path: /usr/local/nginx/cache/b/26/1ff01872dd7718cc49bc32441436b26b
45nginx/1.10.0

1gzip on;
2gzip_min_length 1000;
3gzip_proxied expired no-cache no-store private auth;
4gzip_types text/plain application/xml;

1http{
2	include conf/mime.types;
3	gzip on;
4	gzip_min_length 1000;
5	gzip_buffers 4 8k;
6	gzip_http_version 1.1;
7	gzip_types text/plain application/x-javascript text/css text/html application/xml;
8 	...
9 }

1gzip on;
2gzip_http_version 1.1;
3gzip_disable "MSIE [1-6].";
4gzip_types text/plain application/x-javascript text/css text/javascript;

1gzip_types text/plain application/x-javascript text/css text/javascript application/x-httpd-php;image/jpeg image/gif image/png;

1location / {
2		return 200 "remote_addr  $remote_addr 
3				remote_port $remote_port 
4		";
5}