手記系列之三 —– 關於使用Nginx的一些使用方法和經驗

前言

本篇文章主要介紹的關於本人在使用Nginx的一些使用方法和經驗~

Nginx介紹

介紹

Nginx(“engine x”)是一款是由俄羅斯的程式設計師Igor Sysoev所開發高性能的 Web和 反向代理 伺服器,也是一個IMAP/POP3/SMTP 代理伺服器。 在高連接並發的情況下,Nginx是Apache伺服器不錯的替代品。

正向代理和反向代理

更詳細的理論知識可以看這篇文章: //www.nginx.org.cn/article/detail/177

網上這塊的資料很多,個人理解核心,就是用戶去訪問互聯網的服務就是正向代理,互聯網服務訪問我們部署的服務就是反向代理。

負載均衡介紹

相關的使用教程可以看這篇文章://www.cnblogs.com/xuwujing/p/11953697.html

在介紹Nginx的負載均衡實現之前,先簡單的說下負載均衡的分類,主要分為硬體負載均衡和軟體負載均衡,硬體負載均衡是使用專門的軟體和硬體相結合的設備,設備商會提供完整成熟的解決方案,比如F5,在數據的穩定性以及安全性來說非常可靠,但是相比軟體而言造價會更加昂貴;軟體的負載均衡以Nginx這類軟體為主,實現的一種消息隊列分發機制。

簡單來說所謂的負載均衡就是把很多請求進行分流,將他們分配到不同的伺服器去處理。比如我有3個伺服器,分別為A、B、C,然後使用Nginx進行負載均衡,使用輪詢策略,此時如果收到了9個請求,那麼會均勻的將這9個請求分發給A、B、Cf伺服器,每一個伺服器處理3個請求,這樣的話我們可以利用多台機器集群的特性減少單個伺服器的壓力。

Nginx實現負載均衡的示例圖:

在這裡插入圖片描述

Nginx相關使用

可以看這篇文章: //www.cnblogs.com/xuwujing/p/11899890.html

使用Nginx+tomcat+redis做集群

  多個tomcat加上Nginx實現負載均衡,通過redis實現session共享。

可以使用github上面的第三方的jar包來實現,少量的配置即可。
下載地址: //github.com/ran-jit/tomcat-cluster-redis-session-manager

在這裡插入圖片描述
在這裡插入圖片描述

在這裡插入圖片描述

將下載lib包放到tomcat/lib 目錄下,配置文件修改的redis地址然後上傳到tomcat/conf目錄下即可。

Nginx配置:

#user  nobody;
worker_processes  10;

#error_log  logs/error.log;
#error_log  logs/error.log  notice;
#error_log  logs/error.log  info;

#pid        logs/nginx.pid;


events {
    worker_connections  1024;
}


error_log /var/log/nginx-error.log info;

http {
    include       mime.types;
    default_type  application/octet-stream;

    #log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
    #                  '$status $body_bytes_sent "$http_referer" '
    #                  '"$http_user_agent" "$http_x_forwarded_for"';

    #access_log  logs/access.log  main;

    sendfile        on;
    #tcp_nopush     on;

    #keepalive_timeout  0;
    keepalive_timeout  65;

    #gzip  on;

     upstream pancm{
       server 192.169.0.24:8085;
       server 192.169.0.24:8084;
    }

    server {
        listen      8083;
        server_name  192.169.0.24;

        #charset koi8-r;

        #access_log  logs/host.access.log  main;

        location / {
            root   html;
            proxy_pass //pancm;
	     proxy_set_header Host  $host:8083;
              proxy_set_header X-Forwarded-Host $host:8083;
             proxy_set_header X-Forwarded-Server $host:8083;
             proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
            proxy_connect_timeout 3s;
            proxy_read_timeout 5s;
            proxy_send_timeout 3s;		
	    index  index.html index.htm;
        }


	   #============對不同請求的處理=============
        location ~ \.(jsp|html|jspx|do|action)?$ 
        {   
            #=============tomcat的資源位置============
      	   root   html;
	
           index index.jsp index.jspx index.do;
            #==========Nginx提供的代理============
            proxy_set_header Host  $host:8083;
            proxy_set_header X-Forwarded-Host $host:8083;
            proxy_set_header X-Forwarded-Server $host:8083;
            proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
            #=== 如果遇到.jsp .jspx .do .action 的請求就進入該伺服器(tomcat)===
            proxy_pass //pancm;
        }	

        #error_page  404              /404.html;

        # redirect server error pages to the static page /50x.html
        #
        error_page   500 502 503 504  /50x.html;
        location = /50x.html {
            root   html;
        }

        # proxy the PHP scripts to Apache listening on 127.0.0.1:80
        #
        #location ~ \.php$ {
        #    proxy_pass   //127.0.0.1;
        #}

        # pass the PHP scripts to FastCGI server listening on 127.0.0.1:9000
        #
        #location ~ \.php$ {
        #    root           html;
        #    fastcgi_pass   127.0.0.1:9000;
        #    fastcgi_index  index.php;
        #    fastcgi_param  SCRIPT_FILENAME  /scripts$fastcgi_script_name;
        #    include        fastcgi_params;
        #}

        # deny access to .htaccess files, if Apache's document root
        # concurs with nginx's one
        #
        #location ~ /\.ht {
        #    deny  all;
        #}
    }


    # another virtual host using mix of IP-, name-, and port-based configuration
    #
    #server {
    #    listen       8000;
    #    listen       somename:8080;
    #    server_name  somename  alias  another.alias;

    #    location / {
    #        root   html;
    #        index  index.html index.htm;
    #    }
    #}


    # HTTPS server
    #
    #server {
    #    listen       443 ssl;
    #    server_name  localhost;

    #    ssl_certificate      cert.pem;
    #    ssl_certificate_key  cert.key;

    #    ssl_session_cache    shared:SSL:1m;
    #    ssl_session_timeout  5m;

    #    ssl_ciphers  HIGH:!aNULL:!MD5;
    #    ssl_prefer_server_ciphers  on;

    #    location / {
    #        root   html;
    #        index  index.html index.htm;
    #    }
    #}

}

啟動nginx的命令為:
/usr/local/nginx/sbin/nginx -t //測試nginx.conf的配置是否正確

/usr/local/nginx/sbin/nginx -c /usr/local/nginx/conf/nginx.conf //根據nginx.conf里的配置,啟動nginx服務

熱載入
/usr/local/nginx/sbin/nginx -s reload

在這裡插入圖片描述

Nginx作為文件伺服器

可以參考這篇文章:
//www.cnblogs.com/xuwujing/p/12811365.html

Nginx獲取真實用戶IP配置

核心配置:

	set_real_ip_from 0.0.0.0/0;
    real_ip_header  X-Forwarded-For;
    real_ip_recursive on;

完整配置(僅做參考):

http {
    log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
                      '$status $body_bytes_sent "$http_referer" '
                      '"$http_user_agent" "$http_x_forwarded_for"';
    log_format weblog '$msec | $time_local | $host | $status | $bytes_sent | $remote_addr | $upstream_addr | $request | $request_time | $upstream_response_time | $request_length | $http_referer | $http_user_agent';

    # 注意,這裡我使用的日誌格式為我自定義的weblog日誌格式,其中會輸出$remote_addr 遠程客戶端地址。
    access_log  /var/log/nginx/access.log  weblog;

    # 下面三行為重點,添加後就可以獲取到客戶端真實IP
    set_real_ip_from 0.0.0.0/0;
    real_ip_header  X-Forwarded-For;
    real_ip_recursive on;

    # 下面三行為常見反向代理傳遞真實客戶端IP的配置,配置在http{}中,則全局應用在下面的所有server中
    proxy_set_header Host      $host;
    proxy_set_header X-Real-IP $remote_addr;
    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;

    include             /etc/nginx/mime.types;
    default_type        application/octet-stream;

    # Load modular configuration files from the /etc/nginx/conf.d directory.
    # See //nginx.org/en/docs/ngx_core_module.html#include
    # for more information.
    include /etc/nginx/conf.d/*.conf;

}

Nginx限速控制

限制連接數:
語法: limit_conn_zone key zone=name:size;

詳細說明://nginx.org/en/docs/http/ngx_http_limit_conn_module.html#limit_conn_zone

例如:

http  {
    limit_conn_zone $binary_remote_addr zone=perip:10m;
    limit_conn_zone $server_name zone=perserver:10m;
    ...
    server  {
        ...
        # 限制每個IP能夠最多建立10個連接
        limit_conn perip 10;
        # 限制每個網站最多接受100個連接
        limit_conn perserver 100;
    } 
}

限制請求速度:
語法:limit_req_zone key zone=name:size rate=rate [sync];

詳細說明: //nginx.org/en/docs/http/ngx_http_limit_req_module.html#limit_req_zone

限制請求速度可用於防止DDoS攻擊,或防止上游伺服器同時被太多請求淹沒。

例如:

http  {
    limit_req_zone $binary_remote_addr zone=perip:10m rate=2r/s;
    limit_req_zone $binary_remote_addr zone=one:10m rate=1r/s;
    limit_req_zone $server_name zone=perserver:10m rate=10r/s;
    ...
    server {
        ...
        # 限制每個IP每秒不超過2個請求,突發不超過5個請求。
        limit_req zone=perip burst=5 nodelay;
        # 限制每個網站每秒不超過10個請求,突發不超過10個請求。
        limit_req zone=perserver burst=10;
        location /search/ {
            # 限制每個IP每秒不超過1個請求。
            limit_req zone=one;
        }
    }
}

限制頻寬:
語法:limit_rate rate;

單位為:byte/s

詳細說明: //nginx.org/en/docs/http/ngx_http_core_module.html#limit_rate

該設置主要用於限制單個請求的下載速度,以為一個客戶端可以建立多個請求,所以一般需要結合限制連接數使用,防止因為個別客戶端而耗盡伺服器頻寬。

http {
    limit_conn_zone $binary_remote_address zone=perip:10m
    ...
    server {
        ...
        location /download/ {
            # 限制每個IP只能建立一個連接
            limit_conn perip 1;
            # 當請求的流量超500KB後進行限速
            limit_rate_after 500k;
            # 限速 50KB/s
            limit_rate 50k;
        }
    }
}

完整配置:

http  {
    # 限速IP白名單
    geo $limit {
        default 1;
        10.0.0.0/8 0;
        192.168.0.0/24 0;
        172.20.0.35 0;
    }
    
    # 白名單不限速,非白名單按照客戶端IP限速
    map $limit $limit_key {
        0 "";
        1 $binary_remote_addr;
    }
    
    limit_conn_zone $server_name zone=perserver:10m;
    limit_req_zone $server_name zone=perserverreq:10m rate=10r/s;
    limit_conn_zone $limit_key zone=perip:10m;
    limit_req_zone $limit_key zone=two:10m rate=2r/s;
    limit_req_zone $limit_key zone=one:10m rate=1r/s;
    ...
    server  {
        ...
        # 限制每個網站每秒不超過10個請求,突發不超過10個請求。
        limit_req zone=perserverreq burst=10;
        # 限制每個網站最多接受100個請求
        limit_conn perserver 100;
        # 限制每個IP能夠最多建立10個請求
        limit_conn perip 10;
        # 限制每個IP每秒不超過1個請求,突發不超過3個請求。
        limit_req zone=one burst=3 nodelay;
        
        location /search/ {
            # 限制每個IP每秒不超過1個請求。
            limit_req zone=one;
        }
        
        location /download/ {
            # 限制每個IP只能建立一個連接
            limit_conn perip 1;
            # 當請求的流量超500KB後進行限速
            limit_rate_after 500k;
            # 限速 50KB/s
            limit_rate 50k;
        }
    } 
}

備註:
需要注意的是客戶端IP使用 $binary_remote_addr 變數,而不是 \(remote_addr。
\)
remote_addr 是一個文本型變數,長度為7至15個位元組之間。
$binary_remote_addr 是二進位的IP表達形式,對於IPv4地址,變數的大小始終為4個位元組,對於IPv6地址,變數的大小始終為16個位元組。
存儲狀態在32位平台上總是佔用32或64位元組,在64位平台上佔用64位元組。 1M的記憶體空間可以保留大約32000個32位元組狀態或16000個64位位元組。例子中的10M的話換算下來可以保留16萬個IP地址資訊。當超出請求是伺服器將返回錯誤。

Nginx監聽多埠以及Https

多埠,就是兩端server

https則需要配置證書

  server {
   #     listen       8181;
      #  server_name  192.168.0.1

        #charset koi8-r;

        #access_log  logs/host.access.log  main;

     #   rewrite ^(.*)$ //$host$1 permanent; 
    }


    # HTTPS server
    #
    server {
        listen       8080 ssl;
        server_name   192.168.0.1 ;
		
	

        ssl_certificate      /usr/local/nginx/cert/xxx.crt;
        ssl_certificate_key  /usr/local/nginx/cert/xxx.key;

        ssl_session_cache    shared:SSL:1m;
        ssl_session_timeout  30m;

        #ssl_ciphers  HIGH:!aNULL:!MD5;
        ssl_ciphers ECDHE-RSA-AES128-GCM-SHA256:ECDHE:ECDH:AES:HIGH:!NULL:!aNULL:!MD5:!ADH:!RC4;
        ssl_protocols TLSv1 TLSv1.1 TLSv1.2;
        ssl_prefer_server_ciphers  on;

        location / {
            root   /home/release/dist;
            index  index.html index.htm;
        }

        location ^~ /api/ {
            proxy_pass //127.0.0.1:9999;
            proxy_cookie_path / /;
            proxy_pass_header Set-Cookie;
            proxy_set_header Host zans;
        }

		
		 proxy_set_header Host $host;
		proxy_set_header X-Real-IP $remote_addr;
		proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
		
    }
	
	
	 # HTTPS server
    #
    server {
		listen       443 ssl;
		server_name  xxx.com ;
        ssl_certificate      /usr/local/nginx/cert/xxx.crt;
        ssl_certificate_key  /usr/local/nginx/cert/xxx.key;

        ssl_session_cache    shared:SSL:1m;
        ssl_session_timeout  30m;

        #ssl_ciphers  HIGH:!aNULL:!MD5;
        ssl_ciphers ECDHE-RSA-AES128-GCM-SHA256:ECDHE:ECDH:AES:HIGH:!NULL:!aNULL:!MD5:!ADH:!RC4;
        ssl_protocols TLSv1 TLSv1.1 TLSv1.2;
        ssl_prefer_server_ciphers  on;

		location / {
            root   /home/release/app;
            index  index.html index.htm;
        }
	
		 location ^~ /api {
            proxy_pass //127.0.0.1:6666;
            proxy_cookie_path / /;
            proxy_pass_header Set-Cookie;
            proxy_set_header Host zans;
        }
		
		 proxy_set_header Host $host;
		proxy_set_header X-Real-IP $remote_addr;
		proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
		
    }

錯誤處理

1,Nginx: error while loading shared libraries: libpcre.so.1

則說明未安裝pcre或安裝了未設置軟鏈,安裝或者設置器軟鏈即可

ln -s /usr/local/lib/libpcre.so.1 /lib64/

2,實現負載均衡之後,頁面無法跳轉

原因: nginx 默認的埠是80,更改監聽的埠之後,也需要更改一下。

也會出現這種錯誤:net::ERR_NAME_NOT_RESOLVED

解決辦法:
在location 下添加proxy_set_header Host $host:port 這個配置,port 和listen 的埠保持一致, 不然是無法跳轉的。

3,使用文件伺服器的一些問題

  1. nginx需要設置傳輸的大小;

  2. 訪問若出現了403許可權問題,一般情況下是上傳的圖片用root創建的,但nginx訪問使用nginx用戶訪問的,所以在linux系統出現了問題。
    解決辦法一:nginx使用root用戶啟動,在nginx的配置改成 use root;
    解決辦法二:全局設置文件夾的許可權,並且使nginx擁有讀取的許可權;

  3. nginx限速問題,如果寬頻不高,可以對大圖片文件進行限速。

其他

之前寫的nginx相關文章:
//www.cnblogs.com/xuwujing/tag/nginx/

一首很帶感的動漫鋼琴曲~

原創不易,如果感覺不錯,希望給個推薦!您的支援是我寫作的最大動力!
版權聲明:
作者:虛無境
部落格園出處://www.cnblogs.com/xuwujing
CSDN出處://blog.csdn.net/qazwsxpcm    
個人部落格出處://xuwujing.github.io/