1. 程式人生 > 實用技巧 >Nginx從原理到實戰

Nginx從原理到實戰

本文首先介紹 Nginx 的反向代理、負載均衡、動靜分離和高可用的原理,隨後詳解 Nginx 的配置檔案,帶大家從原理到實戰,徹底搞懂 Nginx!

Nginx 是開源的輕量級 Web 伺服器、反向代理伺服器,以及負載均衡器和 HTTP 快取器。其特點是高併發,高效能和低記憶體。

Nginx 專為效能優化而開發,效能是其最重要的考量,實現上非常注重效率,能經受高負載的考驗,最大能支援 50000 個併發連線數。

Nginx 還支援熱部署,它的使用特別容易,幾乎可以做到 7x24 小時不間斷執行。Nginx 的網站使用者有:百度、淘寶、京東、騰訊、新浪、網易等。

反向代理

①正向代理

Nginx 不僅可以做反向代理,實現負載均衡,還能用做正向代理來進行上網等功能。

②反向代理

客戶端對代理伺服器是無感知的,客戶端不需要做任何配置,使用者只請求反向代理伺服器,反向代理伺服器選擇目標伺服器,獲取資料後再返回給客戶端。

反向代理伺服器和目標伺服器對外而言就是一個伺服器,只是暴露的是代理伺服器地址,而隱藏了真實伺服器的 IP 地址。

負載均衡

將原先請求集中到單個伺服器上的情況改為增加伺服器的數量,然後將請求分發到各個伺服器上,將負載分發到不同的伺服器,即負載均衡。

動靜分離

為了加快網站的解析速度,可以把靜態頁面和動態頁面由不同的伺服器來解析,加快解析速度,降低原來單個伺服器的壓力。

高可用

為了提高系統的可用性和容錯能力,可以增加 Nginx 伺服器的數量,當主伺服器發生故障或宕機,備份伺服器可以立即充當主伺服器進行不間斷工作。

Nginx 配置檔案

①檔案結構

...              #全域性塊 
 
events {         #events塊 
   ... 
} 
 
http      #http塊 
{ 
    ...   #http全域性塊 
    server        #server塊 
    {  
        ...       #server全域性塊 
        location [PATTERN]   #location塊 
        { 
            ... 
        } 
        location [PATTERN]  
        { 
            ... 
        } 
    } 
    server 
    { 
      ... 
    } 
    ...     #http全域性塊 
} 

Nginx 配置檔案由三部分組成:

  • 全域性塊,主要設定一些影響 Nginx 伺服器整體執行的配置指令。比如:worker_processes 1;worker_processes 值越大,可以支援的併發處理量就越多。
  • Events 塊,涉及的指令主要影響 Nginx 伺服器與使用者的網路連線。比如:worker_connections 1024;支援的最大連線數。
  • HTTP 塊,又包括 HTTP 全域性塊和 Server 塊,是伺服器配置中最頻繁的部分,包括配置代理、快取、日誌定義等絕大多數功能。Server 塊:配置虛擬主機的相關引數。Location 塊:配置請求路由,以及各種頁面的處理情況。

②配置檔案

########### 每個指令必須有分號結束。################# 
#user administrator administrators;  #配置使用者或者組,預設為nobody nobody。 
#worker_processes 2;  #允許生成的程序數,預設為1 
#pid /nginx/pid/nginx.pid;   #指定nginx程序執行檔案存放地址 
error_log log/error.log debug;  #制定日誌路徑,級別。這個設定可以放入全域性塊,http塊,server塊,級別以此為:debug|info|notice|warn|error|crit|alert|emerg 
events { 
    accept_mutex on;   #設定網路連線序列化,防止驚群現象發生,預設為on 
    multi_accept on;  #設定一個程序是否同時接受多個網路連線,預設為off 
    #use epoll;      #事件驅動模型,select|poll|kqueue|epoll|resig|/dev/poll|eventport 
    worker_connections  1024;    #最大連線數,預設為512 
} 
http { 
    include       mime.types;   #副檔名與檔案型別對映表 
    default_type  application/octet-stream; #預設檔案型別,預設為text/plain 
    #access_log off; #取消服務日誌     
    log_format myFormat '$remote_addr–$remote_user [$time_local] $request $status $body_bytes_sent $http_referer $http_user_agent $http_x_forwarded_for'; #自定義格式 
    access_log log/access.log myFormat;  #combined為日誌格式的預設值 
    sendfile on;   #允許sendfile方式傳輸檔案,預設為off,可以在http塊,server塊,location塊。 
    sendfile_max_chunk 100k;  #每個程序每次呼叫傳輸數量不能大於設定的值,預設為0,即不設上限。 
    keepalive_timeout 65;  #連線超時時間,預設為75s,可以在http,server,location塊。 
 
    upstream mysvr {    
      server 127.0.0.1:7878; 
      server 192.168.10.121:3333 backup;  #熱備 
    } 
    error_page 404 https://www.baidu.com; #錯誤頁 
    server { 
        keepalive_requests 120; #單連線請求上限次數。 
        listen       4545;   #監聽埠 
        server_name  127.0.0.1;   #監聽地址        
        location  ~*^.+$ {       #請求的url過濾,正則匹配,~為區分大小寫,~*為不區分大小寫。 
           #root path;  #根目錄 
           #index vv.txt;  #設定預設頁 
           proxy_pass  http://mysvr;  #請求轉向mysvr 定義的伺服器列表 
           deny 127.0.0.1;  #拒絕的ip 
           allow 172.18.5.54; #允許的ip            
        }  
    } 
}    

配置例項

下面通過配置 Nginx 配置檔案,實現正向代理、反向代理、負載均衡、Nginx 快取、動靜分離和高可用 Nginx 6 種功能,並對 Nginx 的原理作進一步的解析。當需要使用 Nginx 配置檔案時,參考本文例項即可,建議收藏。

①正向代理

正向代理的代理物件是客戶端。正向代理就是代理伺服器替客戶端去訪問目標伺服器。

實現效果:在瀏覽器輸入 www.google.com , 瀏覽器跳轉到 www.google.com 。

具體配置:

server{ 
    resolver 8.8.8.8; 
    listen 80; 
 
    location / { 
        proxy_pass http://$http_host$request_uri; 
    } 
} 

在需要訪問外網的客戶端上執行以下一種操作即可:

1. 方法1(推薦) 
export http_proxy=http://你的正向代理伺服器地址:代理埠    
 
2. 方法2 
vim ~/.bashrc 
export http_proxy=http://你的正向代理伺服器地址:代理埠    

②反向代理

反向代理指代理後端伺服器響應客戶端請求的一箇中介伺服器,代理的物件是服務端。

實現效果:在瀏覽器輸入 www.abc.com , 從 Nginx 伺服器跳轉到 Linux 系統 Tomcat 主頁面。

具體配置:

server { 
    listen       80;    
    server_name  192.168.4.32;   #監聽地址 
 
    location  / {        
       root html;  #/html目錄 
       proxy_pass http://127.0.0.1:8080;  #請求轉向 
       index  index.html index.htm;      #設定預設頁        
    }  
} 

實現效果:根據在瀏覽器輸入的路徑不同,跳轉到不同埠的服務中。

具體配置:

server { 
    listen       9000;    
    server_name  192.168.4.32;   #監聽地址        
 
    location  ~ /example1/ {   
       proxy_pass http://127.0.0.1:5000;          
    }  
 
    location  ~ /example2/ {   
       proxy_pass http://127.0.0.1:8080;          
    }  
} 

Location 指令說明:

  • ~:表示 uri 包含正則表示式,且區分大小寫。
  • ~*:表示 uri 包含正則表示式,且不區分大小寫。
  • =:表示 uri 不含正則表示式,要求嚴格匹配。

③負載均衡

實現效果:在瀏覽器位址列輸入 http://192.168.4.32/example/a.html ,平均到 5000 和 8080 埠中,實現負載均衡效果。

具體配置:

upstream myserver {    
  server 192.167.4.32:5000; 
  server 192.168.4.32:8080; 
} 
 
 
server { 
    listen       80;   #監聽埠 
    server_name  192.168.4.32;   #監聽地址 
 
    location  / {        
       root html;  #html目錄 
       index index.html index.htm;  #設定預設頁 
       proxy_pass  http://myserver;  #請求轉向 myserver 定義的伺服器列表       
    }  
} 

Nginx 分配伺服器策略:

輪詢(預設):按請求的時間順序依次逐一分配,如果伺服器 down 掉,能自動剔除。

權重:weight 越高,被分配的客戶端越多,預設為 1。

比如:

upstream myserver {    
  server 192.167.4.32:5000 weight=10; 
  server 192.168.4.32:8080 weight=5; 
} 

IP:按請求 IP 的 Hash 值分配,每個訪客固定訪問一個後端伺服器。

比如:

upstream myserver {  
  ip_hash;   
  server 192.167.4.32:5000; 
  server 192.168.4.32:8080; 
} 

Fair:按後端伺服器的響應時間來分配,響應時間短的優先分配到請求。

比如:

upstream myserver {  
  fair;   
  server 192.168.4.32:5000; 
  server 192.168.4.32:8080; 
} 

④Nginx 快取

實現效果:在 3 天內,通過瀏覽器位址列訪問 http://192.168.4.32/a.jpg,不會從伺服器抓取資源,3 天后(過期)則從伺服器重新下載。

具體配置:

# http 區域下新增快取區配置 
proxy_cache_path /tmp/nginx_proxy_cache levels=1 keys_zone=cache_one:512m inactive=60s max_size=1000m; 
 
# server 區域下新增快取配置 
location ~ \.(gif|jpg|png|htm|html|css|js)(.*) { 
     proxy_pass http://192.168.4.32:5000;#如果沒有快取則轉向請求 
     proxy_redirect off; 
     proxy_cache cache_one; 
     proxy_cache_valid 200 1h;            #對不同的 HTTP 狀態碼設定不同的快取時間 
     proxy_cache_valid 500 1d; 
     proxy_cache_valid any 1m; 
     expires 3d; 
} 

Expires 是給一個資源設定一個過期時間,通過 Expires 引數設定,可以使瀏覽器快取過期時間之前的內容,減少與伺服器之間的請求和流量。

也就是說無需去服務端驗證,直接通過瀏覽器自身確認是否過期即可,所以不會產生額外的流量。此種方法非常適合不經常變動的資源。

⑤動靜分離

實現效果:通過瀏覽器位址列訪問 www.abc.com/a.html ,訪問靜態資源伺服器的靜態資源內容。

通過瀏覽器位址列訪問 www.abc.com/a.jsp ,訪問動態資源伺服器的動態資源內容。

具體配置:

upstream static {    
    server 192.167.4.31:80; 
} 
 
upstream dynamic {    
    server 192.167.4.32:8080; 
} 
 
server { 
    listen       80;   #監聽埠 
    server_name  www.abc.com; 監聽地址 
 
    # 攔截動態資源 
    location ~ .*\.(php|jsp)$ { 
       proxy_pass http://dynamic; 
    } 
 
    # 攔截靜態資源 
    location ~ .*\.(jpg|png|htm|html|css|js)$ {        
       root /data/;  #html目錄 
       proxy_pass http://static; 
       autoindex on;;  #自動開啟檔案列表 
    }   
} 

⑥高可用

一般情況下,通過 Nginx 主伺服器訪問後臺目標服務叢集,當主伺服器掛掉後,自動切換至備份伺服器,此時由備份伺服器充當主伺服器的角色,訪問後端目標伺服器。

實現效果:準備兩臺 Nginx 伺服器,通過瀏覽器位址列訪問虛擬 IP 地址,把主伺服器的 Nginx 停止,再次訪問虛擬 IP 地址仍舊有效。

具體配置:

# 安裝 keepalived 
yum install keepalived -y 
 
# 檢查版本 
rpm -q -a keepalived 
keepalived-1.3.5-16.el7.x86_64 

1.在兩臺 Nginx 伺服器上安 Keepalived:Keepalived 相當於一個路由,它通過一個指令碼來檢測當前伺服器是否還活著,如果還活著則繼續訪問,否則就切換到另一臺備份伺服器。

2.修改主備伺服器/etc/keepalived/keepalivec.conf 配置檔案(可直接替換),完成高可用主從配置。

Keepalived 將 Nginx 伺服器繫結到一個虛擬 IP,Nginx 高可用叢集對外統一暴露這個虛擬 IP,客戶端都是通過訪問這個虛擬 IP 來訪問 Nginx 伺服器 。

global_defs { 
    notification_email { 
        [email protected] 
        [email protected] 
        [email protected] 
    } 
    [email protected] 
    smtp_server 192.168.4.32 
    smtp_connect_timeout 30 
    router_id LVS_DEVEL  # 在 /etc/hosts 檔案中配置,通過它能訪問到我們的主機 
} 
 
vrrp_script_chk_http_port {    
    script "/usr/local/src/nginx_check.sh" 
 
    interval 2      # 檢測指令碼執行的時間間隔 
 
    weight 2        # 權重每次加2 
} 
 
vrrp_instance VI_1 { 
    interface ens7f0 # 網絡卡,需根據情況修改 
    state MASTER    # 備份伺服器上將 MASTER 改為 BACKUP 
    virtual_router_id 51 # 主備機的 virtual_router_id 必須相同 
    priority 100   # 主備機取不同的優先順序,主機值較大,備份機值較小 
    advert_int 1  # 每隔多長時間(預設1s)傳送一次心跳,檢測伺服器是否還活著 
    authentication { 
      auth_type PASS 
      auth_pass 1111 
    } 
    virtual_ipaddress { 
        192.168.1.100 # VRRP H 虛擬地址,可以繫結多個 
    } 
} 

欄位說明如下:

router_id:在 /etc/hosts 檔案中配置,通過它能訪問到我們的主機。

127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4 
::1         localhost localhost.localdomain localhost6 localhost6.localdomain6 
127.0.0.1   LVS_DEVEL    

interval:設定指令碼執行的間隔時間。

weight:當指令碼執行失敗即 Keepalived 或 Nginx 掛掉時,權重增加的值(可為負數)。

interface:輸入 ifconfig 命令檢視當前的網絡卡名是什麼。

ens7f0: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1500 
        inet 192.168.4.32  netmask 255.255.252.0  broadcast 192.168.7.255 
        inet6 fe80::e273:9c3c:e675:7c60  prefixlen 64  scopeid 0x20<link> 
        ... ... 

3.在 /usr/local/src 目錄下新增檢測指令碼 nginx_check.sh:

#!/bin/bash 
A=`ps -C nginx -no-header |wc -l` 
if [ $A -eq 0 ];then 
    /usr/local/nginx/sbin/nginx 
    sleep 2 
    if [ ps -C nginx -no-header |wc -l` -eq 0 ];then 
        killall keepalived 
    fi 
fi 

4.啟動兩臺伺服器的 Nginx 和 Keepalived:

# 啟動 nginx 
./nginx 
 
# 啟動 keepalived 
systemctl start keepalived.service 

5.檢視虛擬 IP 地址 IP a。把主伺服器 192.168.4.32 Nginx 和 Keepalived 停止,再訪問虛擬 IP 檢視高可用效果。

原理解析

Nginx 啟動之後,在 Linux 系統中有兩個程序,一個為 Master,一個為 Worker。

Master 作為管理員不參與任何工作,只負責給多個 Worker 分配不同的任務(Worker 一般有多個)。

ps -ef |grep nginx 
root     20473     1  0  2019 ?        00:00:00 nginx: master process /usr/sbin/nginx 
nginx     4628 20473  0 Jan06 ?        00:00:00 nginx: worker process 
nginx     4629 20473  0 Jan06 ?        00:00:00 nginx: worker process 

Worker 是如何工作的?客戶端傳送一個請求首先要經過 Master,管理員收到請求後會將請求通知給 Worker。

多個 Worker 以爭搶的機制來搶奪任務,得到任務的 Worker 會將請求經由 Tomcat 等做請求轉發、反向代理、訪問資料庫等(Nginx 本身是不直接支援 Java 的)。

一個 Master 和多個 Worker 的好處?

  • 可以使用 nginx -s reload 進行熱部署。
  • 每個 Worker 是獨立的程序,如果其中一個 Worker 出現問題,其他 Worker 是獨立執行的,會繼續爭搶任務,實現客戶端的請求過程,而不會造成服務中斷。

設定多少個 Worker 合適?Nginx 和 Redis 類似,都採用了 IO 多路複用機制,每個 Worker 都是一個獨立的程序,每個程序裡只有一個主執行緒。

通過非同步非阻塞的方式來處理請求,每個 Worker 的執行緒可以把一個 CPU 的效能發揮到極致,因此,Worker 數和伺服器的 CPU 數相等是最為適宜的。

思考:

  • 傳送一個請求,會佔用 Worker 幾個連線數?
  • 有一個 Master 和 4 個 Worker,每個 Worker 支援的最大連線數為 1024,該系統支援的最大併發數是多少?

恭喜!目前為止你已經掌握了 Nginx 6 種功能的配置方式,並和我一起進一步探討了 Nginx 的原理。