2. 程式人生 > >使用Varnish代替Squid做網站快取加速器的詳細解決方案 原創

使用Varnish代替Squid做網站快取加速器的詳細解決方案 原創

阿新 • • 發佈：2018-12-20
  　　[文章作者：張宴 本文版本：v1.2 最後修改：2008.01.02 轉載請註明出處：http://blog.s135.com]　　我曾經寫過一篇文章──《初步試用Squid的替代產品──Varnish Cache網站加速器》，但當時僅僅是用著玩，沒做深入研究。　　今天寫的這篇關於Varnish的文章，已經是一篇可以完全替代Squid做網站快取加速器的詳細解決方案了。網上關於Varnish的資料很少，中文資料更是微乎其微，希望本文能夠吸引更多的人研究、使用Varnish。　　在我看來，使用Varnish代替Squid的理由有三點：　　1、Varnish採用了“Visual Page Cache”技術，在記憶體的利用上，Varnish比Squid具有優勢，它避免了Squid頻繁在記憶體、磁碟中交換檔案，效能要比Squid高。　　2、Varnish的穩定性還不錯，我管理的一臺圖片伺服器執行Varnish已經有一個月，沒有發生過故障，而進行相同工作的Squid伺服器就倒過幾次。　　3、通過Varnish管理埠，可以使用正則表示式快速、批量地清除部分快取，這一點是Squid不能具備的。　　
點選在新視窗中瀏覽此圖片　　下面來安裝Varnish網站快取加速器（Linux系統）：　　1、建立www使用者和組，以及Varnish快取檔案存放目錄（/var/vcache）：/usr/sbin/groupadd www -g 48/usr/sbin/useradd -u 48 -g www wwwmkdir -p /var/vcachechmod +w /var/vcachechown -R www:www /var/vcache　　2、建立Varnish日誌目錄（/var/logs/）：mkdir -p /var/logschmod +w /var/logschown -R www:www /var/logs　　3、編譯安裝varnish：wget http://blog.s135.com/soft/linux/varnish/varnish-1.1.2.tar.gz
tar zxvf varnish-1.1.2.tar.gzcd varnish-1.1.2./configure --prefix=/usr/local/varnishmake && make install　　4、建立Varnish配置檔案：vi /usr/local/varnish/vcl.conf　　輸入以下內容：引用backend myblogserver {         set backend.host = "192.168.0.5";         set backend.port = "80"; }acl purge {        "localhost";        "127.0.0.1";        "192.168.1.0"/24;}sub vcl_recv {        if (req.request == "PURGE") {                if (!client.ip ~ purge) {                        error 405 "Not allowed.";                }                lookup;        }        if (req.http.host ~ "^blog.s135.com") {                set req.backend = myblogserver;                 if (req.request != "GET" && req.request != "HEAD") {                        pipe;                }                else {                        lookup;                }        }        else {                error 404 "Zhang Yan Cache Server";                 lookup;        }}sub vcl_hit {        if (req.request == "PURGE") {                set obj.ttl = 0s;                error 200 "Purged.";        }}sub vcl_miss {        if (req.request == "PURGE") {                error 404 "Not in cache.";        }}sub vcl_fetch {        if (req.request == "GET" && req.url ~ "/.(txt|js)$") {                set obj.ttl = 3600s;        }        else {                set obj.ttl = 30d;        }}　　這裡，我對這段配置檔案解釋一下：　　(1)、Varnish通過反向代理請求後端IP為192.168.0.5，埠為80的web伺服器；　　(2)、Varnish允許localhost、127.0.0.1、192.168.0.***三個來源IP通過PURGE方法清除快取；　　(3)、Varnish對域名為blog.s135.com的請求進行處理，非blog.s135.com域名的請求則返回“Zhang Yan Cache Server”；　　(4)、Varnish對HTTP協議中的GET、HEAD請求進行快取，對POST請求透過，讓其直接訪問後端Web伺服器。之所以這樣配置，是因為POST請求一般是傳送資料給伺服器的，需要伺服器接收、處理，所以不快取；　　(5)、Varnish對以.txt和.js結尾的URL快取時間設定1小時，對其他的URL快取時間設定為30天。　　5、啟動Varnishulimit -SHn 51200/usr/local/varnish/sbin/varnishd-n /var/vcache -f /usr/local/varnish/vcl.conf -a 0.0.0.0:80 -sfile,/var/vcache/varnish_cache.data,1G -g www -u www -w 30000,51200,10-T 127.0.0.1:3500 -p client_http11=on　　6、啟動varnishncsa用來將Varnish訪問日誌寫入日誌檔案：/usr/local/varnish/bin/varnishncsa -n /var/vcache -w /var/logs/varnish.log &　　7、配置開機自動啟動Varnishvi /etc/rc.local　　在末尾增加以下內容：引用ulimit -SHn 51200/usr/local/varnish/sbin/varnishd-n /var/vcache -f /usr/local/varnish/vcl.conf -a 0.0.0.0:80 -sfile,/var/vcache/varnish_cache.data,1G -g www -u www -w 30000,51200,10-T 127.0.0.1:3500 -p client_http11=on/usr/local/varnish/bin/varnishncsa -n /var/vcache -w /var/logs/youvideo.log &　　8、優化Linux核心引數vi /etc/sysctl.conf　　在末尾增加以下內容：引用net.ipv4.tcp_fin_timeout = 30net.ipv4.tcp_keepalive_time = 300net.ipv4.tcp_syncookies = 1net.ipv4.tcp_tw_reuse = 1net.ipv4.tcp_tw_recycle = 1net.ipv4.ip_local_port_range = 5000    65000　　再看看如何管理Varnish：
　　1、檢視Varnish伺服器連線數與命中率：/usr/local/varnish/bin/varnishstat　　點選在新視窗中瀏覽此圖片　　2、通過Varnish管理埠進行管理：　　用help看看可以使用哪些Varnish命令：/usr/local/varnish/bin/varnishadm -T 127.0.0.1:3500 help引用Available commands:ping [timestamp]statusstartstopstatsvcl.load  vcl.inline  vcl.use vcl.discard vcl.listvcl.show param.show [-l] []param.sethelp [command]url.purge dump.pool　　3、通過Varnish管理埠，使用正則表示式批量清除快取：　　(1)、例：清除類似http://blog.s135.com/a/zhangyan.html的URL地址）：/usr/local/varnish/bin/varnishadm -T 127.0.0.1:3500 url.purge /a/　　(2)、例：清除類似http://blog.s135.com/tech的URL地址：/usr/local/varnish/bin/varnishadm -T 127.0.0.1:3500 url.purge w*$　　(3)、例：清除所有快取：/usr/local/varnish/bin/varnishadm -T 127.0.0.1:3500 url.purge *$　　4、一個清除Squid快取的PHP函式（清除Varnish快取同樣可以使用該函式，無需作任何修改，十分方便）：
  1. <?php  
  2. function purge($ip, $url)  
  3. {  
  4.     $errstr = '';  
  5.     $errno = '';  
  6.     $fp = fsockopen ($ip, 80, $errno, $errstr, 2);  
  7.     if (!$fp)  
  8.     {  
  9.          return false;  
  10.     }  
  11.     else
  12.     {  
  13.         $out = "PURGE $url HTTP/1.1/r/n";  
  14.         $out .= "Host:blog.s135.com/r/n";  
  15.         $out .= "Connection: close/r/n/r/n";  
  16.         fputs ($fp, $out);  
  17.         $out = fgets($fp , 4096);  
  18.         fclose ($fp);  
  19.         return true;  
  20.     }  
  21. }  
  22. purge("192.168.0.4", "/index.php");  
  23. ?>  
[php] view plain copy print?
  1. <?php  
  2. function purge($ip, $url)  
  3. {  
  4.     $errstr = '';  
  5.     $errno = '';  
  6.     $fp = fsockopen ($ip, 80, $errno, $errstr, 2);  
  7.     if (!$fp)  
  8.     {  
  9.          return false;  
  10.     }  
  11.     else
  12.     {  
  13.         $out = "PURGE $url HTTP/1.1/r/n";  
  14.         $out .= "Host:blog.s135.com/r/n";  
  15.         $out .= "Connection: close/r/n/r/n";  
  16.         fputs ($fp, $out);  
  17.         $out = fgets($fp , 4096);  
  18.         fclose ($fp);  
  19.         return true;  
  20.     }  
  21. }  
  22. purge("192.168.0.4", "/index.php");  
  23. ?>  
<?phpfunction purge($ip, $url){    $errstr = '';    $errno = '';    $fp = fsockopen ($ip, 80, $errno, $errstr, 2);    if (!$fp)    {         return false;    }    else    {        $out = "PURGE $url HTTP/1.1/r/n";        $out .= "Host:blog.s135.com/r/n";        $out .= "Connection: close/r/n/r/n";        fputs ($fp, $out);        $out = fgets($fp , 4096);        fclose ($fp);        return true;    }}purge("192.168.0.4", "/index.php");?>　　附1：Varnish官方網站：http://www.varnish-cache.org/　　附2：2007年12月10日，我寫了一個每天0點執行，按天切割Varnish日誌，生成一個壓縮檔案，同時刪除上個月舊日誌的指令碼（/var/logs/cutlog.sh）：　　/var/logs/cutlog.sh檔案內容如下：引用#!/bin/sh# This file run at 00:00date=$(date -d "yesterday" +"%Y-%m-%d")pkill -9 varnishncsamv /var/logs/youvideo.log /var/logs/${date}.log/usr/local/varnish/bin/varnishncsa -n /var/vcache -w /var/logs/youvideo.log &mkdir -p /var/logs/youvideo/gzip -c /var/logs/${date}.log > /var/logs/youvideo/${date}.log.gzrm -f /var/logs/${date}.logrm -f /var/logs/youvideo/$(date -d "-1 month" +"%Y-%m*").log.gz　　設定在每天00:00定時執行：/usr/bin/crontab -e或者vi /var/spool/cron/root輸入以下內容：引用0 0 * * * /bin/sh /var/logs/cutlog.shTags:  linux , squid , varnish , cache

相關推薦

使用Varnish代替Squid做網站快取加速器的詳細解決方案 原創

  　　[文章作者：張宴 本文版本：v1.2 最後修改：2008.01.02 轉載請註明出處：http://blog.s135.com]　　我曾經寫過一篇文章──《初步試用Squid的替代產品──Varnish Cache網站加速器》，但當時僅僅是用著玩，沒做深入研究。　　今天寫的這篇關於Varnish的文章

SSM中使用redis做中間快取，詳細註釋，程式碼可以執行

1.介紹 在開發中經常遇到大量的重複的，高併發的查詢，此時可以使用redis快取，將結果存入到redis中，當用戶發起查詢請求時，先在redis中查詢結果，沒有命中再去訪問資料庫。這樣可以大大減少資料庫壓力。 2.結構目錄 我的專案可以正常執行，程式碼都會給出來，所以程式碼都是可以跑的

nginx的proxy_cache做網站快取

為什麼要做web cache，我想大家最主要的是解決流量的壓力。隨著網站流量的提升，如果只是單臺機器既處理靜態檔案，又處理動態指令碼，顯然效率很難上升，不能處理日益上漲的流量壓力。與此同時某些網站的頁面內容並不是經常變化，因此我們可以分兩層架構來組織網站。前端web快取+

Mysql only_full_group_by以及其他關於sql_mode原因報錯詳細解決方案

out concat size 會話 day tmp oom 哈哈 ict （轉載自：http://blog.csdn.net/wangyunfeis/article/details/77911704） Mysql only_full_group_by以及其他關於sql_

大型分布式網站的並發解決方案

程序 b+樹 異地 集群 增加 瀏覽器 反向代理 延遲加載 緩存 大型分布式網站： 1 增加緩存，減少磁盤訪問次數。給存放的數據設置索引，通過尋址索引來加快和減少磁盤的訪問量。 2 web前端調優：減少網絡交互的次數（多次請求合並）。 減少網絡傳輸數據量的大小（壓縮） 盡量

寶塔面板 添加網站訪問不了解決方案

info 面板 dex $1 filename image http php 分享圖片 1.如果是tp5 那麽請你偽靜態一下 代碼如下 location / { if (!-e $request_filename){ rewrite ^(.*)$ /index.ph

網站未備案臨時解決方案總結

原文：http://blog.51cto.com/lxshopping/1591090 前段時間機房突然通知公司幾個網站都沒備案，在16點之前不關閉網站將直接封伺服器ip，一問起來，是以前備案都放在武漢機房，9月份武漢機房撤掉了，結果備案資訊都被幹掉了，這都是前人留下的抗，沒辦法，拿方案出來吧，

uploadify在火狐下上傳不了的解決方案，java版（Spring+SpringMVC+MyBatis）詳細解決方案

分享一下我老師大神的人工智慧教程！零基礎，通俗易懂！http://blog.csdn.net/jiangjunshow 也歡迎大家轉載本篇文章。分享知識，造福人民，實現我們中華民族偉大復興！        

axios 發 post 請求，後端接收不到引數的詳細解決方案

  問題描述 ：axios post 請求或者get請求後接收不到引數 後端接收設定： @RequestParam @RequestBody設定的原因   由於spring的RequestParam註解接收的引數是來自於request

快取失效及解決方案

這幾天在網易雲課堂上看到幾個關於Java開發比較好的視訊，推薦給大家 Java高階開發工程師公開課 這篇文章也是對其中一門課程的個人總結。 何謂快取失效 對於一個併發量大的專案，快取是必須的，如果沒有快取，所有的請求將直擊資料庫，資料庫很有可能抗不住，所以建立快取勢在不行。 那麼

Redis 快取穿透，快取擊穿，快取雪崩的解決方案分析

設計一個快取系統，不得不要考慮的問題就是：快取穿透、快取擊穿與失效時的雪崩效應。 一.什麼樣的資料適合快取? 分析一個數據是否適合快取,我們要從訪問頻率、讀寫比例、資料一致性等要求去分析.  二.什麼是快取擊穿 在高併發下,多執行緒同時查詢同一個資源,如果快取中沒有這個資源,那麼這些執行緒都會去資料庫

快取雪崩和快取穿透問題解決方案

快取雪崩 簡介：快取同一時間大面積的失效，所以，後面的請求都會落到資料庫上，造成資料庫短時間內承受大量請求而崩掉。 解決辦法： 事前：儘量保證整個 Redis 叢集的高可用性，發現

商旅網站使用者畫像的解決方案

（一）使用者畫像的目的與意義、構建步驟 使用者畫像（persona）的概念最早由互動設計之父Alan Cooper 提出:是指真實使用者的虛擬代表，是建立在一系列屬性資料之上的目標使用者模型。隨著網際網路的發展，現在我們說的使用者畫像是根據使用者人口學特徵、網路瀏覽內容

Leetcode 279:完全平方數（最詳細解決方案！！！）

給定正整數 n，找到若干個完全平方數（比如 1, 4, 9, 16, ...）使得它們的和等於 n。你需要讓組成和的完全平方數的個數最少。 示例 1: 輸入: n = 12 輸出: 3 解釋: 12 = 4 + 4 + 4. 示例 2: 輸入: n = 13

Navicat 連線Mysql 8.0以上版本報錯1251的詳細解決方案（配效果圖）

從MySql5.7版本跳到了Mysql 8.0的版本，安裝的時候提示連結加密方式已經改變，是選擇5.？時代的方式還是新的方式，當時 全部選擇預設，所以選擇的新的 加密方式，然後 裝好之後Navicat遠端連線就一直報錯1251 如圖所示：1251-Client does n

Leetcode 328:奇偶連結串列（最詳細解決方案！！！）

給定一個單鏈表，把所有的奇數節點和偶數節點分別排在一起。請注意，這裡的奇數節點和偶數節點指的是節點編號的奇偶性，而不是節點的值的奇偶性。 請嘗試使用原地演算法完成。你的演算法的空間複雜度應為 O(1)，時間複雜度應為 O(nodes)，nodes 為節點總數。

Leetcode 209:長度最小的子陣列（最詳細解決方案！！！）

給定一個含有 n 個正整數的陣列和一個正整數 s ，找出該陣列中滿足其和 ≥ s 的長度最小的子陣列。如果不存在符合條件的子陣列，返回 0。 示例: 輸入: [2,3,1,2,4,3], s = 7 輸出: 2 解釋: 子陣列 [4,3] 是該條件下的

Leetcode 92:反轉連結串列 II（最詳細解決方案！！！）

反轉從位置 m 到 n 的連結串列。請使用一趟掃描完成反轉。 說明: 1 ≤ m ≤ n ≤ 連結串列長度。 示例: 輸入: 1->2->3->4->5->NU

分享Windows伺服器網站檔案同步備份解決方案之cwRsyn進行檔案同步

本文和大家分享Windows伺服器網站檔案同步備份解決方案，來自部落格園dudu的文章。對於一個網站來說，使用者上傳檔案的同步備份是必需要解決的問題。對於有著巨量上傳檔案的大型網站，一般採用分散式儲存系統。而對於上傳檔案量不是很大的網站，只要在另外一臺伺服器上儲存上傳檔案的同

Leetcode 206:反轉連結串列（最詳細解決方案！！！）

反轉一個單鏈表。 示例: 輸入: 1->2->3->4->5->NULL 輸出: 5->4->3->2->1->NULL 進階: 你可以迭代