Redis的key刪除策略
Redis是一種記憶體型資料庫,資料都是存放在記憶體中的,記憶體中的資料可以通過
TTL指令獲取其轉態:
XX:具有時效性的資料
-1:永久有效的資料
-2:已經過期的資料 或 被刪除的資料 或 未定義的資料
資料刪除策略
資料刪除策略的目標:在記憶體佔用與cpu佔用之間尋找一種平衡,顧此失彼都會造成整體redis效能的下降,甚至引發伺服器宕機或記憶體洩漏。
redis刪除key有三種方式:
定時刪除:
建立一個定時器,當key設定有過期時間,且過期時間到達時,由定時器任務立即執行對鍵的刪除操作
優點:節約記憶體,到時就刪除,快速釋放掉不必要的記憶體佔用
缺點:CPU壓力很大,無論CPU此時負載量多高,均佔用CPU,會影響redis伺服器響應時間和指令吞吐量
總結:用處理器效能換取儲存空間 (拿時間換空間)
惰性刪除:
資料到達過期時間,不做處理。等下次訪問該資料時,如果未過期,返回資料 ;發現已過期,刪除,返回不存在。
優點:節約CPU效能,發現必須刪除的時候才刪除
缺點:記憶體壓力很大,出現長期佔用記憶體的資料
總結:用儲存空間換取處理器效能(拿空間換時間)
定期刪除:
週期性輪詢redis庫中的時效性資料,採用隨機抽取的策略,利用過期資料佔比的方式控制刪除頻度
特點1:CPU效能佔用設定有峰值,檢測頻度可自定義設定
特點2:記憶體壓力不是很大,長期佔用記憶體的冷資料會被持續清理
總結:週期性抽查儲存空間 (隨機抽查,重點抽查)
刪除策略對比:
定時刪除: 節約記憶體,無佔用 不分時段佔用CPU資源,頻度高 拿時間換空間
惰性刪除: 記憶體佔用嚴重 延時執行,CPU利用率高 拿空間換時間
定期刪除: 記憶體定期隨機清理 每秒花費固定的CPU資源維護記憶體 隨機抽查,重點抽查
逐出演算法:
1、新資料進入檢測
當新資料進入redis時,如果記憶體不足怎麼辦?
Redis使用記憶體儲存資料,在執行每一個命令前,會呼叫freeMemoryIfNeeded()檢測記憶體是否充足。如果記憶體不滿足新加入資料的最低儲存要求,redis要臨時刪除一些資料為當前指令清理儲存空間。清理資料的策略稱為逐出演算法。
注意:逐出資料的過程不是100%能夠清理出足夠的可使用的記憶體空間,如果不成功則反覆執行。當對所有資料嘗試完畢後,如果不能達到記憶體清理的要求,將出現錯誤資訊。
(error)OOM command not allowed when used memory>'maxmemory'
2、影響資料逐出的相關配置
最大可使用記憶體
maxmemory
佔用實體記憶體的比例,預設值為0,表示不限制。生產環境中根據需求設定,通常設定為50%以上每次選擇待刪除資料的個數
maxmemory-samples
選擇資料是並不會全表掃描,導致嚴重的效能消耗,降低讀寫效能。因此採用隨機獲取資料的方式作為待檢測刪除資料刪除策略
maxmemory-policy
達到最大記憶體後,對被挑選出來的資料進行刪除的策略
1)檢測易失資料(可能會過期的資料集server.db[i].expires )
① volatile-lru:挑選最近最少使用的資料淘汰
② volatile-lfu:挑選最近使用次數最少的資料淘汰
③ volatile-ttl:挑選將要過期的資料淘汰
④ volatile-random:任意選擇資料淘汰
2)檢測全庫資料(所有資料集server.db[i].dict )
⑤ allkeys-lru:挑選最近最少使用的資料淘汰
⑥ allkeys-lfu:挑選最近使用次數最少的資料淘汰
⑦ allkeys-random:任意選擇資料淘汰
3)放棄資料驅逐
⑧ no-enviction(驅逐):禁止驅逐資料(redis4.0中預設策略),會引發錯誤OOM(Out Of Memory)
3. 資料逐出策略配置依據
使用INFO命令輸出監控資訊,查詢快取 hit 和 miss 的次數,根據業務需求調優Redis配置 。
原文連結:https://blog.csdn.net/weixin_43230682/article/details/107670911