1. 程式人生 > 資料庫 >Mongodb設定TTL索引自動清除資料與過期資料的方法

Mongodb設定TTL索引自動清除資料與過期資料的方法

Mongodb通常會被用來儲存快取資料或大尺寸、低價值的資料,對於這些型別的資料,資料量往往非常大,如果不定期清理,不但會影響效能,也會浪費大量的系統資源。

Mongodb其實可以像Redis一樣設定資料的過期時間,TTL索引是MongoDB中一種特殊的索引,可以支援文件在一定時間之後自動過期刪除,目前TTL索引只能在單欄位上建立。

當你在集合中某一個欄位建立TTL索引後,後臺會有一個單執行緒,通過不斷查詢(預設60s一次)索引的值來判斷document是否有過期,並且刪除文件的動作還依據mongod例項的負載情況,如果負載很高,可能會稍微延後一段時間再刪除。

建立TTL索引方法:

和普通索引的建立方法一樣,只是會多加一個屬性而已

例:在log_events的集合中,createTime 欄位上建立一小時後過期的TTL索引

db.log_events.createIndex( { "createTime": 1 },---欄位名稱  
  { expireAfterSeconds: 60*60 } )         ---過期時間(單位秒)

上例中creteTime欄位型別必須是Date()型別

修改TTL索引的expireAfterSeconds屬性值:

注:如果想更改過期時間expireAfterSeconds,可以使用collMod方法,要不然你只能只用dropIndex(),createIndex()方法重建索引了,但這樣的方法在億級資料量下是很頭疼的

db.runCommand({ collMod: "log_events",---集合名 
  index: { keyPattern: { createTime: 1 },---createTime為具有TTL索引的欄位名 
  expireAfterSeconds: 7200          ---修改後的過期時間(秒) 
  }})

雖然上面的方法可以實現自動過期刪除,但是如果白天業務很忙,頻繁的刪除資料勢必會增加負載,所以我想著晚上定時刪除過期資料(如果晚上業務量少的話)

方法如下:

增加一個expireTime欄位(用於指定過期時間),expireAfterSeconds屬性值設定為0,

注:上面的createTime欄位就不需要再有TTL索引了,這個expireTime的時間就需要在插入時指定上

db.log_events.createIndex( { "expireTime": 1 },---欄位名稱 
  { expireAfterSeconds: 0 } )           ---過期時間(單位秒)

db.log_events.insert( { 
 "expireTime": new Date('Jan 22,2019 23:00:00'),---插入文件時指定自動刪除時間 
 "logEvent": 2,"logMessage": "Success!"} ) 

使用spring-data-mongodb 2.0.9中的

Document document = new Document();
document.append("createTime",1);
IndexOptions indexOptions = new IndexOptions();
indexOptions.expireAfter(300L,TimeUnit.SECONDS);
this.mongoTemplate.getCollection("test").createIndex(document,indexOptions);

createTime是時間欄位

使用spring-data-mongodb 1.7.0中的

BasicDBObject bson = new BasicDBObject();
      bson.append("createTime",1);
BasicDBObject options = new BasicDBObject();
options.append("expireAfterSeconds",7200);
      this.mongoTemplate.getCollection("test").createIndex(bson,options);

總結

以上就是這篇文章的全部內容了,希望本文的內容對大家的學習或者工作具有一定的參考學習價值,謝謝大家對我們的支援。如果你想了解更多相關內容請檢視下面相關連結