Mongodb設定TTL索引自動清除資料與過期資料的方法
Mongodb通常會被用來儲存快取資料或大尺寸、低價值的資料,對於這些型別的資料,資料量往往非常大,如果不定期清理,不但會影響效能,也會浪費大量的系統資源。
Mongodb其實可以像Redis一樣設定資料的過期時間,TTL索引是MongoDB中一種特殊的索引,可以支援文件在一定時間之後自動過期刪除,目前TTL索引只能在單欄位上建立。
當你在集合中某一個欄位建立TTL索引後,後臺會有一個單執行緒,通過不斷查詢(預設60s一次)索引的值來判斷document是否有過期,並且刪除文件的動作還依據mongod例項的負載情況,如果負載很高,可能會稍微延後一段時間再刪除。
建立TTL索引方法:
和普通索引的建立方法一樣,只是會多加一個屬性而已
例:在log_events的集合中,createTime 欄位上建立一小時後過期的TTL索引
db.log_events.createIndex( { "createTime": 1 },---欄位名稱 { expireAfterSeconds: 60*60 } ) ---過期時間(單位秒)
上例中creteTime欄位型別必須是Date()型別
修改TTL索引的expireAfterSeconds屬性值:
注:如果想更改過期時間expireAfterSeconds,可以使用collMod方法,要不然你只能只用dropIndex(),createIndex()方法重建索引了,但這樣的方法在億級資料量下是很頭疼的
db.runCommand({ collMod: "log_events",---集合名 index: { keyPattern: { createTime: 1 },---createTime為具有TTL索引的欄位名 expireAfterSeconds: 7200 ---修改後的過期時間(秒) }})
雖然上面的方法可以實現自動過期刪除,但是如果白天業務很忙,頻繁的刪除資料勢必會增加負載,所以我想著晚上定時刪除過期資料(如果晚上業務量少的話)
方法如下:
增加一個expireTime欄位(用於指定過期時間),expireAfterSeconds屬性值設定為0,
注:上面的createTime欄位就不需要再有TTL索引了,這個expireTime的時間就需要在插入時指定上
db.log_events.createIndex( { "expireTime": 1 },---欄位名稱 { expireAfterSeconds: 0 } ) ---過期時間(單位秒) db.log_events.insert( { "expireTime": new Date('Jan 22,2019 23:00:00'),---插入文件時指定自動刪除時間 "logEvent": 2,"logMessage": "Success!"} )
使用spring-data-mongodb 2.0.9中的
Document document = new Document(); document.append("createTime",1); IndexOptions indexOptions = new IndexOptions(); indexOptions.expireAfter(300L,TimeUnit.SECONDS); this.mongoTemplate.getCollection("test").createIndex(document,indexOptions);
createTime是時間欄位
使用spring-data-mongodb 1.7.0中的
BasicDBObject bson = new BasicDBObject(); bson.append("createTime",1); BasicDBObject options = new BasicDBObject(); options.append("expireAfterSeconds",7200); this.mongoTemplate.getCollection("test").createIndex(bson,options);
總結
以上就是這篇文章的全部內容了,希望本文的內容對大家的學習或者工作具有一定的參考學習價值,謝謝大家對我們的支援。如果你想了解更多相關內容請檢視下面相關連結