Mongodb设置TTL索引自动清除数据与过期数据的方法

 更新时间:2019年03月16日 09:21:12   作者:CODETC  
今天小编就为大家分享一篇关于Mongodb设置TTL索引自动清除数据与过期数据的方法,小编觉得内容挺不错的,现在分享给大家,具有很好的参考价值,需要的朋友一起跟随小编来看看吧

Mongodb通常会被用来存储缓存数据或大尺寸、低价值的数据,对于这些类型的数据,数据量往往非常大,如果不定期清理,不但会影响性能,也会浪费大量的系统资源。

Mongodb其实可以像Redis一样设置数据的过期时间,TTL索引是MongoDB中一种特殊的索引,可以支持文档在一定时间之后自动过期删除,目前TTL索引只能在单字段上建立。

当你在集合中某一个字段建立TTL索引后,后台会有一个单线程,通过不断查询(默认60s一次)索引的值来判断document是否有过期,并且删除文档的动作还依据mongod实例的负载情况,如果负载很高,可能会稍微延后一段时间再删除。

创建TTL索引方法:

和普通索引的创建方法一样,只是会多加一个属性而已

例:在log_events的集合中,createTime 字段上建立一小时后过期的TTL索引

db.log_events.createIndex( { "createTime": 1 },   ---字段名称  
  { expireAfterSeconds: 60*60 } )         ---过期时间(单位秒)

上例中creteTime字段类型必须是Date()类型

修改TTL索引的expireAfterSeconds属性值:

注:如果想更改过期时间expireAfterSeconds,可以使用collMod方法,要不然你只能只用dropIndex(),createIndex()方法重建索引了,但这样的方法在亿级数据量下是很头疼的

db.runCommand({ collMod: "log_events",     ---集合名 
  index: { keyPattern: { createTime: 1 },   ---createTime为具有TTL索引的字段名 
  expireAfterSeconds: 7200          ---修改后的过期时间(秒) 
  }})

虽然上面的方法可以实现自动过期删除,但是如果白天业务很忙,频繁的删除数据势必会增加负载,所以我想着晚上定时删除过期数据(如果晚上业务量少的话)

方法如下:

增加一个expireTime字段(用于指定过期时间),expireAfterSeconds属性值设置为0,

注:上面的createTime字段就不需要再有TTL索引了,这个expireTime的时间就需要在插入时指定上

db.log_events.createIndex( { "expireTime": 1 },   ---字段名称 
  { expireAfterSeconds: 0 } )           ---过期时间(单位秒)

db.log_events.insert( { 
 "expireTime": new Date('Jan 22, 2019 23:00:00'), ---插入文档时指定自动删除时间 
 "logEvent": 2, 
 "logMessage": "Success!"} ) 

使用spring-data-mongodb 2.0.9中的

Document document = new Document();
document.append("createTime",1);
IndexOptions indexOptions = new IndexOptions();
indexOptions.expireAfter(300L,TimeUnit.SECONDS);
this.mongoTemplate.getCollection("test").createIndex(document,indexOptions);

createTime是时间字段

使用spring-data-mongodb 1.7.0中的

BasicDBObject bson = new BasicDBObject();
      bson.append("createTime",1);
BasicDBObject options = new BasicDBObject();
options.append("expireAfterSeconds",7200);
      this.mongoTemplate.getCollection("test").createIndex(bson,options);

总结

以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,谢谢大家对脚本之家的支持。如果你想了解更多相关内容请查看下面相关链接

相关文章

  • MongoDB  数据模型的设计模式及优缺点

    MongoDB  数据模型的设计模式及优缺点

    这篇文章主要介绍了MongoDB  数据模型的设计模式,在实际开发中,大多数性能问题都可以追溯到糟糕的模型设计,官方也提供分享过文档模型设计的进阶技巧,这里简单翻译记录一下,需要的朋友可以参考下
    2022-12-12
  • Mongodb亿级数据性能测试和压测

    Mongodb亿级数据性能测试和压测

    MongoDB是一个开源的、基于分布式文件存储的NoSQL数据库系统,它使用文档存储方式,数据结构由键值(key-value)对组成,本文给大家介绍了Mongodb亿级数据性能测试和压测,需要的朋友可以参考下
    2024-06-06
  • MongoDB使用$addToSet向数组中添加元素的操作代码

    MongoDB使用$addToSet向数组中添加元素的操作代码

    使用方法$addToSet, 向数组中添加不存在的元素,如果元素已经存在于目标数组当中,则使用$addToSet不会更新当前文档,本文给大家介绍了MongoDB使用$addToSet向数组中添加元素的操作代码,感兴趣的小伙伴跟着小编一起来看看吧
    2024-06-06
  • MongoDB的PHP驱动方法与技巧

    MongoDB的PHP驱动方法与技巧

    这篇文章主要介绍了MongoDB的PHP驱动方法与技巧,需要的朋友可以参考下
    2014-07-07
  • MongoDB入门教程(包含安装、常用命令、相关概念、使用技巧、常见操作等)

    MongoDB入门教程(包含安装、常用命令、相关概念、使用技巧、常见操作等)

    这篇文章主要介绍了MongoDB入门教程,包含安装、常用命令、相关概念、使用技巧、常见操作等,是一篇比较好的入门文章,需要的朋友可以参考下
    2014-06-06
  • MongoDB中连接字符串的编写

    MongoDB中连接字符串的编写

    MongoDB中字符串连接不区分大小写,并非所有MongoDB驱动都支持完整的连接字符串,不支持此格式连接字串的驱动会有替代连接方案,
    2015-05-05
  • centos7安装mongo数据库的方法(mongo4.2.8)

    centos7安装mongo数据库的方法(mongo4.2.8)

    这篇文章给大家介绍了centos7安装mongo4.2.8数据库的详细过程,包括mongo数据库安装和启动方法,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧
    2022-01-01
  • MongoDB 导出导入备份恢复数据详解及实例

    MongoDB 导出导入备份恢复数据详解及实例

    这篇文章主要介绍了MongoDB 导出导入备份恢复数据详解及实例的相关资料,需要的朋友可以参考下
    2016-10-10
  • MongoDB创建一个索引而性能提升1000倍示例代码

    MongoDB创建一个索引而性能提升1000倍示例代码

    这篇文章主要给大家介绍了关于如何在MongoDB中创建一个索引而性能提升1000倍的相关资料,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2019-01-01
  • Mongodb 利用mongoshell进行数据类型转换的实现方法

    Mongodb 利用mongoshell进行数据类型转换的实现方法

    下面小编就为大家分享一篇Mongodb 利用mongoshell进行数据类型转换的实现方法,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
    2017-12-12

最新评论