mongodb清除连接和日志的正确方法分享

 更新时间:2021年09月14日 12:38:40   作者:考古学家lx  
这篇文章主要给大家介绍了关于mongodb清除连接和日志的正确方法,文中通过示例代码介绍的非常详细,对大家学习或者使用mongodb具有一定的参考学习价值,需要的朋友可以参考下

前言

最近在做并发,服务器卡死了。

感觉是pymongo未能完全close掉和mongodb创建的tcp连接,并且在mongo连接未自动释放前进行高频连接,导致连接数爆满造成的。

所以对建立的连接进行清除,以此记录并做分享。

查看MongoDB的连接信息

db.serverStatus().connections

current 当前连接数

available 可用连接数

connection.totalCreated 创建到服务器的所有传入连接的计数。此数字包括已关闭的连接。

清除所有当前的currentOp:

var ops = db.currentOp().inprog;
for(i = 0; i < ops.length; i++){
        var opid = ops[i].opid;
        db.killOp(opid);
        print("Stopping op ... #"+opid)
};

上面的命令无法关闭current连接

关闭current的方法一:

查看所有current的tcp连接:

netstat -nat | grep ‘27017'

查看指定端口的进程号

netstat -tpna | grep :35522

然后kill掉该进程

kill -9 14335

再到db-shell中查看,已经关闭一个current了。

这种方式关掉的tcp连接状态会变成TIME_WAIT,端口依旧被占用,因为ACK是由我们主动关闭发出的。

不过还好的是一般等一段时间链接自动会被释放,端口也不再被占用了。

可以看到35522和35524都已经被释放。

关闭current的方法二:

如果你知道是由哪个程序连接的mongodb,比如python程序

那么可以使用命令查看程序端口占用情况

ps -aux | grep python

然后kill掉对应的python程序,run.py,也能完成current的清除

批量清除指定程序:

ps -efww|grep -w "run.py" |grep -v grep|cut -c 9-15|xargs kill -9

日志

查看日志位置

cat /etc/mongod.conf

日志文件过大,不能通过vim查看,用tail查看最后100行

tail -n 100 mongo.log

不需要重启服务,重新开启一个新日志文件的方法

use admin
db.runCommand({logRotate:1})

运行过程中不能删除日志文件,清空日志文件但不删除文件的命令(删除后没有生成日志)

: >run.log

也可以使用旋转日志 logRotate :对日志进行切割

去重script

db.getCollection('集合名').aggregate([{$group:{_id:{'去重字段':'$去重字段'}, count:{$sum:1}, dups:{$addToSet: '$_id'}}},{$match:{count:{$gt:1}}}] ,{ allowDiskUse: true }).forEach(function(doc){doc.dups.shift();db.getCollection('集合名').remove({_id: {$in: doc.dups}});})

导出数据

mongoexport -h localhost:27017 -u 用户名 -p 密码 -d 库名 -c 集合名 -o 导出文件路径

总结

到此这篇关于mongodb清除连接和日志的文章就介绍到这了,更多相关mongodb清除连接和日志内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

相关文章

  • MongoDB使用小结:一些不常见的经验分享

    MongoDB使用小结:一些不常见的经验分享

    最近一年忙碌于数据处理相关的工作,跟MongoDB打交道极多,以下为实践过程中的Q&A,后续会不定期更新补充
    2017-03-03
  • MongoDB 的批量查找符号的方法

    MongoDB 的批量查找符号的方法

    本文介绍了MongoDB中常用的查询操作符,包括`$in`、`$nin`、`$or`、`$and`以及范围查询操作符(`$gt`、`$lt`、`$gte`、`$lte`),并提供了相应的语法和代码示例,帮助用户快速掌握这些操作符的使用方法,感兴趣的朋友一起看看吧
    2025-02-02
  • mac下使用brew 安装mongodb的方法教程

    mac下使用brew 安装mongodb的方法教程

    mac 系统常用的软件安装工具就是 homebrew.那么通过brew怎么安装mongodb呢?下面小编给大家分享mac下使用brew 安装mongodb的方法教程,一起看看吧
    2016-10-10
  • mongodb实现数组对象求和方法实例

    mongodb实现数组对象求和方法实例

    这篇文章主要给大家介绍了关于mongodb实现数组对象求和的相关资料,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2019-01-01
  • MongoDB多条件模糊查询示例代码

    MongoDB多条件模糊查询示例代码

    这篇文章主要给大家介绍了关于MongoDB多条件模糊查询的相关资料,文中通过示例代码介绍的非常详细,对大家学习或者使用MongoDB具有一定的参考学习价值,需要的朋友们下面来一起学习学习吧
    2019-09-09
  • Mongodb常见错误与解决方法小结(Mongodb中经常出现的错误)

    Mongodb常见错误与解决方法小结(Mongodb中经常出现的错误)

    这篇文章主要介绍了Mongodb常见错误与解决方法小结(Mongodb中经常出现的错误),需要的朋友可以参考下
    2017-03-03
  • MongoDB特点与体系结构等简介

    MongoDB特点与体系结构等简介

    今天小编就为大家分享一篇关于MongoDB特点与体系结构等简介,小编觉得内容挺不错的,现在分享给大家,具有很好的参考价值,需要的朋友一起跟随小编来看看吧
    2019-01-01
  • 如何通过MongoDB Atlas 实现语义搜索与 RAG(迈向AI的搜索机制)

    如何通过MongoDB Atlas 实现语义搜索与 RAG(迈向AI的搜索机制)

    MongoDBAtlas的语义搜索功能通过向量化存储和检索非结构化数据,结合RAG框架,实现了高效的知识检索和增强型生成应用,本文给大家介绍如何通过MongoDB Atlas 实现语义搜索与 RAG(迈向AI的搜索机制),感兴趣的朋友跟随小编一起看看吧
    2024-11-11
  • PHP库 查询Mongodb中的文档ID的方法

    PHP库 查询Mongodb中的文档ID的方法

    这篇文章主要介绍了PHP库 查询Mongodb中的文档ID的方法的相关资料,需要的朋友可以参考下
    2016-10-10
  • MongoDB 管道的介绍及操作符实例

    MongoDB 管道的介绍及操作符实例

    这篇文章主要介绍了MongoDB 管道的介绍及操作符实例的相关资料,MongoDB的聚合管道将MongoDB文档在一个管道处理完毕后将结果传递给下一个管道处理,需要的朋友可以参考下
    2017-07-07

最新评论