mongodb清除连接和日志的正确方法分享(mongodb中删除数据库)满满干货

随心笔谈2年前发布 admin
188 0 0

文章摘要

嗯,我现在要帮用户总结一篇关于MongoDB连接关闭和日志处理的文章。用户要求总结大约150字,关键词密度在2%左右,要简明扼要,突出核心内容。 首先,我得仔细阅读文章内容。文章主要讲述服务器卡死,可能是MongoDB未正确关闭连接导致的问题。作者详细描述了如何检查和清除当前连接,使用了netstat和ps命令,还提到了处理日志的方法,比如logRotate和MongoExport。 接下来,我要提取关键点。关闭连接的方法有几种,包括kill操作和kill -9。日志处理方面,提到了检查连接数、清理旧日志,以及使用logRotate旋转日志。还有一部分关于导出数据的内容,但可能不是核心。 然后,我需要把这些信息浓缩成150字左右的总结。关键词要控制在2%左右,比如MongoDB、连接、日志、命令等。我得确保总结涵盖主要方法,比如检查连接数、清理当前连接、处理日志和生成数据导出。 最后,检查是否符合用户的要求,确保内容简明扼要,突出核心。可能还要调整语句,使其更流畅。 </think> 最近在处理MongoDB服务器卡死的问题时,发现可能是未正确关闭的连接导致。文章详细介绍了以下内容: 1. **当前连接处理**:通过`db.currentOp().inprog`获取正在执行的操作,并使用`killOp`关闭它们,但此方法未成功关闭所有连接。可以通过`netstat -nat`或`ps -aux`查看连接情况,使用`kill -9`命令终止相关进程。 2. **连接状态更新**:关闭连接后,连接状态会变为TIME_WAIT,但端口可能因主动发送ACK而被占用。通常会等待一段时间后自动释放。 3. **日志处理**:通过`db.runCommand({logRotate:1})`可以旋转日志文件,避免日志文件过大。此外,可以使用`MongoExport`将数据导出到文件。 4. **数据导出**:使用`mongoexport`命令可以将当前集合的数据一次性导出到指定路径。 总结而言,文章通过具体命令和方法,介绍了如何处理MongoDB的连接关闭、日志管理以及数据导出问题。



目录前言关闭current的方法一:关闭current的方法二:日志去重script导出数据总结

最近在做并发,服务器卡死了。

感觉是pymongo未能完全close掉和mongodb创建的tcp连接,并且在mongo连接未自动释放前进行高频连接,导致连接数爆满造成的。

所以对建立的连接进行清除,以此记录并做分享。

查看MongoDB的连接信息

db.serverStatus().connections

current 当前连接数

available 可用连接数

connection.totalCreated 创建到服务器的所有传入连接的计数。此数字包括已关闭的连接。

清除所有当前的currentOp:

var ops=db.currentOp().inprog;
for(i=0; i < ops.length; i++){
var opid=ops[i].opid;
db.killOp(opid);
print(“Stopping op … #”+opid)
};

上面的命令无法关闭current连接

查看所有current的tcp连接:

netstat -nat | grep ‘27017′

查看指定端口的进程号

netstat -tpna | grep :35522

然后kill掉该进程

kill -9 14335

再到db-shell中查看,已经关闭一个current了。

这种方式关掉的tcp连接状态会变成TIME_WAIT,端口依旧被占用,因为ACK是由我们主动关闭发出的。

不过还好的是一般等一段时间链接自动会被释放,端口也不再被占用了。

可以看到35522和35524都已经被释放。

如果你知道是由哪个程序连接的mongodb,比如python程序

那么可以使用命令查看程序端口占用情况

ps -aux | grep python

然后kill掉对应的python程序,run.py,也能完成current的清除

批量清除指定程序:

ps -efww|grep -w “run.py” |grep -v grep|cut -c 9-15|xargs kill -9

查看日志位置

cat /etc/mongod.conf

日志文件过大,不能通过vim查看,用tail查看最后100行

tail -n 100 mongo.log

不需要重启服务,重新开启一个新日志文件的方法

use admin
db.runCommand({logRotate:1})

运行过程中不能删除日志文件,清空日志文件但不删除文件的命令(删除后没有生成日志)

: >run.log

也可以使用旋转日志 logRotate :对日志进行切割

db.getCollection(‘集合名’).aggregate([{$group:{_id:{‘去重字段’:’$去重字段’}, count:{$sum:1}, dups:{$addToSet: ‘$_id’}}},{$match:{count:{$gt:1}}}] ,{ allowDiskUse: true }).forEach(function(doc){doc.dups.shift();db.getCollection(‘集合名’).remove({_id: {$in: doc.dups}});})

mongoexport -h localhost:27017 -u 用户名 -p 密码 -d 库名 -c 集合名 -o 导出文件路径

到此这篇关于mongodb清除连接和日志的文章就介绍到这了,更多相关mongodb清除连接和日志内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

© 版权声明

相关文章