MongoDB 硬盘空间不足,导致问题 , 兼Flunted 问题排除
作者:互联网
摘要:MongoDB 硬盘空间不足,导致问题
我们的硬盘空间只有20G
而mongodb由于他是以倍数成长的方式增加。
至多2G方式的增加。
但由于增加速度太快,会导致没有足够硬盘空间,会出现错误。
虽然可以登入,但无法删除或取得collection
会出现
Can't take a write lock while out of disk space" instance=69954892127080 错误问题
,而就算重开,
却出现了,日志档,需要至少3G硬盘空间
ERROR: Insufficient free space for journal files
Please make at least 3379MB available in /var/lib/mongodb/journal or use --smallfiles
简单一点,
就去/etc/init.d/mongodb.conf
修改
nojournal 设为 true
然后,并将lock档移除
rm /var/lib/mongodb/mongo.lock
及要查什么原因可到
/var/log/mongodb/mongo.log
之后,就要紧急删除不必要的资讯或增加硬盘来做处理。
由于我们会使用Fluentd + MongoDB
MongoDB一挂,很多数据会卡在本机的Fluentd
他会建立数据在buffered中。
然后每分钟retry一次,
导致该主动I/O存取频繁,
而I/O存取频繁时,此时Linode就会寄通知过来。
这时就要马上紧急处理
接着,之后的Fluentd进入,相关的mongodb连线,可能会进入卡死状态。
在这情形下,决定重开log本机的fluentd(会不会之前的数据遗失呢。觉得可能,但因为log不重要,所以才删除,如果你的log很重要,千万不要随便乱试)
重开
sudo /etc/init.d/td-agent restart
重开后,log就开始新的纪录进来。
Fluentd的错误为
temporarily failed to flush the buffer, next retry will be at 2013-04-13 05:53:13 +0000. error="Operation failed with the following exception: end of file reached" instance=69954891056340
查log到
cat /var/log/td-agent/td-agent.log
原文:大专栏 MongoDB 硬盘空间不足,导致问题 , 兼Flunted 问题排除
标签:Fluentd,log,mongodb,Flunted,MongoDB,var,硬盘空间 来源: https://www.cnblogs.com/petewell/p/11474158.html