WD1X.COM - 问答一下,轻松解决,电脑应用解决专家
主板显卡CPU内存显示器
硬盘维修显卡维修显示器维修
注册表系统命令DOS命令Win8
存储光存储鼠标键盘
内存维修打印机维修
WinXPWin7Win11Linux
硬件综合机箱电源散热器手机数码
主板维修CPU维修键盘鼠标维修
Word教程Excel教程PowerPointWPS
网络工具系统工具图像工具
数据库javascript服务器
PHP教程CSS教程XML教程

mongodb清理collection中大量数据的2种办法

更新时间:2021-05-09 16:36 作者:selectgo点击:
1 shell中for循环清理
 
每次去连接一下mongo, 进行数据的remove操作
 
echo "Begin ..." >> /root/time.log;
 
echo $(date +%Y-%m-%d-%H:%M:%S) >>/root/time.log;
 
 
 
for((i=1;i<=100000000;i++));
 
do
 
objectid=`/usr/local/mongodb/bin/mongo 127.0.0.1:37017/test -uadmin -padmin --quiet --eval "printjson(db.tickets.findOne({"date":{\\$lt:ISODate(\"2013-01-10T01
 
:16:33.303Z\")}},{"_id":1}))"`;
 
/usr/local/mongodb/bin/mongo 127.0.0.1:37017/test -uadmin -padmin --quiet --eval "db.tickets.remove($objectid)";
 
echo " done " $objectid " " >> /root/tickets.log
 
done
 
echo $(date +%Y-%m-%d-%H:%M:%S) >>/root/time.log;
 
echo "End ..." >> /root/time.log;
 
echo " " >> /root/time.log
 
 
 
 
 
2 mongo shell中 for循环 清理
 
只连接一次mongo, 在mongo shell中for循环清理
 
[root@mongo ~]# more t.sh
 
 
 
echo "Begin ..." >> /root/t.log;
 
echo $(date +%Y-%m-%d-%H:%M:%S) >>/root/t.log;
 
 
 
 
 
/usr/local/mongodb/bin/mongo 127.0.0.1:37017/test -uadmin -padmin t.js;
 
 
 
 
 
echo $(date +%Y-%m-%d-%H:%M:%S) >>/root/t.log;
 
echo "End ..." >> /root/t.log;
 
echo " " >> /root/t.log
 
[root@mongo ~]#
 
[root@mongo ~]#
 
[root@mongo ~]# more t.js
 
for( var i=1 ; i<=100000000; i++ ) {
 
var objectid = db.tickets.findOne({date:{$lt:ISODate("2013-01-10T01:16:33.303Z")}},{_id:1});
 
db.tickets.remove(objectid);
 
}
 
 
实际测试, 第一种安全保险的多,但是毕竟慢,清理100G的数据 大概要3天 ,第二种快捷的多(据说有风险,但是我测试没有碰到过),清理100G的数据,用了6个小时.
顶一下
(0)
0%
踩一下
(0)
0%
------分隔线----------------------------
你可能感兴趣的内容