mongodb去重操作只留一条

Posted 2021-01-19

原表记录：

需要把related_type=1 and action_type=3 并且related_id相同的删掉一条。只留一个去重。
db.user_action_log.aggregate([

{$match:{related_type:1,action_type:3}}, （查询条件）
{
$group: { _id: {related_id: ‘$related_id‘},count: {$sum: 1},dups: {$addToSet: ‘$_id‘}} （根据related_id分组，$group只会返回参与分组的字段，使用$addToSet在返回结果数组中增加_id字段）

},

{
    $match: {count: {$gt: 1}}            （匹配数量大于1的数据）
}

]).forEach(function(doc){ （使用forEach循环根据_id删除数据）
doc.dups.shift();
db.userInfo.remove({_id: {$in: doc.dups}});
})

删除后数据：

db.user_action_log.aggregate([

{$match:{related_type:1,action_type:3}},
{
$group: { _id: {related_id: ‘$related_id‘},count: {$sum: 1},dups: {$addToSet: ‘$_id‘}}

},

{
    $match: {count: {$gt: 1}}
}

]).forEach(function(doc){
doc.dups.shift();
db.userInfo.remove({_id: {$in: doc.dups}});
})