我在 MongoDB 中有一个集合，其中大约有(约 300 万条记录)。我的示例记录看起来像，

 { "_id" = ObjectId("50731xxxxxxxxxxxxxxxxxxxx"),
   "source_references" : [
                           "_id" : ObjectId("5045xxxxxxxxxxxxxx"),
                           "name" : "xxx",
                           "key" : 123
                          ]
 }

我在集合中有很多具有相同 source_references.key 的重复记录。 (我的意思是重复，source_references.key 不是 _id)。

我想根据source_references.key删除重复记录，我正在考虑编写一些PHP代码来遍历每条记录，如果存在则删除记录。

有没有办法删除 Mongo 内部命令行中的重复项？

最佳答案

此答案已过时: dropDups 选项为 removed in MongoDB 3.0 ，因此在大多数情况下将需要不同的方法。例如，您可以按照以下建议使用聚合:MongoDB duplicate documents even after adding unique key .

如果您确定 source_references.key 标识重复记录，则可以使用 dropDups:true 确保唯一索引MongoDB 2.6 或更早版本中的索引创建选项:

db.things.ensureIndex({'source_references.key' : 1}, {unique : true, dropDups : true})

这将为每个 source_references.key 值保留第一个唯一文档，并删除任何可能导致重复键违规的后续文档。

重要提示:任何缺少 source_references.key 字段的文档都将被视为具有 null 值，因此后续文档缺少该键字段将被删除。您可以添加 sparse:true索引创建选项，因此索引仅适用于具有 source_references.key 字段的文档。

明显的警告:备份您的数据库，如果您担心意外的数据丢失，请先在暂存环境中尝试此操作。

https://stackoverflow.com/questions/13190370/