• 注册
当前位置:1313e > 数据库 >正文

查询某个字段包含某个值_【记录】根据某个字段查找重复数据MySQL和MongoDB

记录一个在工作中遇到的一个场景:数据规则是根据某个字段作为唯一标识存储数据,但是在业务使用中发现有重复数据,需要把这些数据筛查出来。下面分别以MySQL和MongoDB来举例说明:MySQL根据user表中的code字段查找重复数据
select code,count(*) from user group by code having count(*) > 1;
MongoDBmongo中也是user表,根据code来找重复数据
db.getCollection('user').aggregate([    { $group: { _id : '$code', count: { $sum : 1 } } },    { $match: { count: { $gt : 1} } }])
注:如果Mongo表中数据量过多的话,这个语句直接查询可能会报错。报错如图所示:

d7f165dcc6324d3bb6073ed8977d2051.png

原因是MongoDB的聚合的结果必须要限制在16M以内。所以要加一个参数allowDiskUse:true所以,如果数据量多的话需要用下面的语句:
db.getCollection('user').aggregate([    { $group: { _id : '$code', count: { $sum : 1 } } },    { $match: { count: { $gt : 1} } }],{allowDiskUse:true})

the end~

本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 162202241@qq.com 举报,一经查实,本站将立刻删除。

最新评论

欢迎您发表评论:

请登录之后再进行评论

登录