MongoDB 查询总结

本文涉及的产品
云数据库 MongoDB,独享型 2核8GB
推荐场景:
构建全方位客户视图
简介: 1、含日期查询 从起始时间到结束时间BasicDBObject queryObj = new BasicDBObject();queryObj.put("date",new BasicDBObject().
1、含日期查询 从起始时间到结束时间
BasicDBObject queryObj = new BasicDBObject();
queryObj.put("date",new BasicDBObject().append("$gte",starttime).append("$lt",endtime));
2、distinct 查询
BasicDBObject queryObj = new BasicDBObject();
coll.distinct("field_name",queryObj);// field_name 为数据库中需要distinct的字段名称,queryObj为查询条件 ,先执行查询条件后在distinct;返回为一个list集合 里面存放所有不重复的 field_name.
这种方式还是有中缺陷,如果数据量过大 list可能超出容量,不好控制,可以使用group by的方法替换
3、exists 查询
BasicDBObject basicObj = new BasicDBObject();
BasicDBObject andSearch = new BasicDBObject();
andSearch.put("$gte", start.getTime());andSearch.put("$lt", end.getTime());basicObj.put("date", andSearch);
basicObj.put("field_name", new BasicDBObject("$exists", true)); //若数据库中 field_name 这个字段有值 (包含null),则符合条件,反之这条记录没有这个字段则不符合条件
4、group 查询 (分组查询)
Map<String, Integer> map = new HashMap<String,Integer>();
DBCollection coll = MongoDB.getDBCollection("user_processed_corpus");
DBObject fields = new BasicDBObject();
fields.put("cust_name", "$cust_name");
DBObject groupField = new BasicDBObject();
groupField.put("_id", fields);
groupField.put("count", new BasicDBObject("$sum",1));
DBObject group = new BasicDBObject("$group",groupField);
BasicDBObject matchObj = new BasicDBObject();
matchObj.put("date",new BasicDBObject("$lt", end.getTime()).append("$gt",start.getTime()));
matchObj.put("userid", userid);
matchObj.put("from", from);
DBObject match = new BasicDBObject("$match",matchObj);
AggregationOutput output = coll.aggregate(match, group);
Iterable<DBObject> results = output.results();
Iterator<DBObject> it = results.iterator();
while(it.hasNext()){
DBObject obj = it.next();
DBObject name = (DBObject) obj.get("_id");
Object cust_name =name.get("cust_name");
if(CommonUtil.isNotNull(cust_name)){
map.put(cust_name.toString(), Integer.valueOf(obj.get("count").toString()));
}
}
    4.2 group(方式2)
  public static void group(){
        BasicDBObject group = new BasicDBObject();
        group.put("_id", "$userid");
        group.put("count", new BasicDBObject("$sum",1));
        AggregationOutput output = coll.aggregate(new BasicDBObject("$group",group));
        DBObject obj = output.getCommand();
        System.out.println(obj);
        CommandResult result = output.getCommandResult();
        System.out.println(result.get("result"));
    }
 5、addToSet(只能确保添加到记录,不能影响原有记录数据) 相同的数据则不添加
public static void addToSetAndEachElementInArray(String _id){  
            List list = new ArrayList();  
            list.add("str0");  
            list.add("str1");  
            list.add(new BasicDBObject("arr90",90));
            BasicDBObject idObj = new BasicDBObject("_id", new ObjectId(_id));
            BasicDBObject updateObj = new BasicDBObject();
            updateObj.put("$addToSet", new BasicDBObject("arrays",new BasicDBObject("$each",list)));
            WriteResult result = coll.update(idObj,updateObj);
            System.out.println("update count:"+result.getN());  
 } 
 6、or 查询 将多个查询条件加入一个list中 用$or 连接list中的查询条件即可
public static void test1(){
        BasicDBObject query1 = new BasicDBObject();
        BasicDBObject query2 = new BasicDBObject();
        query1.put("count", new BasicDBObject("$exists",false));
        query2.put("count", new BasicDBObject("$exists",true));
        BasicDBList list = new BasicDBList();
        list.add(query2);
        list.add(query1);
        BasicDBObject query = new BasicDBObject();
        query.put("$or", list);
        int count = coll.find(query).count();
        System.out.println(count);
        
    }
 7、in 查询
 1  public void findByINQuery(int value1,int value2){  
 2         coll = getCollection("ParentColl");  
 3         BasicDBObject query=new BasicDBObject();  
 4         BasicDBList cond=new BasicDBList();  
 5         cond.add(value1);  
 6         cond.add(value2);  
 7         query.put("intData",new BasicDBObject("$in", cond));  
 8         DBCursor cur = coll.find(query);  
 9         while(cur.hasNext()){  
10             System.out.println(cur.next());  
11         }  
12     }  
8、addToSet的另外一种用法(本质相同)  对分组之后的数据在进行操作
userid  question
1    a
1    b
2    c  
2    a   
2    b
1    a  
3    c  
3    b  
3    a
 1 public static void group1(){
 2             BasicDBObject obj = new BasicDBObject();
 3             BasicDBObject query = new BasicDBObject();
 4             BasicDBObject match = new BasicDBObject();
 5             BasicDBObject group = new BasicDBObject();
 6             BasicDBObject g1 = new BasicDBObject();
 7             //第一个分组 (userid 和 question 共同作为分组字段)
 8             g1.put("userid", "$userid");
 9             g1.put("question", "$question");
10             group.put("_id", g1);
11             //可以额外的添加一些字段(以便下次的统计操作)
12             group.put("count", new BasicDBObject("$sum",1));
13             group.put("userid",new BasicDBObject("$addToSet", "$userid")); 
14             group.put("question",new BasicDBObject("$addToSet", "$question")); 
15             obj.put("$group", group);
16             match.put("$match", query);
17             
18             //对第一次分组产生的结果进行再次分组(第一次分组的结果见注1)
19             DBObject _group = new BasicDBObject();
20             _group.put("question", "$question");
21             DBObject groupFields1 = new BasicDBObject("_id", _group);
22             groupFields1.put("user_sum", new BasicDBObject("$sum", 1));
23             BasicDBObject group1 = new BasicDBObject();
24             group1.append("$group", groupFields1);
25             
26             AggregationOutput out =  coll.aggregate(match,obj,group1);
27             CommandResult result =  out.getCommandResult();
28             BasicDBList record = (BasicDBList) result.get("result");
29             System.out.println(record.size());
30     }
注1:第一次分组的结果
[{
"_id" : {
"userid" : "0003",
"question" : "how"
},
"count" : 30,
"userid" : ["0003"],
"question" : ["how"]
}, {
"_id" : {
"userid" : "0002",
"question" : "I am comming"
},
"count" : 1,
"userid" : ["0002"],
"question" : ["I am comming"]
}, {
"_id" : {
"userid" : "0002",
"question" : "2323"
},
"count" : 1,
"userid" : ["0002"],
"question" : ["2323"]
}, {
"_id" : {
"userid" : "0002",
"question" : "how"
},
"count" : 38,
"userid" : ["0002"],
"question" : ["how"]
}, {
"_id" : {
"userid" : "0001",
"question" : "I comming"
},
"count" : 1,
"userid" : ["0001"],
"question" : ["I comming"]
}, {
"_id" : {
"userid" : "0002",
"question" : "123"
},
"count" : 1,
"userid" : ["0002"],
"question" : ["123"]
}, {
"_id" : {
"userid" : "0001",
"question" : "I am "
},
"count" : 1,
"userid" : ["0001"],
"question" : ["I am "]
}, {
"_id" : {
"userid" : "0001",
"question" : "I am comming"
},
"count" : 4,
"userid" : ["0001"],
"question" : ["I am comming"]
}
]
结果解释:_id 中的内容为分组的字段是唯一的,故作为_id 后面的count userid 和question都是在分组过程中手动添加上去的,这个其实就当做中间表 以便下面的数据统计和操作
9、模糊查询(pattern)
String like = "...";
Pattern pattern = Pattern.compile("^.*"+like+".*$", Pattern.CASE_INSENSITIVE);
BasicDBObject obj = new BasicDBObject();
obj.put("name",pattern);
coll.find(obj);
10、$eleMatch 查询(数组匹配查询)
DBObject edit = new BasicDBObject();
edit.put("slotname", "content");
query.put("slotbind", new BasicDBObject("$elemMatch", edit));
 
不难发现主要用到BasicDBObject、BasicDBList、DBCursor这三个类。BasicDBObject好比一个map,好比使用json查询中的{} 。BasicDBList是个list,用于or,nin等条件查询。DBCursor用于遍历结果集。其实只要将对应的json查询使用这3个类转化一下,就能写出对应的java代码了。
若转载请注明出处!若有疑问,请回复交流!
相关实践学习
MongoDB数据库入门
MongoDB数据库入门实验。
快速掌握 MongoDB 数据库
本课程主要讲解MongoDB数据库的基本知识,包括MongoDB数据库的安装、配置、服务的启动、数据的CRUD操作函数使用、MongoDB索引的使用(唯一索引、地理索引、过期索引、全文索引等)、MapReduce操作实现、用户管理、Java对MongoDB的操作支持(基于2.x驱动与3.x驱动的完全讲解)。 通过学习此课程,读者将具备MongoDB数据库的开发能力,并且能够使用MongoDB进行项目开发。 &nbsp; 相关的阿里云产品:云数据库 MongoDB版 云数据库MongoDB版支持ReplicaSet和Sharding两种部署架构,具备安全审计,时间点备份等多项企业能力。在互联网、物联网、游戏、金融等领域被广泛采用。 云数据库MongoDB版(ApsaraDB for MongoDB)完全兼容MongoDB协议,基于飞天分布式系统和高可靠存储引擎,提供多节点高可用架构、弹性扩容、容灾、备份回滚、性能优化等解决方案。 产品详情: https://www.aliyun.com/product/mongodb
目录
相关文章
|
3月前
|
NoSQL 定位技术 MongoDB
解锁MongoDB索引的秘密:优化查询效率与应对限制的策略
解锁MongoDB索引的秘密:优化查询效率与应对限制的策略
|
28天前
|
JSON NoSQL MongoDB
MongoDB Schema设计实战指南:优化数据结构,提升查询性能与数据一致性
【8月更文挑战第24天】MongoDB是一款领先的NoSQL数据库,其灵活的文档模型突破了传统关系型数据库的限制。它允许自定义数据结构,适应多样化的数据需求。设计MongoDB的Schema时需考虑数据访问模式、一致性需求及性能因素。设计原则强调简洁性、查询优化与合理使用索引。例如,在构建博客系统时,可以通过精心设计文章和用户的集合结构来提高查询效率并确保数据一致性。正确设计能够充分发挥MongoDB的优势,实现高效的数据管理。
37 3
|
28天前
|
存储 NoSQL MongoDB
【掌握MongoDB】轻松精通MongoDB查询,从基础到高级一网打尽!
【8月更文挑战第24天】在数据驱动的时代,数据库的性能与灵活性对企业至关重要。MongoDB作为一种高性能、无模式的文档数据库,为开发者提供了灵活的数据存储方案。尤其在处理半结构化或多变数据时展现出强大优势。本文重点介绍MongoDB中的查询操作,包括基本查询、条件查询、复杂查询以及字段选择、排序和限制等功能。通过掌握这些基本查询技巧,开发者能够有效从MongoDB中检索数据,支持复杂的业务逻辑。
45 1
|
1月前
|
监控 NoSQL MongoDB
mongodb查询100万数据如何查询快速
综上,提高MongoDB百万级数据的查询性能需要综合多项技术,并在实际应用中不断调优和实践。理解数据的特征,合理设计索引,优化查询语句,在数据访问、管理上遵循最佳的实践,这样才能有效地管理和查询大规模的数据集合。
109 1
|
20天前
|
C# 微服务 Windows
模块化革命:揭秘WPF与微服务架构的完美融合——从单一职责原则到事件聚合器模式,构建高度解耦与可扩展的应用程序
【8月更文挑战第31天】本文探讨了如何在Windows Presentation Foundation(WPF)应用中借鉴微服务架构思想,实现模块化设计。通过将WPF应用分解为独立的功能模块,并利用事件聚合器实现模块间解耦通信,可以有效提升开发效率和系统可维护性。文中还提供了具体示例代码,展示了如何使用事件聚合器进行模块间通信,以及如何利用依赖注入进一步提高模块解耦程度。此方法不仅有助于简化复杂度,还能使应用更加灵活易扩展。
41 0
|
20天前
|
安全 C# 数据安全/隐私保护
WPF安全加固全攻略:从数据绑定到网络通信,多维度防范让你的应用固若金汤,抵御各类攻击
【8月更文挑战第31天】安全性是WPF应用程序开发中不可或缺的一部分。本文从技术角度探讨了WPF应用面临的多种安全威胁及防护措施。通过严格验证绑定数据、限制资源加载来源、实施基于角色的权限管理和使用加密技术保障网络通信安全,可有效提升应用安全性,增强用户信任。例如,使用HTML编码防止XSS攻击、检查资源签名确保其可信度、定义安全策略限制文件访问权限,以及采用HTTPS和加密算法保护数据传输。这些措施有助于全面保障WPF应用的安全性。
30 0
|
2月前
|
NoSQL 关系型数据库 MySQL
优化MongoDB查询
【7月更文挑战第4天】
35 0
|
2月前
|
NoSQL 中间件 MongoDB
MongoDB查询过程
【7月更文挑战第3天】
34 0
|
3月前
|
NoSQL BI MongoDB
深入理解 MongoDB 条件操作符:优化查询、精准筛选、提升性能
深入理解 MongoDB 条件操作符:优化查询、精准筛选、提升性能
|
4月前
|
NoSQL 测试技术 定位技术
【MongoDB 专栏】MongoDB 的地理空间索引与位置查询
【5月更文挑战第10天】MongoDB 支持地理空间数据处理,提供2dsphere(球面)和2d(平面)索引,适用于地图导航、物流、社交网络等领域。通过创建索引,可加速位置查询,如查询范围、最近邻及地理空间聚合。案例包括地图应用、物流追踪和社交网络。注意数据准确性、索引优化和性能测试,以发挥其在地理空间处理中的潜力。学习此功能,为应用开发解锁更多可能性!
180 2
【MongoDB 专栏】MongoDB 的地理空间索引与位置查询