JAVA mongodb 聚合幾種查詢方式詳解
一、BasicDBObject
整個(gè)聚合查詢是統(tǒng)計(jì)用戶的各種狀態(tài)下的用戶數(shù)量為場(chǎng)景:
1.篩選條件:
date為查詢?nèi)掌冢?/p>
BasicDBObject Query = new BasicDBObject(); Query.put("time",new BasicDBObject("$gte", date + " 00:00:00") .append("$lte", date + " 23:59:59"));
如果有多個(gè)條件:直接加Query.put("status", 0);
如果有OR篩選:
BasicDBList values = new BasicDBList(); values.add(new BasicDBObject("status", new BasicDBObject("$exists",false))); values.add(new BasicDBObject("status", 0)); Query.put("$or", values);
其中 new BasicDBObject("$exists",false)) 就是“status”不存在(mongodb文檔可不等于實(shí)體的字段)
2.拼接match
DBObject Match = new BasicDBObject("$match", Query);
將上一步的Query放入macth篩選中
3.拼接分組條件
此步相當(dāng)于SQL的Group By
BasicDBObject GroupBy = new BasicDBObject();// 分組條件 GroupBy.put("userId", "$userId");//根據(jù)用戶ID來分組
同第一步的篩選一樣,如果有多個(gè)分組可直接添加在后面:GroupBy.put("status", "$status");
4.分組后查詢
首先把分組拼接上:
DBObject Select = new BasicDBObject("_id", GroupBy);
如果我們要對(duì)分組后的數(shù)據(jù)進(jìn)行操作:(這里是用戶的統(tǒng)計(jì)數(shù)量)
Select.put("count", new BasicDBObject("$sum", 1));
5.拼接$group
DBObject Group = new BasicDBObject("$group", Select);
至此。我們拼接,mongodb的語句到此結(jié)束
下面我們開始查詢操作:
import com.mongodb.AggregationOutput; import org.springframework.data.mongodb.core.MongoTemplate; AggregationOutput Output = mongoTemplate.getCollection("這里是mongodb的數(shù)據(jù)表名") .aggregate(Match, Group);
讀取查詢結(jié)果:
Iterable<DBObject> map = Output.results(); //遍歷map for (DBObject dbObject : map) { //這里讀取到的map為{"_id":{"userId":1,"status"0}}... Map<String, Object> resultMap = (Map<String, Object>) dbObject.get("_id"); //這里截取掉.0 Integer userId = Integer.parseInt(CommUtil.toString(ausgMap.get("userId")).replace(".0","")); //在這里我們就可以對(duì)我們的數(shù)據(jù)進(jìn)行操作了; Integer count = Integer.parseInt(CommUtil.toString(dbObject.get("count"))); }
二、DBObject
不多說,如果大家覺得第一種方法特別長(zhǎng)篇大論,那么下面我給大家?guī)硪环N代碼更簡(jiǎn)潔的聚合查詢:
直接上代碼吧。
1.注意導(dǎo)入的包:
import com.mongodb.DBObject; import com.mongodb.util.JSON;
2.$macth:
(beginDay-查詢開始日期;endDay-查詢結(jié)束日期)
DBObject match = (DBObject) JSON.parse("{$match:{'status':'1','time': {$gte:'"+beginDay+"',$lte:'"+endDay+"'}}}");
3.$group:
(以u(píng)serId分組,統(tǒng)計(jì)用戶數(shù)量,累加amout字段值,取amout字段最大值)
DBObject group = (DBObject) JSON.parse("{$group:{_id:'$userId', count:{$sum:1},total:{$sum:'$amount'},maxSigle:{$max:'$amount'}}}");
條件拼接完,開始查詢:
List<DBObject> list = new ArrayList<DBObject>(); list.add(match); list.add(group); AggregationOutput Output = mongoTemplate.getCollection("表名").aggregate(list);
遍歷結(jié)果就不用在說了。上面已經(jīng)詳細(xì)描述了
第二種方法是不是比一種方式簡(jiǎn)單多了。但是比較考驗(yàn)自身對(duì)mongodb語句熟悉性。
【擴(kuò)展】
接著上面的方法進(jìn)行擴(kuò)展
//status 為0或者為1 ; type 不為11;time在beginDay ~ endDay時(shí)間段內(nèi) DBObject match = (DBObject) JSON.parse("{$match:{'status':{$in:['0','1']}, type:{$ne:11},'time':{$gte:'"+beginDay+"',$lte:'"+endDay+"'}}}"); //以用戶Id分組,統(tǒng)計(jì)查詢次數(shù),取最后一次time的時(shí)間 DBObject group = (DBObject) JSON.parse("{$group:{_id:'$userId', count:{$sum:1},lastTime:{$max:'$time'} }}"); //在上一步統(tǒng)計(jì)出的結(jié)果中篩選次數(shù)大于100的數(shù)據(jù) DBObject groupMatch = (DBObject) JSON.parse("{$match:{count:{$gte:100}}}"); //$project----查詢結(jié)果中需要顯示哪些字段,顯示則設(shè)置為1。如下需要不顯示_id 域(字段),則需如下指定: //db.集合名.aggregate( [ { $project : { _id: 0, count: 1 , lastSuccTime: 1 } } ] ) DBObject project = (DBObject) JSON.parse("{$project:{_id:1,count:1,lastSuccTime:1}}"); DBObject sort = (DBObject) JSON.parse("{$sort:{'count':-1}}");//排序 List<DBObject> list = new ArrayList<DBObject>(); list.add(match); list.add(group); list.add(groupMatch); list.add(project); list.add(sort); AggregationOutput catchOutPut = mongoTemplate.getCollection("表名") .aggregate(list);//查詢結(jié)果
三、BasicDBObject+腳本語句
BasicDBObject groupIndex = new BasicDBObject(); BasicDBObject distinctQuery = new BasicDBObject(); distinctQuery.put("userId", new BasicDBObject("$in", userIds));//UserIds數(shù)組 BasicDBObject initIndex = new BasicDBObject(); initIndex.put("count", 0);//給count賦初值 // 腳本(doc代表數(shù)據(jù)庫的數(shù)據(jù).prev代表查詢結(jié)果//prev.count這里的count就是上一步initIndex的count) String reduce = "function(doc, prev) {if(doc.status==0){prev.count+= 1;};}"; List<Map<String, Object>> basicDBList = (List<Map<String, Object>>) mongoTemplate. getCollection("Collection").group(groupIndex, distinctQuery, initIndex, reduce, null);
最后循環(huán)遍歷List即可得到結(jié)果【PS:group這種聚合方式有個(gè)限制條件--->超過20000數(shù)據(jù)就會(huì)報(bào)錯(cuò)】
以上就是我在普通業(yè)務(wù)處理中用到mongodb聚合處理。如果有更好的方法或是有需要改進(jìn)的地方,歡迎大家給我留言~
相關(guān)文章
SpringBoot實(shí)現(xiàn)api加密的示例代碼
在項(xiàng)目中,為了保證數(shù)據(jù)的安全,我們常常會(huì)對(duì)傳遞的數(shù)據(jù)進(jìn)行加密。本文主要介紹了SpringBoot實(shí)現(xiàn)api加密的示例代碼,感興趣的小伙伴們可以參考一下2021-07-07Java中Double除保留后小數(shù)位的幾種方法(小結(jié))
這篇文章主要介紹了Java中Double保留后小數(shù)位的幾種方法,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2019-07-07java數(shù)據(jù)結(jié)構(gòu)與算法之雙向循環(huán)隊(duì)列的數(shù)組實(shí)現(xiàn)方法
這篇文章主要介紹了java數(shù)據(jù)結(jié)構(gòu)與算法之雙向循環(huán)隊(duì)列的數(shù)組實(shí)現(xiàn)方法,結(jié)合實(shí)例形式分析了雙向循環(huán)隊(duì)列的原理與數(shù)組實(shí)現(xiàn)技巧,并附帶說明了該算法的用途,需要的朋友可以參考下2016-08-08關(guān)于Idea使用git時(shí)commit特別慢的問題及解決方法
這篇文章主要介紹了關(guān)于Idea使用git時(shí)commit特別慢的問題及解決方法,本文通過圖文并茂的形式給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2020-10-10關(guān)于json序列化(javaBean轉(zhuǎn)Json的細(xì)節(jié)處理)
這篇文章主要介紹了關(guān)于json序列化(javaBean轉(zhuǎn)Json的細(xì)節(jié)處理),具有很好的參考價(jià)值,希望對(duì)大家有所幫助。2022-03-03mybatis 集合嵌套查詢和集合嵌套結(jié)果的區(qū)別說明
這篇文章主要介紹了mybatis 集合嵌套查詢和集合嵌套結(jié)果的區(qū)別說明,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2021-09-09