morphia是谷歌的一个针对mongodb的数据化持久框架;
  关于mongodb的介绍不在这里展示,直接进入主题:采用morphia实现对mongodb的聚合查询

  这里获取所有学生的分数总和

  spring配置文件

  1. <?xml version="1.0" encoding="UTF-8"?>
  2. <beans xmlns="http://www.springframework.org/schema/beans"
  3. xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
  4. xsi:schemaLocation="
  5. http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans-2.5.xsd"
  6. default-autowire="byName">
  7. <bean id="mongoDBManager" class="com.snake.bsys.common.db.MongoDBManager" scope="singleton" >
  8. <property name="serverIpAddr">
  9. <value>127.0.0.1</value>
  10. </property>
  11.  
  12. <property name="serverPort">
  13. <value>27017</value>
  14. </property>
  15.  
  16. <property name="userName">
  17. <value>用户名</value>
  18. </property>
  19. <property name="userPsw">
  20. <value>密码</value>
  21. </property>
  22. <property name="connSource">
  23. <value>库名</value>
  24. </property>
  25. </bean>
  26.  
  27. <bean id="simpleMongoDBDao" class="com.snake.bsys.common.db.SimpleMongoDBDao" scope="singleton" >
  28. <property name="dbName">
  29. <value>库名</value>
  30. </property>
  31. </bean>
  32. </beans>
  33. public class SimpleMongoDBDao<T> {
  34.  
  35. String dbName;
  36.  
  37. public String getDbName() {
  38. return dbName;
  39. }
  40.  
  41. public void setDbName(String dbName) {
  42. this.dbName = dbName;
  43. }
  44.  
  45. public Datastore getDB() {
  46. Datastore datastore = MongoDBManager.getDB(dbName);
  47. return datastore;
  48. }
  49.  
  50. public Pagination queryForPage(Pagination pagination, Query query) {
  51. try {
  52.  
  53. //每页显示条数
  54. int pageSize = pagination.getPageSize();
  55. //第几页
  56. int pageCount = pagination.getPageNo();
  57. //总记录数
  58. int recordCount = pagination.getTotalCount();
  59.  
  60. //获取总记录数
  61. recordCount = (int) query.count();
  62. //总记录数
  63. pagination.setTotalCount(recordCount);
  64.  
  65. //第一条数据位置
  66. int firstResult = pagination.getFirstResult();
  67. firstResult = firstResult < 0 ? 0 : firstResult;
  68.  
  69. FindOptions findOptions = new FindOptions();
  70. //起始位置
  71. findOptions.skip(firstResult);
  72. //查询条数
  73. findOptions.limit(pageSize);
  74.  
  75. //当前页码
  76. pagination.setPageNo(pagination.getPageNo());
  77. //总页数
  78. pagination.setPageSize(PageHelper.getPageCount(recordCount, pagination.getPageSize()));
  79. List<T> list = query.asList(findOptions);
  80. pagination.setList(list);
  81. return pagination;
  82. } catch (Exception e) {
  83. e.printStackTrace();
  84. Log.logger.error(e.getMessage(), e);
  85. }
  86. return null;
  87. }
  88.  
  89. public T getOne(Class classT, String colName, Object equalObj) {
  90. try {
  91. Datastore datastore = this.getDB();
  92.  
  93. Query<T> query = datastore.createQuery(classT);
  94. query = query.field(colName).equal(equalObj);
  95. List<T> list = query.asList();
  96. if (list != null && list.size() > 0)
  97. return list.get(0);
  98.  
  99. } catch (Exception ex) {
  100. ex.printStackTrace();
  101. Log.logger.error(ex.getMessage(), ex);
  102. }
  103.  
  104. return null;
  105. }
  106. }
  107.  
  108. public class MongoDBManager {
  109.  
  110. String serverIpAddr="";
  111. int serverPort=0;
  112. String userName="";
  113. String userPsw="";
  114. String connSource="";
  115.  
  116. public String getServerIpAddr() {
  117. return serverIpAddr;
  118. }
  119.  
  120. public void setServerIpAddr(String serverIpAddr) {
  121. this.serverIpAddr = serverIpAddr;
  122. }
  123.  
  124. public int getServerPort() {
  125. return serverPort;
  126. }
  127.  
  128. public void setServerPort(int serverPort) {
  129. this.serverPort = serverPort;
  130. }
  131.  
  132. public String getUserName() {
  133. return userName;
  134. }
  135.  
  136. public void setUserName(String userName) {
  137. this.userName = userName;
  138. }
  139.  
  140. public String getUserPsw() {
  141. return userPsw;
  142. }
  143.  
  144. public void setUserPsw(String userPsw) {
  145. this.userPsw = userPsw;
  146. }
  147.  
  148. public String getConnSource() {
  149. return connSource;
  150. }
  151.  
  152. public void setConnSource(String connSource) {
  153. this.connSource = connSource;
  154. }
  155.  
  156. MongoClient mongoClient;
  157. Morphia morphia;
  158.  
  159. private static MongoDBManager runInstance;
  160.  
  161. /**
  162. * 初始化连接池
  163. */
  164. public void initConn() {
  165. // 其他参数根据实际情况进行添加
  166. try {
  167.  
  168. morphia = new Morphia();
  169. // 告诉Morphia在哪里找到你的类
  170. // 可以为不同的包或者类进行多次的调用
  171. morphia.mapPackage("");
  172.  
  173. ServerAddress serverAddress = new ServerAddress(serverIpAddr,serverPort);
  174. List<ServerAddress> addrs = new ArrayList<ServerAddress>();
  175. addrs.add(serverAddress);
  176.  
  177. //MongoCredential.createScramSha1Credential()三个参数分别为 用户名 数据库名称 密码
  178. MongoCredential credential = MongoCredential.createScramSha1Credential(userName, connSource, userPsw.toCharArray());
  179. List<MongoCredential> credentials = new ArrayList<MongoCredential>();
  180. credentials.add(credential);
  181. mongoClient = new MongoClient(addrs,credentials);
  182.  
  183. runInstance=this;
  184.  
  185. Log.logger.info("mongoDB 初始化完成 init OK....at:"+ DateUtil.getStandardDate(new Date()));
  186. } catch (Exception e) {
  187. e.printStackTrace();
  188. Log.logger.error("mongoDB 失败,"+e.getMessage(),e);
  189. }
  190.  
  191. }
  192.  
  193. public static Datastore getDB(String dbName){
  194. Datastore datastore=null;
  195. if(runInstance.mongoClient!=null&&runInstance.morphia!=null){
  196. datastore = runInstance.morphia.createDatastore(runInstance.mongoClient, dbName);
  197. datastore.ensureIndexes();
  198. }else{
  199. Log.logger.warn("mongoDB 未初始化!");
  200. }
  201. return datastore;
  202. }
  203. }
  204.  实体类:
  205.  
  206. package com.luo.model;
  207.  
  208. import org.mongodb.morphia.annotations.Entity;
  209. import org.mongodb.morphia.annotations.Id;
  210.  
  211. @Entity(value = "user_score", noClassnameStored = true)
  212. public class UserDoc {
  213. @Id
  214. private Object mgId;
  215. private String name;
  216. private Integer score;
  217.  
  218. public Object getMgId() {
  219. return mgId;
  220. }
  221.  
  222. public void setMgId(Object mgId) {
  223. this.mgId = mgId;
  224. }
  225.  
  226. public String getName() {
  227. return name;
  228. }
  229.  
  230. public void setName(String name) {
  231. this.name = name;
  232. }
  233.  
  234. public Integer getScore() {
  235. return score;
  236. }
  237.  
  238. public void setScore(Integer score) {
  239. this.score = score;
  240. }
  241. }
  242.  
  243.   //需要封装结果集:
  244. package com.luo.model;
  245.  
  246. import org.mongodb.morphia.annotations.Entity;
  247. import org.mongodb.morphia.annotations.Id;
  248.  
  249. @Entity
  250. public class ScoreGroupDOC {
  251. @Id
  252. private Object mgId;
  253. private Integer totalScore;
  254.  
  255. public Object getMgId() {
  256. return mgId;
  257. }
  258.  
  259. public void setMgId(Object mgId) {
  260. this.mgId = mgId;
  261. }
  262.  
  263. public Integer getTotalScore() {
  264. return totalScore;
  265. }
  266.  
  267. public void setTotalScore(Integer totalScore) {
  268. this.totalScore = totalScore;
  269. }
  270. }
  271.  
  272. package com.luo.model;
  273.  
  274. import org.mongodb.morphia.Datastore;
  275. import org.mongodb.morphia.aggregation.AggregationPipeline;
  276. import org.mongodb.morphia.query.Query;
  277. import org.springframework.stereotype.Service;
  278.  
  279. import javax.annotation.Resource;
  280. import java.util.Iterator;
  281.  
  282. import static org.mongodb.morphia.aggregation.Group.grouping;
  283. import static org.mongodb.morphia.aggregation.Group.id;
  284. import static org.mongodb.morphia.aggregation.Group.sum;
  285.  
  286. @Service
  287. public class UserService {
  288. @Resource
  289. SimpleMongoDBDao<UserDoc> simpleMongoDBDao;
  290. public ScoreGroupDOC getTotalScore(){
  291. Datastore datastore = simpleMongoDBDao.getDB();
  292. Query<UserDoc> query = datastore.createQuery(UserDoc.class);//查询对象
  293. /*获取分数合计*/
  294. AggregationPipeline pipeline = datastore.createAggregation(UserDoc.class)
  295. //封装到结果集的字段 获取聚合的字段
  296. .match(query).group(id(grouping("mgId")),grouping("totalScore", sum("score")));
  297. Iterator<ScoreGroupDOC> iterator = pipeline.aggregate(ScoreGroupDOC.class);
  298. ScoreGroupDOC groupDOC = new ScoreGroupDOC();
  299. while (iterator.hasNext()) {
  300. groupDOC = iterator.next();
  301. }
  302. return groupDOC;
  303. }
  304. }

  一个刚入行不久的新手程序员也是刚刚接触mongoDB不到一周的时间,第一次写。做个记录,morphia这个框架在网上的资料实在太少了。当时为了求账单的金额合计查了一整天的资料。东拼西凑最终还是把结果做出来了。不过说实在的速度虽然比mySql要好一些。50多万条数据在我自己的笔记本上还是需要2秒多的时间。希望有高手指点一下 提升一下我的聚合查询速度;

  不甚感激;

  1.  

使用morphia实现对mongodb的聚合查询的更多相关文章

  1. mongodb 高级聚合查询

    mongodb高级聚合查询   在工作中会经常遇到一些mongodb的聚合操作,特此总结下.mongo存储的可以是复杂类型,比如数组.对象等mysql不善于处理的文档型结构,并且聚合的操作也比mysq ...

  2. mongodb高级聚合查询

    在工作中会经常遇到一些mongodb的聚合操作,特此总结下.mongo存储的可以是复杂类型,比如数组.对象等mysql不善于处理的文档型结构,并且聚合的操作也比mysql复杂很多. 注:本文基于 mo ...

  3. mongodb高级聚合查询(转)

    在工作中会经常遇到一些mongodb的聚合操作,特此总结下.mongo存储的可以是复杂类型,比如数组.对象等mysql不善于处理的文档型结构,并且聚合的操作也比mysql复杂很多. 注:本文基于 mo ...

  4. MongoDB的使用学习之(七)MongoDB的聚合查询(两种方式)附项目源码

    先来张在路上…… 铛铛铛……项目源码下载地址:http://files.cnblogs.com/ontheroad_lee/MongoDBDemo.rar 此项目是用Maven创建的,没有使用Mave ...

  5. 【Mongodb】聚合查询 && 固定集合

    概述 数据存储是为了可查询,统计.若数据只需存储,不需要查询,这种数据也没有多大价值 本篇介绍Mongodb 聚合查询(Aggregation) 固定集合(Capped Collections) 准备 ...

  6. C#实现对mongoDB的简单增删查改

    首先添加所需要驱动包(可通过nuget获得) using MongoDB.Bson;using MongoDB.Driver;using MongoDB.Driver.Builders; 一.设置配置 ...

  7. PHP实现对MongoDB的基础操作

    PHP扩展                                                                                      PHP5.2.PH ...

  8. java中实现对list的模糊查询

    比如我有下面这样一个List,里面存放的是多个Employee对象.然后我想对这个List进行按照Employee对象的名字进行模糊查询.有什么好的解决方案么?比如我输入的查询条件为“wang”,那么 ...

  9. Javaweb实现对mongodb的增删改查(附带源代码)

    运行截图: 删除后的信息 项目源代码:https://www.cnblogs.com/post/readauth?url=/zyt-bg/p/9807396.html

随机推荐

  1. day03-hdfs的客户端操作\hdfs的java客户端编程

    5.hdfs的客户端操作 客户端的理解 hdfs的客户端有多种形式: 1.网页形式 2.命令行形式 3.客户端在哪里运行,没有约束,只要运行客户端的机器能够跟hdfs集群联网 文件的切块大小和存储的副 ...

  2. [AngularJS] ocLazyLoad -- Lazy loaded module should contain all the dependencies code

    Recentlly works with AngularJS + ocLazyLoad, our project have break down into multi small modules. F ...

  3. 第6章1节《MonkeyRunner源代码剖析》Monkey原理分析-事件源-事件源概览

    在上一章中我们有简要的介绍了事件源是怎么一回事.可是并没有进行详细的描写叙述.那么往下的这几个小节我们就须要把这方面的知识给补充完整. 这一节我们先主要环绕MonkeySourceNetwork这个事 ...

  4. matlab Newton method

    % Matlab script to illustrate Newton's method % to solve a nonlinear equation % this particular scri ...

  5. 从Linux内核升级的必要性说开去

    Linux内核更新超级频繁,可是有必要时刻升级吗?个人感觉没有必要,可是你要时刻关注新特性列表,然后把自己的内核升级到离最新版本号差一两个月公布的版本号而不是最新版本号.以保证稳定性,由于一两个月的时 ...

  6. Android 跑马灯效果与EditText冲突

    近期一个项目,因为布局TextView内容太长了.首先想到的就是跑马灯效果,所以就把TextView又一次自己定义了,尽管跑马灯效果实现了.只是导致了还有一个问题就是EditText输入问题,当第一次 ...

  7. centos内核编译配置

    1.下载内核,下面是内核官网地址:https://www.kernel.org/ tar.xz    是完整的内核包(完整的内核包是通过两次压缩得到的.一次是xz,一次是tar) pgp      是 ...

  8. 关于Dubbo中一些小众但很实用的功能

    dubbo功能非常完善,很多时候我们不需要重复造轮子,下面列举一些你不一定知道,但是很好用的功能: 直连Provider 在开发及测试环境下,可能需要绕过注册中心,只测试指定服务提供者,这时候可能需要 ...

  9. linux下的C语言开发(定时器)

    定时器是我们需要经常处理的一种资源.那Linux下面的定时器又是怎么一回事呢?其实,在linux里面有一种进程中信息传递的方法,那就是信号.这里的定时器就相当于系统每隔一段时间给进程发一个定时信号,我 ...

  10. [Shell学习笔记] read命令从键盘或文件中获取标准输入(转载)

    转自:http://www.1987.name/151.html read命令是用于从终端或者文件中读取输入的内部命令,read命令读取整行输入,每行末尾的换行符不被读入.在read命令后面,如果没有 ...