mongodb的聚合操作

mongodb的聚合操作1.什么是聚合聚合是MongoDB的高级查询语言,它允许我们通过转化合并由多个文档的数据来生成新的在单个文档里不存在的文档信息。MongoDB中聚合(aggregate)主要用于处理数据(诸如统计平…

	mongodb的聚合操作[数据库教程]

1. 什么是聚合

聚合是MongoDB的高级查询语言,它允许我们通过转化合并由多个文档的数据来生成新的在单个文档里不存在的文档信息。MongoDB中聚合(aggregate)主要用于处理数据(诸如统计平均值,求和等),并返回计算后的数据结果,有点类似sql语句中的 count(*)。

在MongoDB中,有两种方式计算聚合:Pipeline 和 MapReduce。Pipeline查询速度快于MapReduce,但是MapReduce的强大之处在于能够在多台Server上并行执行复杂的聚合逻辑。MongoDB不允许Pipeline的单个聚合操作占用过多的系统内存。

2. mongodb的聚合语法

>db.COLLECTION_NAME.aggregate(AGGREGATE_OPERATION)

3. mongodb的聚合示例

集合中的数据如下:

{
_id: ObjectId(7df78ad8902c)
  title: ‘MongoDB Overview‘,
  description: ‘MongoDB is no sql database‘,
  by_user: ‘runoob.com‘,
  url: ‘http://www.runoob.com‘,
  tags: [‘mongodb‘, ‘database‘, ‘NoSQL‘],
  likes: 100
},
{
  _id: ObjectId(7df78ad8902d)
  title: ‘NoSQL Overview‘,
  description: ‘No sql database is very fast‘,
  by_user: ‘runoob.com‘,
  url: ‘http://www.runoob.com‘,
  tags: [‘mongodb‘, ‘database‘, ‘NoSQL‘],
  likes: 10
},
{
  _id: ObjectId(7df78ad8902e)
  title: ‘Neo4j Overview‘,
  description: ‘Neo4j is no sql database‘,
  by_user: ‘Neo4j‘,
  url: ‘http://www.neo4j.com‘,
  tags: [‘neo4j‘, ‘database‘, ‘NoSQL‘],
  likes: 750
}

现在我们通过以上集合计算每个作者所写的文章数,使用aggregate()计算结果如下:

> db.mycol.aggregate([{$group : {_id : "$by_user", num_tutorial : {$sum : 1}}}])
{
  "result" : [
    {
        "_id" : "runoob.com",
        "num_tutorial" : 2
    },
    {
        "_id" : "Neo4j",
        "num_tutorial" : 1
    }
  ],
  "ok" : 1
}
>

以上实例类似sql语句:

select by_user, count(*) from mycol group by by_user

4. mongodb的聚合表达式

表达式 描述  实例
$sum    计算总和。   db.mycol.aggregate([{$group : {_id : "$by_user", num_tutorial : {$sum : "$likes"}}}])
$avg    计算平均值   db.mycol.aggregate([{$group : {_id : "$by_user", num_tutorial : {$avg : "$likes"}}}])
$min    获取集合中所有文档对应值得最小值。   db.mycol.aggregate([{$group : {_id : "$by_user", num_tutorial : {$min : "$likes"}}}])
$max    获取集合中所有文档对应值得最大值。   db.mycol.aggregate([{$group : {_id : "$by_user", num_tutorial : {$max : "$likes"}}}])
$push   在结果文档中插入值到一个数组中。    db.mycol.aggregate([{$group : {_id : "$by_user", url : {$push: "$url"}}}])
$addToSet   在结果文档中插入值到一个数组中,但不创建副本。 db.mycol.aggregate([{$group : {_id : "$by_user", url : {$addToSet : "$url"}}}])
$first  根据资源文档的排序获取第一个文档数据。 db.mycol.aggregate([{$group : {_id : "$by_user", first_url : {$first : "$url"}}}])
$last   根据资源文档的排序获取最后一个文档数据 db.mycol.aggregate([{$group : {_id : "$by_user", last_url : {$last : "$url"}}}])

5. mongodb的管道

管道在Unix和Linux中一般用于将当前命令的输出结果作为下一个命令的参数。

MongoDB的聚合管道将MongoDB文档在一个管道处理完毕后将结果传递给下一个管道处理。管道操作是可以重复的。

表达式:处理输入文档并输出。表达式是无状态的,只能用于计算当前聚合管道的文档,不能处理其它的文档。

这里我们介绍一下聚合框架中常用的几个操作:

常用管道    含义
$project    修改输入文档的结构。可以用来重命名、增加或删除域,也可以用于创建计算结果以及嵌套文档。
$match  用于过滤数据,只输出符合条件的文档。$match使用MongoDB的标准查询操作。
$limit  用来限制MongoDB聚合管道返回的文档数。
$skip   在聚合管道中跳过指定数量的文档,并返回余下的文档。
$unwind 将文档中的某一个数组类型字段拆分成多条,每条包含数组中的一个值。
$group  将集合中的文档分组,可用于统计结果。
$sort   将输入文档排序后输出。
$geoNear    输出接近某一地理位置的有序文档。

6. 使用MongoTemplate操作Aggregation

  Aggregation agg = Aggregation.newAggregation(    
          Aggregation.match(criteria),//条件  
          Aggregation.group("a","b","c","d","e").count().as("f"),//分组字段    
          Aggregation.sort(sort),//排序  
          Aggregation.skip(page.getFirstResult()),//过滤  
          Aggregation.limit(pageSize)//页数  
        );    
  AggregationResults<Test> outputType=mongoTemplate.aggregate(agg,"test",Test.class);    
  List<Test> list=outputType.getMappedResults(); 

shell命令:

  db.getCollection(‘test‘).aggregate( [  
                                        { $match : { score : { $gt : 70, $lte : 90 } } },  
                                        { $group: { _id: null, count: { $sum: 1 } } },  
                                        { $sort:a},  
                                        { $skip:10},  
                                        { $limit:10}  
                                        ] ); 

类似sql:

select a,b,c,count(1) from test where ... group by (...)

mongodb的聚合操作

原文地址:https://blog.51cto.com/14901322/2520825

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。
转载请注明出处: https://daima100.com/6726.html

(0)
上一篇 2023-04-04
下一篇 2023-04-04

相关推荐

  • 优美精准的numpy切片操作技巧

    优美精准的numpy切片操作技巧从事数据科学和机器学习的人都知道,numpy是必备的工具之一。在numpy中,切片(slicing)是经常用到的操作之一。简单的切片是很容易掌握的,但是当涉及到多维数组,或者需要高效地选择元素时,我们就需要更加高效和优美的numpy切片技巧。

    2024-04-17
    106
  • 启动PHP环境时,80端口被占用怎么办?「建议收藏」

    启动PHP环境时,80端口被占用怎么办?「建议收藏」原来正常运行过PHP环境即apache和nginx,后来因为工作需要安装了IIS和Sql Server。今天再启动PHP环境时,提示80端口被占用。我的第一个反应是IIS问题,可是IIS并没有启动;…

    2023-01-27
    152
  • mysql相关知识整理(参考《高性能MySQL》)

    mysql相关知识整理(参考《高性能MySQL》)1.事务的特性 1.原子性:一个事务必须被视为一个不可分割的最小工作单元;事务的操作,要么全部成功,要么全部失败。 2.一致性:数据库总是从一个一致性的状态转换到另一个一致性的状态。 3.隔离性:通…

    2023-03-04
    133
  • 如何使用Anaconda删除虚拟环境

    如何使用Anaconda删除虚拟环境在开发过程中,我们通常需要使用虚拟环境来隔离不同的项目依赖,这样可以避免不同项目之间的依赖冲突。但当不再需要这些虚拟环境时,我们需要将其删除以释放空间。本文将介绍如何使用Anaconda删除虚拟环境。

    2024-05-15
    77
  • MySQL第七课[通俗易懂]

    MySQL第七课[通俗易懂]统计记录条数 SELECT COUNT(*) FROM 表名; SUM():总和 AVG():平均值 MAX():最大值 MIN():最小值 排序: SELECT 字段名 FROM 表名 ORDER

    2022-12-30
    137
  • 使用 Apache Superset 可视化 ClickHouse 数据[通俗易懂]

    使用 Apache Superset 可视化 ClickHouse 数据[通俗易懂]Apache Superset是一个强大的BI工具,它提供了查看和探索数据的方法。它在 ClickHouse 用户中也越来越受欢迎。 我们将介绍安装 Superset 的 2 种方法,然后展示如何从

    2023-04-17
    156
  • Python中实现延时的方法

    Python中实现延时的方法Python作为一种高级编程语言,不仅易学易用,而且其库集丰富,其中就包括延时函数相关的库。在实际开发过程中,经常需要进行计时、等待或暂停,即需要对程序进行延时操作。Python中实现延时的方法有多种,本文将系统介绍延时操作的方法及其应用场景。

    2024-07-11
    46
  • hbase shell查看数据_命令行删除文件夹

    hbase shell查看数据_命令行删除文件夹今天比较开心,只想哈哈~哈哈哈~ 啥也不多说了,直接看示例吧!绝对比我口才好~ 哈哈!Get到了吗?好意思不帮我分享嘛~哈哈~ 转载请注明出处!欢迎关注本人微信公众号【HBase工作笔记】

    2023-02-22
    136

发表回复

您的电子邮箱地址不会被公开。 必填项已用*标注