MongoDB 高级查询 aggergate 聚合管道

使用聚合管道可以对集合的文档进行变换和组合。

MongoDB 中使用 db.COLLECTION_NAME.aggregate([{<stage>},...])方法来构建和使用聚合管道。

实际项目中，主要用于表关联查询、数据的统计。

管道操作符

$project：增加、删除、重命名字段
$match：条件匹配。只满足条件的文档才能进入下一阶段。
$limit：限制结果的数量。
$skip：跳过文档的数量。
$sort：条件排序
$group：条件组合结果。
$lookup：用于引入其它集合的数据
$unwind: 可以将数组中的每一个值拆分为单独的文档。

数据模拟

> db.order_item.find()
{ "_id" : ObjectId("5fc7103218fa5641d31317f9"), "order_id" : "1", "title" : "商品1", "price" : "50", "num" : 1 }
{ "_id" : ObjectId("5fc7104318fa5641d31317fa"), "order_id" : "1", "title" : "商品键盘", "price" : "100", "num" : 1 }
{ "_id" : ObjectId("5fc7106018fa5641d31317fb"), "order_id" : "2", "title" : "牛奶", "price" : "50", "num" : 1 }
{ "_id" : ObjectId("5fc7107718fa5641d31317fc"), "order_id" : "2", "title" : "酸奶", "price" : "50", "num" : 1 }
{ "_id" : ObjectId("5fc7108d18fa5641d31317fd"), "order_id" : "3", "title" : "零食1", "price" : "20", "num" : 1 }
{ "_id" : ObjectId("5fc710a718fa5641d31317fe"), "order_id" : "3", "title" : "方便面", "price" : "50", "num" : 5 }
> db.order.find()
{ "_id" : ObjectId("5fc71569212c818aed7b30ca"), "order_id" : "1", "trade_no" : "111", "all_price" : 100 } 
{ "_id" : ObjectId("5fc71578212c818aed7b30cb"), "order_id" : "1", "trade_no" : "112", "all_price" : 108 } 
{ "_id" : ObjectId("5fc7158a212c818aed7b30cc"), "order_id" : "2", "trade_no" : "221", "all_price" : 200 } 
{ "_id" : ObjectId("5fc71594212c818aed7b30cd"), "order_id" : "2", "trade_no" : "222", "all_price" : 80 } 
{ "_id" : ObjectId("5fc715a4212c818aed7b30ce"), "order_id" : "3", "trade_no" : "332", "all_price" : 50 } 
{ "_id" : ObjectId("5fc715ac212c818aed7b30cf"), "order_id" : "3", "trade_no" : "333", "all_price" : 60 }

$project

修改文档的结构，可以用来重命名、增加或删除文档中的字段。

查找order 返回文档中order_id和all_price 字段,不显示_id 字段

db.order.aggregate([
    {
        $project:{order_id:1,all_price:1,_id:0}
    }
])

显示的字段设置为1，_id 默认显示，如果不想显示_id, 设置为0即可

$match

用于过滤文档，用法类似于find() 方法中的参数

查找order里order_id和all_price 字段并且 all_price大于等于 80 的数据

db.order.aggregate([
    {
        $project:{order_id:1,all_price:1}
    },
    {
        $match:{"all_price":{$gte:80}}
    }
])

$group

将集合中的文档进行分组，可用于统计结果。

统计每个订单的订单数量，按照订单号分组

db.order_item.aggregate([{
    {
        $group:{
            _id:"$order_id",
            total:{$sum:"$num"}
        }
    }
])
// ->
{ "_id" : "2", "total" : 2 }
{ "_id" : "3", "total" : 6 }
{ "_id" : "1", "total" : 2 }

`$limit` 和 `$skip`

$limit 和 $skip 用于限制和跳过相应的文档，与find 中 limit 与skip 类似。

取出order 里面的第三条和第四条数据

db.order.aggregate([{$skip:2},{$limit:2}])
// ->
{ "_id" : ObjectId("5fc7158a212c818aed7b30cc"), "order_id" : "2", "trade_no" : "221", "all_price" : 200 }
{ "_id" : ObjectId("5fc71594212c818aed7b30cd"), "order_id" : "2", "trade_no" : "222", "all_price" : 80 }

$sort

$sort 用于对数据进行排序，1代表升序，-1代表降序。

order 里all_price 字段进行升序排列

db.order.aggregate([{$sort:{all_price:1}}])
// ->
{ "_id" : ObjectId("5fc715a4212c818aed7b30ce"), "order_id" : "3", "trade_no" : "332", "all_price" : 50 }
{ "_id" : ObjectId("5fc715ac212c818aed7b30cf"), "order_id" : "3", "trade_no" : "333", "all_price" : 60 }
{ "_id" : ObjectId("5fc71594212c818aed7b30cd"), "order_id" : "2", "trade_no" : "222", "all_price" : 80 }
{ "_id" : ObjectId("5fc71569212c818aed7b30ca"), "order_id" : "1", "trade_no" : "111", "all_price" : 100 }
{ "_id" : ObjectId("5fc71578212c818aed7b30cb"), "order_id" : "1", "trade_no" : "112", "all_price" : 108 }
{ "_id" : ObjectId("5fc7158a212c818aed7b30cc"), "order_id" : "2", "trade_no" : "221", "all_price" : 200 }

$lookup

$lookup :用于表关联查询

order 关联 order_item 查询，放入 items 中

db.order.aggregate([
    {
        $lookup:{
            from:"order_item",
            localField:"order_id",
            foreignField:"order_id",
            as:"items"
        }
    }
])

from: 数据库中指定要执行连接的集合。
localField：指定当前文档的字段。 $lookup从from集合的文档中对localField和foreignField执行相等匹配。如果当前文档不包含localField，则$lookup会将字段视为具有null的值以进行匹配。
foreignField：指定from集合中文档的字段。$lookup从from集合的文档中对localField和foreignField执行相等匹配。如果from集合中的文档不包含foreignField，则$lookup会将值视为null以便进行匹配。
as：指定生成新数组字段的名称。新的数组字段包含来自from集合的匹配文档。

// 查询出来的数据
{
    "_id": ObjectId("5fc71569212c818aed7b30ca"),
    "order_id": "1",
    "trade_no": "111",
    "all_price": 100,
    "items": [{
        "_id": ObjectId("5fc7103218fa5641d31317f9"),
        "order_id": "1",
        "title": "商品1",
        "price": "50",
        "num": 1
    }, {
        "_id": ObjectId("5fc7104318fa5641d31317fa"),
        "order_id": "1",
        "title": "商品键盘",
        "price": "100",
        "num": 1
    }]
} 
{
    "_id": ObjectId("5fc71578212c818aed7b30cb"),
    "order_id": "1",
    "trade_no": "112",
    "all_price": 108,
    "items": [{
        "_id": ObjectId("5fc7103218fa5641d31317f9"),
        "order_id": "1",
        "title": "商品1",
        "price": "50",
        "num": 1
    }, {
        "_id": ObjectId("5fc7104318fa5641d31317fa"),
        "order_id": "1",
        "title": "商品键盘",
        "price": "100",
        "num": 1
    }]
}
{
    "_id": ObjectId("5fc7158a212c818aed7b30cc"),
    "order_id": "2",
    "trade_no": "221",
    "all_price": 200,
    "items": [{
        "_id": ObjectId("5fc7106018fa5641d31317fb"),
        "order_id": "2",
        "title": "牛奶",
        "price": "50",
        "num": 1
    }, {
        "_id": ObjectId("5fc7107718fa5641d31317fc"),
        "order_id": "2",
        "title": "酸奶",
        "price": "50",
        "num": 1
    }]
}
{
    "_id": ObjectId("5fc71594212c818aed7b30cd"),
    "order_id": "2",
    "trade_no": "222",
    "all_price": 80,
    "items": [{
        "_id": ObjectId("5fc7106018fa5641d31317fb"),
        "order_id": "2",
        "title": "牛奶",
        "price": "50",
        "num": 1
    }, {
        "_id": O
        bjectId("5fc7107718fa5641d31317fc"),
        "order_id": "2",
        "title": "酸奶",
        "price": "50",
        "num": 1
    }]
}
{
    "_id": ObjectId("5fc715a4212c818aed7b30ce"),
    "order_id": "3",
    "trade_no": "332",
    "all_price": 50,
    "items": [{
        "_id": ObjectId("5fc7108d18fa5641d31317fd"),
        "order_id": "3",
        "title": "零食1",
        "price": "20",
        "num": 1
    }, {
        "_id": ObjectId("5fc710a718fa5641d31317fe"),
        "order_id": "3",
        "title": "方便面",
        "price": "50",
        "num": 5
    }]
}
{
    "_id": ObjectId("5fc715ac212c818aed7b30cf"),
    "order_id": "3",
    "trade_no": "333",
    "all_price": 60,
    "items": [{
        "_id": ObjectId("5fc7108d18fa5641d31317fd"),
        "order_id": "3",
        "title": "零食1",
        "price": "20",
        "num": 1
    }, {
        "_id": ObjectId("5fc710a718fa5641d31317fe"),
        "order_id": "3",
        "title": "方便面",
        "price": "50",
        "num": 5
    }]
}

$unwind

将数组中的每一个值拆分为单独的文档。

db.order.aggregate([
    {
        $lookup:{
            from:"order_item",
            localField:"order_id",
            foreignField:"order_id",
            as:"items"
        }
    },
    {
        $unwind:"$items"
    }
])

// 数据
{
    "_id": ObjectId("606ffe6c9a148932b00e6fc4"),
    "order_id": "1",
    "trade_no": "111",
    "all_price": 100,
    "items": {
        "_id": ObjectId("606ffe109a148932b00e6fbe"),
        "order_id": "1",
        "title": "商品1",
        "price": "50",
        "num": 1
    }
} {
    "_id": ObjectId("606ffe6c9a148932b00e6fc4"),
    "order_id": "1",
    "trade_no": "111",
    "all_price": 100,
    "items": {
        "_id": ObjectId("606ffe109a148932b00e6fbf"),
        "order_id": "1",
        "title": "商品键盘",
        "price": "100",
        "num": 1
    }
} {
    "_id": ObjectId("606ffe6c9a148932b00e6fc5"),
    "order_id": "1",
    "trade_no": "112",
    "all_price": 108,
    "items": {
        "_id": ObjectId("606ffe109a148932b00e6fbe"),
        "order_id": "1",
        "title": "商品1",
        "price": "50",
        "num": 1
    }
} {
    "_id": ObjectId("606ffe6c9a148932b00e6fc5"),
    "order_id": "1",
    "trade_no": "112",
    "all_price": 108,
    "items": {
        "_id": ObjectId("606ffe109a148932b00e6fbf"),
        "order_id": "1",
        "title": "商品键盘",
        "price": "100",
        "num": 1
    }
} {
    "_id": ObjectId("606ffe6c9a148932b00e6fc6"),
    "order_id": "2",
    "trade_no": "221",
    "all_price": 200,
    "items": {
        "_id": ObjectId("606ffe109a148932b00e6fc0"),
        "order_id": "2",
        "title": "牛奶",
        "price": "50",
        "num": 1
    }
} {
    "_id": ObjectId("606ffe6c9a148932b00e6fc6"),
    "order_id": "2",
    "trade_no": "221",
    "all_price": 200,
    "items": {
        "_id": ObjectId("606ffe109a148932b00e6fc1"),
        "order_id": "2",
        "title": "酸奶",
        "price": "50",
        "num": 1
    }
} {
    "_id": ObjectId("606ffe6c9a148932b00e6fc7"),
    "order_id": "2",
    "trade_no": "222",
    "all_price": 80,
    "items": {
        "_id": ObjectId("606ffe109a148932b00e6fc0"),
        "order_id": "2",
        "title": "牛奶",
        "price": "50",
        "num": 1
    }
} {
    "_id": ObjectId("606ffe6c9a148932b00e6fc7"),
    "order_id": "2",
    "trade_no": "222",
    "all_price": 80,
    "items": {
        "_id": ObjectId("606ffe109a148932b00e6fc1"),
        "order_id": "2",
        "title": "酸奶",
        "price": "50",
        "num": 1
    }
} {
    "_id": ObjectId("606ffe6c9a148932b00e6fc8"),
    "order_id": "3",
    "trade_no": "332",
    "all_price": 50,
    "items": {
        "_id": ObjectId("606ffe109a148932b00e6fc2"),
        "order_id": "3",
        "title": "零食1",
        "price": "20",
        "num": 1
    }
} {
    "_id": ObjectId("606ffe6c9a148932b00e6fc8"),
    "order_id": "3",
    "trade_no": "332",
    "all_price": 50,
    "items": {
        "_id": ObjectId("606ffe109a148932b00e6fc3"),
        "order_id": "3",
        "title": "方便面",
        "price": "50",
        "num": 5
    }
} {
    "_id": ObjectId("606ffe6c9a148932b00e6fc9"),
    "order_id": "3",
    "trade_no": "333",
    "all_price": 60,
    "items": {
        "_id": ObjectId("606ffe109a148932b00e6fc2"),
        "order_id": "3",
        "title": "零食1",
        "price": "20",
        "num": 1
    }
} {
    "_id": ObjectId("606ffe6c9a148932b00e6fc9"),
    "order_id": "3",
    "trade_no": "333",
    "all_price": 60,
    "items": {
        "_id": ObjectId("606ffe109a148932b00e6fc3"),
        "order_id": "3",
        "title": "方便面",
        "price": "50",
        "num": 5
    }
}

最后编辑于：2021.04.09 15:23:52

人面猴
序言：七十年代末，一起剥皮案震惊了整个滨河市，随后出现的几起案子，更是在滨河造成了极大的恐慌，老刑警刘岩，带你破解...
沈念sama阅读 206,126评论 6赞 481
死咒
序言：滨河连续发生了三起死亡事件，死亡现场离奇诡异，居然都是意外死亡，警方通过查阅死者的电脑和手机，发现死者居然都...
沈念sama阅读 88,254评论 2赞 382
救了他两次的神仙让他今天三更去死
文/潘晓璐我一进店门，熙熙楼的掌柜王于贵愁眉苦脸地迎上来，“玉大人，你说我怎么就摊上这事。” “怎么了？”我有些...
开封第一讲书人阅读 152,445评论 0赞 341
道士缉凶录：失踪的卖姜人
文/不坏的土叔我叫张陵，是天一观的道长。经常有香客问我，道长，这世上最难降的妖魔是什么？我笑而不...
开封第一讲书人阅读 55,185评论 1赞 278
港岛之恋（遗憾婚礼）
正文为了忘掉前任，我火速办了婚礼，结果婚礼上，老公的妹妹穿的比我还像新娘。我一直安慰自己，他们只是感情好，可当我...
茶点故事阅读 64,178评论 5赞 371
恶毒庶女顶嫁案：这布局不是一般人想出来的
文/花漫我一把揭开白布。她就那样静静地躺着，像睡着了一般。火红的嫁衣衬着肌肤如雪。梳的纹丝不乱的头发上，一...
开封第一讲书人阅读 48,970评论 1赞 284
城市分裂传说
那天，我揣着相机与录音，去河边找鬼。笑死，一个胖子当着我的面吹牛，可吹牛的内容都是我干的。我是一名探鬼主播，决...
沈念sama阅读 38,276评论 3赞 399
双鸳鸯连环套：你想象不到人心有多黑
文/苍兰香墨我猛地睁开眼，长吁一口气：“原来是场噩梦啊……” “哼！你这毒妇竟也来了？” 一声冷哼从身侧响起，我...
开封第一讲书人阅读 36,927评论 0赞 259
万荣杀人案实录
序言：老挝万荣一对情侣失踪，失踪者是张志新（化名）和其女友刘颖，没想到半个月后，有当地人在树林里发现了一具尸体，经...
沈念sama阅读 43,400评论 1赞 300
护林员之死
正文独居荒郊野岭守林人离奇死亡，尸身上长有42处带血的脓包…… 初始之章·张勋以下内容为张勋视角年9月15日...
茶点故事阅读 35,883评论 2赞 323
白月光启示录
正文我和宋清朗相恋三年，在试婚纱的时候发现自己被绿了。大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
茶点故事阅读 37,997评论 1赞 333
活死人
序言：一个原本活蹦乱跳的男人离奇死亡，死状恐怖，灵堂内的尸体忽然破棺而出，到底是诈尸还是另有隐情，我是刑警宁泽，带...
沈念sama阅读 33,646评论 4赞 322
日本核电站爆炸内幕
正文年R本政府宣布，位于F岛的核电站，受9级特大地震影响，放射性物质发生泄漏。R本人自食恶果不足惜，却给世界环境...
茶点故事阅读 39,213评论 3赞 307
男人毒药：我在死后第九天来索命
文/蒙蒙一、第九天我趴在偏房一处隐蔽的房顶上张望。院中可真热闹，春花似锦、人声如沸。这庄子的主人今日做“春日...
开封第一讲书人阅读 30,204评论 0赞 19
一桩弑父案，背后竟有这般阴谋
文/苍兰香墨我抬头看了看天上的太阳。三九已至，却和暖如春，着一层夹袄步出监牢的瞬间，已是汗流浃背。一阵脚步声响...
开封第一讲书人阅读 31,423评论 1赞 260
情欲美人皮
我被黑心中介骗来泰国打工，没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留，地道东北人。一个月前我还...
沈念sama阅读 45,423评论 2赞 352
代替公主和亲
正文我出身青楼，却偏偏与公主长得像，于是被迫代替她去往敌国和亲。传闻我的和亲对象是个残疾皇子，可洞房花烛夜当晚...
茶点故事阅读 42,722评论 2赞 345