Résumé TLDR
Dans les versions modernes de MongoDB, vous pouvez forcer cela avec $slicejuste le résultat d'agrégation de base. Pour des résultats «volumineux», exécutez des requêtes parallèles à la place pour chaque regroupement (une liste de démonstration se trouve à la fin de la réponse), ou attendez que SERVER-9377 soit résolu, ce qui permettrait une «limite» au nombre d'éléments $pushà un tableau.
db.books.aggregate([
{ "$group": {
"_id": {
"addr": "$addr",
"book": "$book"
},
"bookCount": { "$sum": 1 }
}},
{ "$group": {
"_id": "$_id.addr",
"books": {
"$push": {
"book": "$_id.book",
"count": "$bookCount"
},
},
"count": { "$sum": "$bookCount" }
}},
{ "$sort": { "count": -1 } },
{ "$limit": 2 },
{ "$project": {
"books": { "$slice": [ "$books", 2 ] },
"count": 1
}}
])
Aperçu de MongoDB 3.6
Toujours pas de résolution de SERVER-9377 , mais dans cette version $lookupautorise une nouvelle option "non corrélée" qui prend une "pipeline"expression comme argument au lieu des options "localFields"et "foreignFields". Cela permet alors une "auto-jointure" avec une autre expression de pipeline, dans laquelle nous pouvons appliquer $limitafin de renvoyer les résultats "top-n".
db.books.aggregate([
{ "$group": {
"_id": "$addr",
"count": { "$sum": 1 }
}},
{ "$sort": { "count": -1 } },
{ "$limit": 2 },
{ "$lookup": {
"from": "books",
"let": {
"addr": "$_id"
},
"pipeline": [
{ "$match": {
"$expr": { "$eq": [ "$addr", "$$addr"] }
}},
{ "$group": {
"_id": "$book",
"count": { "$sum": 1 }
}},
{ "$sort": { "count": -1 } },
{ "$limit": 2 }
],
"as": "books"
}}
])
L'autre ajout ici est bien sûr la possibilité d'interpoler la variable en $exprutilisant $matchpour sélectionner les éléments correspondants dans la "jointure", mais le principe général est un "pipeline dans un pipeline" où le contenu interne peut être filtré par des correspondances du parent . Puisqu'ils sont tous deux des «pipelines», nous pouvons $limitchaque résultat séparément.
Ce serait la meilleure option suivante pour exécuter des requêtes parallèles, et serait en fait préférable si le $matchétait autorisé et capable d'utiliser un index dans le traitement du "sous-pipeline". Donc, qui n'utilise pas la «limite à $push» comme le demande le problème référencé, il fournit en fait quelque chose qui devrait mieux fonctionner.
Contenu original
Vous semblez avoir trébuché sur le problème "N" principal. D'une certaine manière, votre problème est assez facile à résoudre, mais pas avec la limitation exacte que vous demandez:
db.books.aggregate([
{ "$group": {
"_id": {
"addr": "$addr",
"book": "$book"
},
"bookCount": { "$sum": 1 }
}},
{ "$group": {
"_id": "$_id.addr",
"books": {
"$push": {
"book": "$_id.book",
"count": "$bookCount"
},
},
"count": { "$sum": "$bookCount" }
}},
{ "$sort": { "count": -1 } },
{ "$limit": 2 }
])
Maintenant, cela vous donnera un résultat comme celui-ci:
{
"result" : [
{
"_id" : "address1",
"books" : [
{
"book" : "book4",
"count" : 1
},
{
"book" : "book5",
"count" : 1
},
{
"book" : "book1",
"count" : 3
}
],
"count" : 5
},
{
"_id" : "address2",
"books" : [
{
"book" : "book5",
"count" : 1
},
{
"book" : "book1",
"count" : 2
}
],
"count" : 3
}
],
"ok" : 1
}
Donc, cela diffère de ce que vous demandez en ce que, bien que nous obtenions les meilleurs résultats pour les valeurs d'adresse, la sélection de «livres» sous-jacente n'est pas limitée à une quantité requise de résultats.
Cela s'avère très difficile à faire, mais cela peut être fait même si la complexité augmente simplement avec le nombre d'éléments que vous devez faire correspondre. Pour faire simple, nous pouvons garder cela à 2 matchs au maximum:
db.books.aggregate([
{ "$group": {
"_id": {
"addr": "$addr",
"book": "$book"
},
"bookCount": { "$sum": 1 }
}},
{ "$group": {
"_id": "$_id.addr",
"books": {
"$push": {
"book": "$_id.book",
"count": "$bookCount"
},
},
"count": { "$sum": "$bookCount" }
}},
{ "$sort": { "count": -1 } },
{ "$limit": 2 },
{ "$unwind": "$books" },
{ "$sort": { "count": 1, "books.count": -1 } },
{ "$group": {
"_id": "$_id",
"books": { "$push": "$books" },
"count": { "$first": "$count" }
}},
{ "$project": {
"_id": {
"_id": "$_id",
"books": "$books",
"count": "$count"
},
"newBooks": "$books"
}},
{ "$unwind": "$newBooks" },
{ "$group": {
"_id": "$_id",
"num1": { "$first": "$newBooks" }
}},
{ "$project": {
"_id": "$_id",
"newBooks": "$_id.books",
"num1": 1
}},
{ "$unwind": "$newBooks" },
{ "$project": {
"_id": "$_id",
"num1": 1,
"newBooks": 1,
"seen": { "$eq": [
"$num1",
"$newBooks"
]}
}},
{ "$match": { "seen": false } },
{ "$group":{
"_id": "$_id._id",
"num1": { "$first": "$num1" },
"num2": { "$first": "$newBooks" },
"count": { "$first": "$_id.count" }
}},
{ "$project": {
"num1": 1,
"num2": 1,
"count": 1,
"type": { "$cond": [ 1, [true,false],0 ] }
}},
{ "$unwind": "$type" },
{ "$project": {
"books": { "$cond": [
"$type",
"$num1",
"$num2"
]},
"count": 1
}},
{ "$group": {
"_id": "$_id",
"count": { "$first": "$count" },
"books": { "$push": "$books" }
}},
{ "$sort": { "count": -1 } }
])
Cela vous donnera donc les 2 premiers "livres" des deux premières entrées "d'adresse".
Mais pour mon argent, restez avec le premier formulaire et ensuite simplement "découpez" les éléments du tableau qui sont retournés pour prendre les premiers "N" éléments.
Code de démonstration
Le code de démonstration est approprié pour une utilisation avec les versions LTS actuelles de NodeJS des versions v8.x et v10.x. C'est principalement pour la async/awaitsyntaxe, mais il n'y a rien de vraiment dans le flux général qui ait une telle restriction, et s'adapte avec peu de modifications aux promesses simples ou même à l'implémentation de rappel.
index.js
const { MongoClient } = require('mongodb');
const fs = require('mz/fs');
const uri = 'mongodb://localhost:27017';
const log = data => console.log(JSON.stringify(data, undefined, 2));
(async function() {
try {
const client = await MongoClient.connect(uri);
const db = client.db('bookDemo');
const books = db.collection('books');
let { version } = await db.command({ buildInfo: 1 });
version = parseFloat(version.match(new RegExp(/(?:(?!-).)*/))[0]);
// Clear and load books
await books.deleteMany({});
await books.insertMany(
(await fs.readFile('books.json'))
.toString()
.replace(/\n$/,"")
.split("\n")
.map(JSON.parse)
);
if ( version >= 3.6 ) {
// Non-correlated pipeline with limits
let result = await books.aggregate([
{ "$group": {
"_id": "$addr",
"count": { "$sum": 1 }
}},
{ "$sort": { "count": -1 } },
{ "$limit": 2 },
{ "$lookup": {
"from": "books",
"as": "books",
"let": { "addr": "$_id" },
"pipeline": [
{ "$match": {
"$expr": { "$eq": [ "$addr", "$$addr" ] }
}},
{ "$group": {
"_id": "$book",
"count": { "$sum": 1 },
}},
{ "$sort": { "count": -1 } },
{ "$limit": 2 }
]
}}
]).toArray();
log({ result });
}
// Serial result procesing with parallel fetch
// First get top addr items
let topaddr = await books.aggregate([
{ "$group": {
"_id": "$addr",
"count": { "$sum": 1 }
}},
{ "$sort": { "count": -1 } },
{ "$limit": 2 }
]).toArray();
// Run parallel top books for each addr
let topbooks = await Promise.all(
topaddr.map(({ _id: addr }) =>
books.aggregate([
{ "$match": { addr } },
{ "$group": {
"_id": "$book",
"count": { "$sum": 1 }
}},
{ "$sort": { "count": -1 } },
{ "$limit": 2 }
]).toArray()
)
);
// Merge output
topaddr = topaddr.map((d,i) => ({ ...d, books: topbooks[i] }));
log({ topaddr });
client.close();
} catch(e) {
console.error(e)
} finally {
process.exit()
}
})()
books.json
{ "addr": "address1", "book": "book1" }
{ "addr": "address2", "book": "book1" }
{ "addr": "address1", "book": "book5" }
{ "addr": "address3", "book": "book9" }
{ "addr": "address2", "book": "book5" }
{ "addr": "address2", "book": "book1" }
{ "addr": "address1", "book": "book1" }
{ "addr": "address15", "book": "book1" }
{ "addr": "address9", "book": "book99" }
{ "addr": "address90", "book": "book33" }
{ "addr": "address4", "book": "book3" }
{ "addr": "address5", "book": "book1" }
{ "addr": "address77", "book": "book11" }
{ "addr": "address1", "book": "book1" }
La requête ci-dessous fournira exactement le même résultat que celui donné dans la réponse souhaitée:
La réponse ressemblera à ci-dessous:
la source