MongoDB
 sql >> Baza danych >  >> NoSQL >> MongoDB

$push zużył za dużo pamięci i nie może się rozlać na dysk. Limit pamięci:104857600 bajtów

Tak więc, po tak wielu zmaganiach, oto co zrobiłem, aby rozwiązać mój problem. Po pierwsze, zrozumiano, że nie mogę umieścić danych w tablicy bez ich ograniczania. Użyłem więc $limit i $skip , przed zgrupowaniem danych w potoku. (Utrzymuje to również podział na strony dla mojego zapytania). Ale problem polegał na utrzymaniu całkowitej liczby rekordów, ponieważ została utracona z powodu limitu przed grupowaniem. Rozwiązaniem, które wymyśliłem, jest użycie $facet , co pomaga mi w implementacji dwóch potoków w tym samym potoku agregacji.

db.prdfam.aggregate([{
$facet: {
"counts":[
{ '$match': {} },
{ '$lookup': { from: 'pt', localField: 'pfId', foreignField: 'pfId', as: 'pt' } },
{ '$unwind': '$pt' }, { '$match': {} }, 
{ '$lookup': { from: 'prds', localField: 'pt.ptId', foreignField: 'ptId', as: 'prd' } },
{ '$unwind': '$prd' }, { '$match': {} }, 
{ '$lookup': { from: 'del', localField: 'prd.prdId', foreignField: 'prdId', as: 'delivery' } }, 
{ '$unwind': '$delivery' }, { '$match': { 'delivery.currentDelivery': { '$ne': 'OBSOLETE' }, 
'$or': [ { 'prd.prdName': { '$regex': /^.*world.*/i } },
{ 'delivery.rInfo.dataFormat': { '$regex': /^.*world.*/i } },
{ 'delivery.dType': { '$regex': /^.*world.*/i } }, 
{ 'delivery.dId': 'WORLD' }, { 'delivery.UserId': 'WORLD' } ] } }, 
{ '$group': { _id: null, count: { '$sum': 1 } } }
],
"results":[
//same lookup & match conditions as in above element 
{ '$project': { //fields to project } }, 
{ '$sort': { updatedAt: -1 } }, {$skip: 0},{ $limit : 10 },
{ '$group': { _id: null, results: { '$push': '$$ROOT' } } },
{ '$project': { results: 1 } }
]
}
}], 
{ allowDiskUse: true })

Mam nadzieję, że to pomoże innym. Pozdrawiam :)




  1. Redis
  2.   
  3. MongoDB
  4.   
  5. Memcached
  6.   
  7. HBase
  8.   
  9. CouchDB
  1. Wysyłanie zapytań do MongoDB na podstawie identyfikatora Mongo w aplikacji node.js

  2. Konwertuj ObjectID (Mongodb) na String w JavaScript

  3. Konwersja dokumentów BSON do JSON w Javie

  4. Konwertuj tablicę ciągów na tablicę identyfikatorów obiektu

  5. Nieprawidłowa instrukcja przerwania (Node.js)