Pymongo: Durchlaufen aller Dokumente in der Sammlung

Ich bin mit PyMongo und versuchen, zu Durchlaufen (10 Millionen) Dokumente in meine MongoDB collection und einfach extrahieren ein paar Tasten: "name" und "Adresse", dann Ausgang .csv-Datei.

Ich kann nicht herausfinden, die richtige syntax zu tun, die es mit der find().forEach()

Ich versuchte workarounds wie

   cursor = db.myCollection.find({"name": {$regex: REGEX}})

wo REGEX passen würden, alles - und er wurde "Getötet".
Ich habe auch versucht

   cursor = db.myCollection.find({"name": {"$exist": True}})

aber das hat nicht funktioniert entweder.

Irgendwelche Vorschläge?

was ist deiner eigentlichen Abfrage oder das gewünschte Ergebnis? bitte erläutere das ein bisschen besser.
Ich bin nicht sicher, dass Sie versucht haben oder nicht, versuchen Karte reduzieren job, um Ihre Arbeit zu erledigen. Angesichts riesige dataset, es scheint eine bessere option sein. Es ist nur ein Vorschlag.

InformationsquelleAutor mel | 2016-11-30

  1. 4

    Ich kann nicht herausfinden, die richtige syntax zu tun, die es mit der find().forEach()

    cursor.forEach() ist nicht verfügbar für Python, ist es eine JavaScript-Funktion. Sie würde haben, um einen cursor und Durchlaufen Sie es. Sehen PyMongo-Tutorial: Abfrage für mehr als ein Dokument, wo Sie tun können : 

    for document in myCollection.find():
    print(document) # iterate the cursor

    wo REGEX passen würden, alles - und er wurde "Getötet".

    Leider gibt es Mangel an Informationen hier zu Debuggen, warum und was "Getötet" wird. Obwohl, wenn Sie möchten match alles, man kann nur sagen: 

    cursor = db.myCollection.find({"name": {$regex: /.*/}})

    Gegeben, das Feld name enthält string-Werte. Obwohl die Verwendung von $exists zu prüfen, ob das Feld name existiert, wäre besser als die Verwendung von regex.

    Während die Verwendung von $existiert Betreiber in deinem Beispiel oben ist falsch. Ihnen fehlt ein s im $exists. Wieder, wissen wir leider nicht viele Informationen darüber, was 'nicht-Arbeit' bedeutete zum Debuggen weiter.

    Wenn du schreibst das Skript für Python übung, die ich empfehlen würde zu überprüfen:

    Könnten Sie auch Einschreiben in einem kostenlosen online-Kurs an MongoDB Universität für M101P: MongoDB für Python-Entwickler.

    Jedoch, wenn Sie nur versuchen zu erreichen, Ihre Aufgabe, den Export von CSV aus einer Sammlung. Als alternative könnte man nur verwenden MongoDB ist mongoexport. Die hat die Unterstützung für :

    Sehen mongoexport Nutzung für weitere Informationen.

    InformationsquelleAutor Wan Bachtiar

Schreibe einen Kommentar