Suchen und ersetzen Sie Text in einer 47 GB großen Datei

Habe ich zu tun, einige suchen-und-ersetzen-Aufgaben auf eine ziemlich große Datei , etwa 47 GB groß .

Weiß jemand, wie dies zu tun ? Ich habe versucht, mit Dienstleistungen wie TextCrawler , EditpadLite und mehr, aber nichts unterstützt diese große Datei .

Ich gehe davon aus, dass dieses erfolgt über die Kommandozeile .

Haben Sie eine Idee, wie dies erreicht werden kann ?

InformationsquelleAutor der Frage Shrayas | 2011-08-05

  1. 27

    Sed (stream-editor zum filtern und transformieren von text) ist dein Freund. 

    sed -i 's/old text/new text/g' file

    Sed führt text-Transformationen in einem Arbeitsgang.

    InformationsquelleAutor der Antwort Ryan

  2. 28

    Benutze ich FURZ - Suchen Und Ersetzen von Text von Lionello Lunesu.

    Es funktioniert sehr gut auf Windows Sieben x64.

    Finden Sie und ersetzen Sie den text mit diesem Befehl:

    fart -c big_filename.txt "find_this_text" "replace_to_this"

    InformationsquelleAutor der Antwort JorgeKlemm

  3. 5

    Unter Unix oder Mac:

    sed 's/old_string in/newstring/g' oldfile.txt > newfile.txt

    schnell und einfach...

    InformationsquelleAutor der Antwort Ignacio Carvajal

  4. 0

    Wenn Sie mit einem Unix-ähnlichen system können Sie dann cat | sed zu tun

    cat hosted_domains.txt | sed s/com/net/g

    Beispiel ersetzt com mit Netto in eine Liste von domain-Namen, und dann können Sie leiten Sie die Ausgabe in eine Datei.

    InformationsquelleAutor der Antwort Devraj

  5. 0

    Für mich keines der tools die hier vorgeschlagen wird, gut funktionieren. Textcrawler aß alle meine computer ' s memory, die SED hat überhaupt nicht funktioniert, Editpad, beschwert Speicher...

    Die Lösung: erstellen Sie Ihre eigenen Skript in python, perl oder auch C++.

    Oder verwenden Sie das Werkzeug, PowerGrep, das ist die einfachste und Schnellste option.

    Ich habe nicht versucht, Furz, es ist nur die Befehlszeile und vielleicht auch nicht sehr freundlich.

    Einige hex-editor wie Ultraedit auch gut funktionieren.

    InformationsquelleAutor der Antwort skan

  6. -1

    Ich verwendet

    sed 's/[nN]//g' oldfile.fasta > newfile.fasta

    ersetzen Sie alle Instanzen von n in meine 7Gb Datei.

    Wenn ich die weggelassen > newfile.fasta Aspekt es dauerte eine Ewigkeit, wie es gescrollt, bis der Bildschirm zeigt mir jede Zeile der Datei.

    Mit der > newfile es lief in einer Angelegenheit von Sekunden, auf einem ubuntu-server

    InformationsquelleAutor der Antwort Julian

Schreibe einen Kommentar