Vergleicht zwei sortierte Listen in linux, die Auflistung der einmaligen und in der zweiten Datei

Ich habe 2 Dateien mit einer Liste von zahlen (Telefonnummern).

Ich bin auf der Suche nach einer Methode, die Auflistung der zahlen in der zweiten Datei nicht vorhanden ist in der ersten Datei.

Habe ich versucht, die verschiedenen Methoden, mit:

comm (getting some weird sorting errors)
fgrep -v -x -f second-file.txt first-file.txt (unsure of the result, there should be more)
  • Haben Sie überprüft diese Antwort: stackoverflow.com/a/1617326/15165 ? BTW: bevor etwas zu tun, stellen Sie sicher, Sie haben alle die trailing-Linien und zusätzliche Leerzeichen entfernt. Dies könnte der Grund, Sie haben nicht alle von Ihnen gefunden...
InformationsquelleAutor mvrasmussen | 2012-06-19
  1. 61
    grep -Fxv -f first-file.txt second-file.txt

    Sieht im Grunde für alle Linien in second-file.txt die nicht übereinstimmen jede Zeile in first-file.txt. Möglicherweise langsam, wenn die Dateien sehr groß sind.

    Auch, wenn Sie die Dateien Sortieren (Benutzen Sie sort -n wenn Sie numerisch sind), dann comm sollte auch gearbeitet haben. Welche Fehler gibt es? Versuchen Sie dies:

    comm -23 second-file-sorted.txt first-file-sorted.txt
    • Scheint den trick tun, Dauerte nur ein paar Sekunden, mit über 500000 Zeilen in den beiden Dateien, kombiniert
    • Cool, 500k sollten in Ordnung sein, auf modernen Maschinen. Aber ich hätte nicht gedacht, es wäre, DASS Sie so schnell..! Hab die comm Sache arbeiten?
    • Achtung, man kann nicht mit sort -n mit comm, siehe mein test
    • Die grep-Lösung funktioniert nur in dem Fall, dass second-file.txt ist nicht leer.
    InformationsquelleAutor Hari Menon
  2. 23

    Müssen Sie comm:

    comm -13 first.txt second.txt

    wird die Arbeit machen.

    ps. Reihenfolge der ersten und zweiten Datei in der Befehlszeile Angelegenheiten.

    außerdem müssen Sie möglicherweise Dateien Sortieren vor:

    comm -13 <(sort first.txt) <(sort second.txt)

    falls die Dateien sind numerische hinzufügen -n option sort.

    • Dass die Ergebnisse in: comm: Datei 2 ist nicht in sortierter Reihenfolge comm: Datei 1 ist nicht sortiert, Und eine Liste mit genau die gleiche Anzahl von Zeilen als Datei2
    • so können Sie versuchen, Sie zu Sortieren, bevor. ich habe nur Hinzugefügt Variante mit comm + sort.
    • Beachten Sie, dass die Sortierung der Dateien numerisch kann nicht funktionieren, da comm erwartet, dass Sie lexikographisch sortiert werden.
    InformationsquelleAutor rush
  3. 7

    Sollte diese Arbeit

    comm -13 <(sort file1) <(sort file2)

    Scheint es eine Art -n (numeric) funktionieren nicht, comm, die verwendet Sortierung (alphanumerisch) intern

    f1.txt

    1
2
21
50

    f2.txt

    1
3
21
50

    21 sollte in der Dritten Spalte

    #WRONG
$ comm <(sort -n f1.txt) <(sort -n f2.txt)   
                1
2
21
        3
        21
                50

#OK
$ comm <(sort f1.txt) <(sort f2.txt)
                1
2
                21
        3
                50
    InformationsquelleAutor Nahuel Fouilleul
  4. 1
    cat f1.txt f2.txt | sort |uniq > file3
    • Leider bietet die einzigartige Liste aller Zeilen in beiden Dateien, und der Anforderer sucht nur verschiedene Zeilen aus einer Datei 2.
    InformationsquelleAutor tom
Schreibe einen Kommentar