Powershell - Wie extrahiere ich die erste Zeile von allen text-Dateien in einem Verzeichnis in einer einzigen Ausgabe-Datei?

Ich habe ein Verzeichnis mit über 10'000 text-Dateien unterschiedlicher Länge. Alle über 1GB groß.

Muss ich extrahieren Sie die erste Zeile jeder Datei und legen Sie es in eine neue text-Datei im gleichen Verzeichnis.

Ich habe versucht, die üblichen MS-DOS-batch-Datei-Methode, und es kracht durch die Dateien zu groß.

Gibt es eine Möglichkeit, dies zu tun, in der Powershell mit Streamreader?

  • Eine Kombination von Get-Content und Out-File cmdlets gelingen wird, google diese.
  • Vielen Dank für Ihre... "Hilfreiche" Ratschläge. Tatsächlich Get-Content lädt den gesamten Inhalt einer Datei in den Speicher, bevor Sie etwas tut mit ihm. Ich habe tatsächlich versucht, mit es für große Dateien vor und werden auf einer 1GB-Datei zugewiesen 8GB RAM, verwendet es alle, dann begann die Auslagerung auf den Datenträger für über 8 Stunden, bevor es eine Zeile gezählt. Nicht wirklich ideal für einen job, muss wiederholen 10'000 mal. "Google es" ist nicht wirklich die Art von Beratung, ich bin auf der Suche nach hier.
InformationsquelleAutor Ten98 | 2014-06-24
  1. 5

    In der Reihenfolge zu Lesen, nur eine Zeile, können Sie auch verwenden :

    $file = new-object System.IO.StreamReader($filename)
$file.ReadLine()
$file.close()

    Mit OutVariable Sie können schreiben Sie es in einer Zeile :

    $text = (new-object System.IO.StreamReader($filename) -OutVariable $file).ReadLine();$file.Close()
    InformationsquelleAutor JPBlanc
  2. 5

    BEARBEITEN: natürlich gibt es in einer integrierten Art und Weise:

    $firstLine = Get-Content -Path $fileName -TotalCount 1

    [Ack Raf's Kommentar]

    Original:

    Ich würde vorschlagen, Blick auf - Datei.ReadLines: diese Methode liest den Inhalt der Datei faul – nur das Lesen von Inhalten mit jeder iteration über die zurückgegebenen enumerator.

    Ich bin mir nicht sicher, ob Select-Object -first 1 wird pro-aktiv Stopp der pipeline nach einer Zeile, wenn es dann funktioniert, das ist der einfachste Weg, um die erste Zeile:

    $firstLine = [IO.File]::ReadLines($filename, [text.encoding]::UTF8) | Select-Object -first 1

    Sonst so etwas wie:

    $lines = [IO.File]::ReadLines($filename, [text.encoding]::UTF8); # adjust to correct encoding
$lineEnum = $lines.GetEncumerator();
if ($lineEnum.MoveNext()) {
  $firstLine = $lineEnum.Current;
} else {
  # No lines in file
}

    NB. dies meint zumindest PowerShell V3 zu verwenden .NET V4.

    • Danke! Als meine Dateien über 1 GB, und "Get-Content" lädt die gesamte Datei in den Speicher, bevor Sie versuchen, "get", "content", ich kann nicht mit dem top-Vorschlag. Allerdings ist Ihr Dritter Vorschlag funktioniert perfekt! 🙂
    • Die top-Vorschlag wird funktionieren. Testen Sie es gegen eine 1 GB-Datei (mit der -TotalCount-parameter) und sehen, ob es nicht sofort wieder die erste Zeile.
    InformationsquelleAutor
  3. 2

    Kurz und bündig:

    cd c:\path\to\my\text\files\
Get-Content *.txt -First 1 > output.txt

    Bearbeiten Nov 2018: Nach der Doku "Die TotalCount-parameter beschränkt den Abruf auf die ersten n Zeilen." Dies scheint Minimierung der Ressourcen-Nutzung. Testen Sie es selbst, und fügen Sie Ihre Kommentare.

    cd c:\path\to\my\text\files\
Get-Content *.txt -TotalCount 1 > output.txt
    • Diese lädt die gesamte Datei in den Speicher, das wird nicht funktionieren, in diesem Fall / ist nicht ideal.
    InformationsquelleAutor Chris Fortune
Schreibe einen Kommentar