Wie kann ich die Liste eindeutige Zeichen, die in eine text-Datei mit der linux-Kommandozeile-tools?

Ich lieber diesen Weg:

awk 'BEGIN{FS=""} {for(i=1;i<=NF;i++){chars[$(i)]=$(i);}} END{for(c in chars){print c;} }'

So, in diesem Skript awk setipt. awk ist nützlich für die Verarbeitung der Ausgabe aller möglichen Kommandos.

Dieses Skript in drei Teile:

• BEGINNEN, die ist einmal gemacht, bevor die Verarbeitung
• ENDE, welches nach der Verarbeitung
• in der Mitte ist eine Schleife, verarbeitet die Ausgabe

1)

BEGIN{FS=""} 

Hier http://www.gnu.org/software/gawk/manual/html_node/Field-Splitting-Summary.html#Field-Splitting-Summary

FS == ""
Jeder einzelne Charakter in der Aufzeichnung wird in einem separaten Feld. (Dies ist eine gawk-Erweiterung; es ist nicht angegeben, die von der POSIX-standard.)

2)

{for(i=1;i<=NF;i++){chars[$(i)]=$(i);}}

chars ist nur ein eindimensionales assoziatives array (http://www.gnu.org/software/gawk/manual/html_node/Array-Basics.html#Array-Basics). Ich füge Werte während der Verarbeitung jeder char.

3)

END{for(c in chars){print c;} }

Letzten Abschnitt - zu Fuß durch das ganze array chars und einfach drucken Sie Ihre Indizes . http://www.gnu.org/software/gawk/manual/html_node/Scanning-an-Array.html#Scanning-an-Array

PS.

Als für @sehe was Art und Weise der Verarbeitung.
Suchen Sie nach einem relativ großen text-Datei. Es ist >sechs mal schneller, um ein assoziatives array verwenden:

>time od -cvAnone -w1 vector.html.big | sort -bu > /dev/null

real    0m1.597s
user    0m1.619s
sys     0m0.022s

>time awk 'BEGIN{FS=""} {for(i=1;i<=NF;i++){chars[$(i)]=$(i);}} END{for(c in chars){print c;} }' vector.html.big | sort >/dev/null

real    0m0.252s
user    0m0.251s
sys     0m0.002s