1.1 --- a/cut.txt	Sat May 02 18:47:00 2015 +0200
     1.2 +++ b/cut.txt	Sat May 02 22:49:00 2015 +0200
     1.3 @@ -2,70 +2,69 @@
     1.4  
     1.5  #1:  cut - cut out selected fields of each line of a file
     1.6  ---------------------------------------------------------
     1.7 -markus schnalke, 2015-04
     1.8 +markus schnalke, 2015-05
     1.9  
    1.10  
    1.11  Cut ist ein klassisches Programm im Unix-Werkzeugkasten.
    1.12  In keinem ordentlichen Tutorial zur Shellprogrammierung darf
    1.13  es fehlen. Es ist ein schoenes Anschauungs- und Beispielobjekt
    1.14 -fuer's Shellscripting. Hier soll es portraitiert werden.
    1.15 +fuer's Shellscripting. Hier will ich ein wenig hinter die
    1.16 +Fassade schauen.
    1.17  
    1.18  
    1.19 -Die Funktionsbasis von cut sind urspruenglich zwei Modi, die
    1.20 -spaeter um einen dritten erweitert wurden. Entweder cut
    1.21 -schneidet bestimmte Zeichen aus den Zeilen der Eingabe oder
    1.22 +Funktionsweise
    1.23 +
    1.24 +Die Funktionsbasis von cut waren urspruenglich zwei Modi, die
    1.25 +spaeter um einen dritten erweitert wurden. Cut schneidet
    1.26 +entweder bestimmte Zeichen aus den Zeilen der Eingabe oder
    1.27  bestimmte durch Trennzeichen definierte Felder.
    1.28  
    1.29 -Der Zeichenmodus ist besonders praktisch um bestimmte Teile
    1.30 -von Kommandoausgaben zu extrahieren. Ein populaeres
    1.31 -Beispiel ist die Jahreszahl, die aus einer Datumsangabe
    1.32 -herausgeschnitten werden soll, insofern das Datumsformat
    1.33 -nicht frei gewaehlt werden kann. Ein anderer Anwendungsfall
    1.34 -ist die Extraktion bestimmter Zugriffsrecht. Hier z.B. die
    1.35 -Rechte fuer den Besitzer:
    1.36 +Der Zeichenmodus ist geeignet um Ausschnitte aus
    1.37 +Festbreitenformaten zu extrahieren. So kann man damit
    1.38 +beispielsweise bestimmte Zugriffsrechte aus der Ausgabe von
    1.39 +`ls -l' ausschneiden. Hier die Rechte des Besitzers:
    1.40  
    1.41 -	ls -l foo | cut -c 2-4
    1.42 +	$ ls -l foo | cut -c 2-4
    1.43 +	rw-
    1.44  
    1.45 -Oder die Schreibrechte fuer die Gruppe und alle anderen:
    1.46 +Oder die Schreibrechte des Besitzers, der Gruppe und der
    1.47 +Welt:
    1.48  
    1.49 -	ls -l | cut -c 6,9
    1.50 +	$ ls -l | cut -c 3,6,9
    1.51 +	ww-
    1.52  
    1.53 -Damit ist die grundsaetzliche Verwendung von cut
    1.54 -demonstriert.
    1.55 +Mit cut lassen sich aber auch Strings kuerzen.
    1.56  
    1.57 -Die fuer POSIX wichtige Funktion von cut ist die Faehigkeit
    1.58 -lange Zeilen zu kuerzen.
    1.59 +	echo "$long" | cut -c -20
    1.60  
    1.61 -	cut -c -80
    1.62 +Dieser Befehl gibt die ersten maximal 20 Zeichen (jeder
    1.63 +Zeile) von `$long' aus.
    1.64  
    1.65 -Dieser Befehl uebernimmt nur die ersten 80 Zeichen der
    1.66 -Eingabe in die Ausgabe. Der Rest der Zeilen wird einfach
    1.67 -abgeschnitten, koennte aber mit `cut -c 81-' extrahiert
    1.68 -werden.
    1.69 -
    1.70 -Achtzig Zeichen erinnert unweigerlich an VT100-Terminals,
    1.71 -das 80 Zeichen pro Zeile darstellen kann. Geht es aber nicht
    1.72 -um die Darstellung von Zeichen sondern um ihre Speicherung,
    1.73 -dann ist `-c' nicht unbedingt die passende Option zur Kuerzung
    1.74 -langer Zeilen.
    1.75 -
    1.76 -Frueher, als US-ASCII omnipraesente als Zeichensatz und -kodierung
    1.77 -war, war jedes Zeichen durch genau ein Byte kodiert und somit
    1.78 -selektierte `cut -c' sowohl nach Ausgabezeichen als auch nach
    1.79 -Bytes. Mit dem Aufkommen von Multibyte-Kodierungen (wie UTF-8)
    1.80 -musste man sich von dieser Annahme loesen. In diesem Zug
    1.81 -bekam cut mit POSIX.2-1992 die Option `-b'. Diese selektiert
    1.82 -Bytes. Will man also nur die ersten maximal 20 Bytes vor dem
    1.83 +Geht es aber nicht um die Darstellung von Zeichen, sondern um
    1.84 +ihre Speicherung, dann ist `-c' nicht unbedingt die passende
    1.85 +Option. Frueher, als US-ASCII als Zeichensatz und -kodierung
    1.86 +noch omnipraesent war, wurde jedes Zeichen mit genau einem
    1.87 +Byte gespeichert. Somit selektierte `cut -c' gleichermassen
    1.88 +sowohl Ausgabezeichen als auch Bytes. Mit dem Aufkommen von
    1.89 +Multibyte-Kodierungen (wie UTF-8) musste man sich jedoch von
    1.90 +dieser Annahme loesen. In diesem Zug bekam cut mit
    1.91 +POSIX.2-1992 die Option `-b'. Diese selektiert Bytes. Will man
    1.92 +also nur die ersten maximal 500 Bytes vor dem
    1.93  Newline-Zeichen stehen haben (und den Rest stillschweigend
    1.94  ignorieren), dann macht man das mit:
    1.95  
    1.96 -	cut -b -20
    1.97 +	cut -b -500
    1.98  
    1.99 +Den Rest kann man sich mit `cut -b 501-' einfangen. Diese
   1.100 +Funktion ist insbesondere fuer POSIX wichtig, da so sicher
   1.101 +gestellt werden kann, dass Textdateien keine beliebig
   1.102 +langen Zeilen haben.
   1.103 +[ http://pubs.opengroup.org/onlinepubs/9699919799/utilities/cut.html#tag_20_28_17
   1.104  
   1.105  Neben dem Zeichen- bzw. Byte-Modus bietet cut noch den
   1.106  interessanteren Feld-Modus, den man mit `-f' einleitet. Mit ihm
   1.107 -koennen Felder ausgewaehlt werden. Das Trennzeichen -- per
   1.108 -Default der Tab -- kann mit `-d' geaendert werden.
   1.109 +koennen Felder ausgewaehlt werden. Das Trennzeichen (per
   1.110 +Default der Tab) kann mit `-d' geaendert werden.
   1.111  
   1.112  Der typische Anwendungsfall fuer den Feld-Modus. Ist die
   1.113  Extraktion von Information aus der passwd-Datei. So z.B. der
   1.114 @@ -77,61 +76,80 @@
   1.115  direkt angehaengt oder mit Whitespace abgetrennt folgen.)
   1.116  
   1.117  
   1.118 -Dieser Feld-Modus ist fuer einfache tabellarische Dateien
   1.119 -(wie eben die passwd) gut geeignet, kommt aber schnell an
   1.120 +Dieser Feld-Modus ist fuer einfache tabellarische Dateien,
   1.121 +wie eben die passwd, gut geeignet. Er kommt aber schnell an
   1.122  seine Grenzen. Gerade der uebliche Fall, dass an Whitespace
   1.123  in Felder geteilt werden soll, wird damit nicht abgedeckt.
   1.124  Der Delimiter kann nur genau ein Zeichen sein. Es kann also
   1.125  nicht sowohl an Leerzeichen als auch an Tabs getrennt werden.
   1.126  Auch unterteilt cut an jedem Trennzeichen. Zwei aneinander
   1.127 -stehende Trennzeichen fuehren zu einem leeren Feld. Solches
   1.128 -Verhalten ist fuer Whitespace-getrennte Felder unangemessen.
   1.129 -Diese Aufgaben deckt aber zum Glueck awk ab, so dass die
   1.130 -Alternative zur Hand ist.
   1.131 +stehende Trennzeichen fuehren zu einem leeren Feld. Dieses
   1.132 +Verhalten widerspricht den Erwartungen fuer eine Datei mit
   1.133 +Whitespace-getrennten Feldern. (Manche Implementierungen von
   1.134 +cut, z.B. die von FreeBSD, haben deshalb Erweiterungen, die
   1.135 +das gewuenschte Verhalten fuer Whitespace-getrennte Felder
   1.136 +bieten.) Ansonsten, d.h. wenn man portabel bleiben will,
   1.137 +hilft awk.
   1.138  
   1.139 -Awk hat eine weitere Funktion, die
   1.140 -cut missen laesst: Das Tauschen der Feld-Reihenfolge.
   1.141 -
   1.142 -
   1.143 -
   1.144 +Awk bietet noch eine weitere Funktion, die cut missen
   1.145 +laesst: Das Tauschen der Felder-Reihenfolge. Bei cut ist die
   1.146 +Reihenfolge der Feldauswahl irrelevant; ein Feld kann selbst
   1.147 +mehrfach angegeben werden. Der Aufruf von `cut -c 5-8,1,4-6'
   1.148 +gibt z.B.  die Zeichen Nummer 1, 4, 5, 6, 7 und 8 aus. Die
   1.149 +Auswahl aehnelt damit der Mengenlehre in der Mathematik:
   1.150 +Jedes angegebene Feld soll in der Ergebnismenge sein. Die
   1.151 +Felder der Ergebnismenge werden dabei immer in der gleichen
   1.152 +Reihenfolge ausgegeben wie sie in der Eingabe waren.
   1.153  
   1.154  
   1.155  Geschichtliches
   1.156  
   1.157 -Cut erblickte 1982 als Teil von UNIX System III das Licht der
   1.158 -oeffentlichen Welt. In den Quellen von System III findet sich
   1.159 -cut.c mit dem Zeitstempel 1980-04-11.
   1.160 +Cut erblickte 1982 mit dem Release von UNIX System III das
   1.161 +Licht der oeffentlichen Welt. Wenn man die Quellen von System
   1.162 +III durchforstet, findet man die Quellcodedatei cut.c mit dem
   1.163 +Zeitstempel 1980-04-11.
   1.164  [ http://minnie.tuhs.org/cgi-bin/utree.pl?file=SysIII/usr/src/cmd
   1.165 +Das ist die aelteste Manifestation des Programms, die ich
   1.166 +aufstoebern konnte.
   1.167  
   1.168  Aber werfen wir doch einen Blick auf die BSD-Linie: Dort ist mein
   1.169  fruehester Fund ein cut.c mit dem Datum 1986-11-07 im Code der
   1.170  Spezialversion 4.3BSD-UWisc, die im Januar 1987 veroeffentlicht
   1.171 -.
   1.172 +wurde.
   1.173  [ http://minnie.tuhs.org/cgi-bin/utree.pl?file=4.3BSD-UWisc/src/usr.bin/cut
   1.174 -Im bekannteren 4.3BSD-Tahoe (1988) taucht es nicht auf. Im
   1.175 -darauf folgenden 4.3BSD-Reno (1990) gibt es aber wiederum ein
   1.176 -cut, das von Adam S. Moskowitz und Marciano Pitargue geschrieben
   1.177 -und 1989 in BSD aufgenommen worden ist.
   1.178 +Die Datei unterscheidet sich nur minimal von der aus System III.
   1.179 +Im bekannteren 4.3BSD-Tahoe (1988) taucht cut aber nicht auf.
   1.180 +Im darauf folgenden 4.3BSD-Reno (1990) gibt es wiederum ein
   1.181 +cut ... ein von Adam S. Moskowitz und Marciano Pitargue neu
   1.182 +implementiertes cut, das 1989 in BSD aufgenommen wurde.
   1.183  [ http://minnie.tuhs.org/cgi-bin/utree.pl?file=4.3BSD-Reno/src/usr.bin/cut
   1.184 -Die Manpage
   1.185 +Seine Manpage
   1.186  [ http://minnie.tuhs.org/cgi-bin/utree.pl?file=4.3BSD-Reno/src/usr.bin/cut/cut.1
   1.187 -erwaehnt bereits die angestrebte aber noch vermutete Konformitaet
   1.188 -zu POSIX.2. Man muss wissen, dass POSIX.2 erst im September
   1.189 -1992 veroeffentlicht wurde. Die Aussage basiert also auf dem
   1.190 -Zwischenstand nach zweieinhalb der insgesamt fuenf Jahre, die
   1.191 -die Arbeiten am Standard benoetigten.
   1.192 +erwaehnt bereits die erwartete Konformitaet mit POSIX.2.
   1.193 +Nun sollte man wissen, dass POSIX.2 erst im September
   1.194 +1992 veroeffentlicht wurde, gut zwei Jahren *nachdem* die
   1.195 +Manpage und das Programm geschrieben wurden. Dieses cut
   1.196 +wurde also anhand von Entwuerfen des Standards
   1.197 +implementiert. Zweieinhalb Jahre Arbeit war immerhin schon in
   1.198 +den Standardisierungsprozess geflossen; bis zur
   1.199 +Fertigstellung sollte es noch weitere zwei Jahre dauern.
   1.200  
   1.201  Trotz all dieser Jahreszahlen aus den 80er Jahren gehoert cut
   1.202  aus Sicht des urspruenglichen Unix zu den juengeren Tools.
   1.203  Wenn cut auch ein Jahrzehnt aelter als Linux, der Kernel, ist,
   1.204 -so existierte Unix wiederum schon ein ganzes Jahrzehnt bevor cut
   1.205 -das erste Mal auftauchte. Insbesondere war cut nicht in Version 7
   1.206 -Unix vorhanden, das die Ausgangsbasis aller modernen Unix-Systeme
   1.207 -darstellt. (Das weit komplexere sed z.B. war dort schon
   1.208 -vertreten.)
   1.209 -
   1.210 -Nichts desto trotz bewaehrte sich cut. Es wurde in andere
   1.211 -Unix Varianten uebernommen und ist heutzutage ueberall
   1.212 +so war Unix doch schon ueber zehn Jahre alt, als cut das
   1.213 +erste Mal auftauchte. Insbesondere gehoerte cut noch nicht
   1.214 +zu Version 7 Unix, das die Ausgangsbasis aller modernen
   1.215 +Unix-Systeme darstellt. Die weit komplexeren Programme sed
   1.216 +und awk waren dort schon vertreten. Man muss sich also
   1.217 +fragen, warum cut ueberhaupt noch entwickelt wurde, wo es
   1.218 +schon zwei Programme gab, die die Aufgabe von cut bereits
   1.219 +abdeckten. Ein Argument fuer cut ist seine Kompaktheit und
   1.220 +die damit verbundene Geschwindigkeit gegenueber dem damals
   1.221 +traegen awk. Diese schlanke Gestalt ist es auch, die der Unix
   1.222 +Philosopie entspricht: Mache eine Aufgabe und die richtig!
   1.223 +So bewaehrte sich cut. Es wurde in andere Unix Varianten
   1.224 +uebernommen, standardisiert und ist heutzutage ueberall
   1.225  anzutreffen.
   1.226  
   1.227  Mit POSIX.2 im Jahre 1992 wurde cut zum ersten Mal in der