awk

Awk

Informacja

Opracowany przez	Alfred Aho , Brian Kernighan i Peter J. Weinberger
Pierwsza wersja	1979
Ostatnia wersja	IEEE Std 1003.1-2008
Kaucja	openbsd.su/src/usr.bin/awk
Rodzaj	Narzędzie UNIX ( d ) Język programowania oparty na danych ( d ) Język skryptowy Programowanie proceduralne Programowanie oparte na danych ( en )

awk - nazwany na cześć trzech twórców, Alfreda Aho , Petera Weinbergera i Briana Kernighana - jest opartym na wierszach językiem przetwarzania plików płaskich , dostępnym w większości systemów Unix i Windows z MinGW , Cygwin lub Gawk . Jest używany głównie do manipulacji plikami tekstowymi w celu wykonania złożonych operacji wyszukiwania, zastępowania i przekształcania.

Prezentacja

Awk jest najczęściej używany do tworzenia plików tekstowych o określonych specyfikacjach (wymiany między różnymi heterogenicznymi systemami informacyjnymi). Jest również używany jako pliki analizatora ( parsera ) XML lub pliki tekstowe do generowania poleceń SQL z wyodrębnionych danych. Wreszcie, może być używany do złożonych operacji obliczeniowych i formatowania surowych danych w celu tworzenia tabel statystycznych.

Rozróżniamy awk, oryginalne polecenie, od nowego awk (nawk), który pojawił się nieco później na rynku. Implementacje GNU awk są w rzeczywistości nowymi awk . Polecenie awk zwykle znajduje się w / usr / bin w Uniksie, ale niektóre systemy GNU / Linux umieszczają je w / bin. Wymusza to typ shebang,#!/usr/bin/env awk -f aby zapewnić maksymalną przenośność skryptów awk.

Działa jako programowalny filtr, pobierając serię linii jako dane wejściowe (jako pliki lub bezpośrednio przez standardowe wejście) i zapisując na standardowe wyjście, które może zostać przekierowane do innego pliku lub programu. Program Awk składa się z trzech odrębnych bloków, które mogą, ale nie muszą być używane do przetwarzania pliku (przetwarzanie wstępne, przetwarzanie, przetwarzanie końcowe). Awk czyta dane wejściowe wiersz po wierszu, a następnie wybiera (lub nie) wiersze do przetworzenia za pomocą wyrażeń regularnych (i ewentualnie numerów wierszy). Po wybraniu linii jest ona dzielona na pola zgodnie z separatorem wejściowym oznaczonym w programie awk symbolem FS (który domyślnie odpowiada spacji lub znaku tabulacji). Wtedy w zmiennych dostępne są różne pola: 1 zł (pierwsze pole), 2 zł (drugie pole), 3 zł (trzecie pole),…, $ NF (ostatnie pole).

„Awk” to także rozszerzenie nazwy pliku używane dla skryptów napisanych w tym języku (rzadko używane).

Składnia jest inspirowana C  :
awk [options] [programme] [fichier]
gdzie struktura programu jest następująca:
'motif1 { action1 } motif2 { action2 } …'
Każda linia pliku jest kolejno porównywana z różnymi wzorcami (najczęściej wyrażeniami regularnymi i globalnie wyrażeniem logicznym) oraz działaniem pierwszego wzorca zwracającego prawdziwą wartość jest wykonywany. Jeśli nie zostanie przyjęty żaden powód, program przechodzi do przetwarzania następnego wiersza.

Niektóre opcje:

• -F séparateur : umożliwia modyfikację separatora pól;
• -f fichier : czyta program z pliku.
• -v awkVar=$shellVar : Umożliwia łatwą integrację zmiennych powłoki z kodem awk.

Opis techniczny

Plik jest podzielony na wiersze ( rekordy w języku angielskim), które są podzielone na pola ( pola w języku angielskim)

• Linie są oddzielone od siebie specjalnym znakiem działającym jako separator linii (domyślnie "\n"). Liczba wierszy odczytanych w danym czasie jest przechowywana w nazwanym liczniku NR.
• Każda linia jest podzielona na kolejne pola, domyślnie oddzielone spacją lub tabulatorem. Podczas przetwarzania wiersza liczba pól w tym wierszu jest zawarta w nazwanym liczniku NF.

Separatory wejścia-wyjścia są przechowywane w zmiennych i można je zmienić:

• w przypadku wierszy zmiennymi są odpowiednio RSi ORS,
• dla pól zmiennymi są odpowiednio FSiOFS
• $noznacz n- te pole, gdzie njest ściśle dodatnią liczbą całkowitą,
• $0 oznacza całą linię.

Mamy dwie specjalne maski:

• BEGIN : definiuje program przed rozpoczęciem analizy pliku;
• END : definiuje program po analizie.

Aby zdefiniować interwał, używamy przecinka w następujący sposób:

• NR == 1, NR == 10 : skojarzona akcja zostanie zastosowana do linii od 1 do 10.

Kilka funkcji jest już zaimplementowanych:

• print, printf : funkcje wyświetlania;
• cos(expr), sin(expr), exp(expr), log(expr) ;
• getline() : czyta następny wpis w linii i zwraca 0 jeśli jest to koniec pliku ( EOF: koniec pliku ), 1 w przeciwnym razie;
• index(s1, s2) : zwraca pozycję ciągu znaków s2 w ciągu s1 i zwraca 0, jeśli s2 nie występuje w s1;
• int(expr) : cała część wyrażenia;
• length(s) : długość łańcuszka s;
• substr(s,n,l) : zwraca część ciągu znaków s zaczynającą się na pozycji n i o długości l.

Mamy struktury kontrolne. Składnia pochodzi bezpośrednio z C:

• if (test) {actions} else {actions}
• while (test) {actions}
• do {actions} while (test)
• for (expr1;expr2;expr3) {actions}
• continue : przejdź do następnego elementu w pętli
• break : zamyka pętlę

W porównaniu do C istnieje kilka rozszerzeń:

• continue : poza pętlą przejdź do następnego wzoru.
• next : przejdź do następnej linii
• tablice asocjacyjne: tableau[texte]=valeur
• for (var in tableau) {actions}

Kilka przykładów

• awk '{print $0}' fichier : wyświetla wszystkie linie pliku (tak samo jak cat fichier).
• awk '/2/ {print $0}' fichier : wyświetla wszystkie wiersze, w których występuje znak 2 (tak samo jak grep '2' ref.txt).
• awk '$1~/2/ {print $0}' fichier : wyświetla wszystkie wiersze, w których znak 2 znajduje się w pierwszym polu.
• awk '{print NR ":", $0}' fichier : wyświetla zawartość pliku , ale każda linia jest poprzedzona swoim numerem.
• awk -F: '{print $1}' /etc/passwd : zwraca listę użytkowników (idem cut -d : -f 1 /etc/passwd).
• awk 'BEGIN {FS = ":"}{print $1}' /etc/passwd : tak samo jak poprzednie polecenie
• awk '{s=s+$1} END {print s}' fichier : zapisz sumę wszystkich liczb w pierwszej kolumnie pliku .
• awk '/Motif1/ , /Motif2/' fichier : zapisuje wszystkie wiersze zawarte w pliku między Motif1 i Motif2.

Realizacja

Istnieje wiele programów, które używają składni oryginalnego awk, oto najbardziej znane:

• nawk (skrót od nowego awk ), który rozszerza funkcjonalność pierwszego wydania;
• mawk, wersja znana ze swojej szybkości w niektórych przypadkach;
• gawk, wersja GNU dostępna w głównym systemie operacyjnym, z modyfikacją, która istnieje do pracy w sieci TCP / IP;
• jawk, wersja działająca na wirtualnej maszynie języka Java.

Zobacz też

Bibliografia

• Alfred V. Aho, Peter J. Weinberger i Brian W. Kernighan, AWK Programming Language , Paris / Reading (Mass.) / Amsterdam etc., Ed. Addison-Wesley France,1985, 244  str. ( ISBN  2-87908-110-6 )
• Steve Bourne ( tłum.  Michel Dupuy), Le Système UNIX , Paryż, Dunod,1991, 398,  str. ( ISBN  2-7296-0014-0 )
• Aby uzyskać więcej informacji, Shellunix.com

Powiązane artykuły

• GNU Awk
• Polecenia systemu Unix
• sed , inny procesor plików, specjalizujący się w obsłudze niezorganizowanych plików tekstowych, oparty na dopasowywaniu wzorców, a nie na kolumnach i wierszach.

Linki zewnętrzne

• (nie) kod źródłowy wersji awk książki autorstwa Aho, Weinbergera i Kernighana.
• (en) antisèche AWK
• (en) Strona podręcznika użytkownika awk