テキストファイルの並べ替えに役立つAwkワンライナーとスクリプト

Awkは単なるコマンドではありません。これは、インデックスと配列および関数を備えたプログラミング言語です。これは、並べ替えるフィールドのリストを取得し、そのリストをメモリに保存して処理し、結果のデータを出力できることを意味するため、重要です。このような複雑な一連のアクションの場合、テキストファイルでの作業が簡単になるため、 sorter.awkという名前の新しいファイルを作成します。 次のテキストを入力してください：

#!/usr/bin/awk -f 



BEGIN {

        FS=";";

}

これにより、ファイルは、ファイルに含まれる行を実行するawkスクリプトとして確立されます。

BEGIN ステートメントは、一度だけ発生する必要があるタスクのためにawkによって提供される特別なセットアップ関数です。組み込み変数FSの定義 、フィールドセパレータの略です これは、awkコマンドで-field-separatorを使用して設定した値と同じです。 、一度だけ発生する必要があるため、 BEGINに含まれています ステートメント。

awkの配列

$ を使用して、特定のフィールドの値を収集する方法をすでに知っています。 フィールド番号とともに表記しますが、この場合、端末に出力するのではなく、配列に格納する必要があります。これはawk配列で行われます。 awk配列について重要なことは、キーと値が含まれていることです。この記事に関する配列を想像してみてください。次のようになります：作成者： "seth"、title： "awkで並べ替える方法"、length：1200 。 作成者などの要素 およびタイトル および長さ はキーであり、次の内容が値です。

ソートのコンテキストでのこれの利点は、任意のフィールドをキーとして、任意のレコードを値として割り当ててから、組み込みのawk関数 asorti（）を使用できることです。 （インデックスで並べ替え）キーで並べ替えます。今のところ、あなたがのみ 2番目のフィールドで並べ替えたい。

Awkステートメントではない 特別なキーワードの前にBEGIN またはEND 各レコードで発生するループです。これは、データのパターンをスキャンし、それに応じて処理するスクリプトの一部です。 awkがレコードに注意を向けるたびに、 {}のステートメント （前に BEGINが付いていない場合 またはEND ）が実行されます。

キーと値を配列に追加するには、変数を作成します（このサンプルスクリプトでは、 ARRAYと呼びます。 、これはひどくオリジナルではありませんが、非常に明確です）配列を含み、括弧内のキーと等号（ =）の値を割り当てます。 。

{   # dump each field into an array

    ARRAY[$2] = $R;

}

このステートメントでは、2番目のフィールドの内容（ $ 2 ）がキーワードとして使用され、現在のレコード（ $ R ）が値として使用されます。

asorti（）関数

配列に加えて、awkには、一般的なタスクの迅速で簡単なソリューションとして使用できるいくつかの基本的な機能があります。 GNUawkで導入された関数の1つであるasorti（） 、キー（またはインデックス）で配列を並べ替える機能を提供します ）または値。

配列は、データが入力された後でのみ並べ替えることができます。つまり、このアクションは、すべての新しいレコードで発生する必要はなく、スクリプトの最終段階でのみ発生する必要があります。この目的のために、awkは特別な ENDを提供します キーワード。 BEGINの逆 、 END ステートメントは一度だけ発生し、すべてのレコードがスキャンされた後にのみ発生します。

これをスクリプトに追加します：

END {

    asorti(ARRAY,SARRAY);

    # get length

    j = length(SARRAY);

    

    for (i = 1; i <= j; i++) {

        printf("%s %s\n", SARRAY[i],ARRAY[SARRAY[i]])

    }

}

asorti（） 関数はARRAYの内容を取得します 、インデックスで並べ替え、結果を SARRAYという新しい配列に配置します （この記事のために私が発明した任意の名前、つまりソートされた配列 。

次に、変数 j （別の任意の名前）には、 length（）の結果が割り当てられます SARRAYのアイテム数をカウントする関数 。

最後に、 forを使用します SARRAYの各アイテムを反復処理するためのループ printf（）を使用する 各キーを出力し、その後に ARRAYでそのキーの対応する値を出力する関数 。

$ chmod +x sorter.awk

$ ./sorter.awk penguins.list 

antipodes Megadyptes;antipodes;Milne-Edwards;1880;Yellow-eyed

chrysocome Eudyptes;chrysocome;Viellot;1816;Sothern Rockhopper

demersus Spheniscus;demersus;Brisson;1760;African

forsteri Aptenodytes;forsteri;Miller,JF;1778;Emperor

linux Torvaldis;linux;Ewing,L;1996;Tux

minor Eudyptula;minor;Bonaparte;1867;Little Blue

papua Pygoscelis;papua;Wagler;1832;Gentoo

{ # dump each field into an array

    ARRAY[$var] = $R;

}

$ ./sorter.awk -v var=3 penguins.list 

Bonaparte Eudyptula;minor;Bonaparte;1867;Little Blue

Brisson Spheniscus;demersus;Brisson;1760;African

Ewing,L Torvaldis;linux;Ewing,L;1996;Tux

Miller,JF Aptenodytes;forsteri;Miller,JF;1778;Emperor

Milne-Edwards Megadyptes;antipodes;Milne-Edwards;1880;Yellow-eyed

Viellot Eudyptes;chrysocome;Viellot;1816;Sothern Rockhopper

Wagler Pygoscelis;papua;Wagler;1832;Gentoo

#!/usr/bin/awk -f

# GPLv3 appears here

# usage: ./sorter.awk -v var=NUM FILE



BEGIN { FS=";"; }



{ # dump each field into an array

    ARRAY[$var] = $R;

}



END {

    asorti(ARRAY,SARRAY);

    # get length

    j = length(SARRAY);

    

    for (i = 1; i <= j; i++) {

        printf("%s %s\n", SARRAY[i],ARRAY[SARRAY[i]])

    }

}