UNIXで文字列操作

質問

あるログファイルを整理しているのですが知識が無く困ってます。

A
A
B
C

というログファイルの重複部分のみ消去したいのですが一般的なコマンドで可能でしょうか？catしてsortして整理まではできたのですが重複文字列をどのように消せば良いでしょうか？　データ数は2万行ほどです

回答No.1

iriyak · ベストアンサー

こんにちは。

uniq(1) をトライしてみてはいかがでしょうか??

お礼

ありがとうございます　uniqとははじめて知りました　助かりました。

回答No.2

notnot

本当に行に１文字しかないのであれば、sort -u でいいです。

また、-u オプションは、ソートキーが同一の複数行を１つのこして残りを消しますので、sort にソートキーを指定した場合は-uを追加すればいいです。

お礼

ありがとうございます　sortにオプションがあるなんてmanをじっくり読むべしですね　助かりました