sortコマンドについて

質問

mako-kwnshともうします。

タブで区切られたテキストファイルの
１番目と４番目の項目の昇順にソートしたいのですが可能なのでしょうか？

回答No.3

gaktank · ベストアンサー

(1)対象ファイルを数行だけ抽出して、そのファイルに対してsortしても同事象ですか？　（一瞬でソートできるはずのファイルでやってみてください）

(2)sort対象ファイルの１行が長い、改行コードがない、バイナリファイル、といった場合にinsufficient memory エラーが出やすいみたいですが、該当しますか？

お礼

お返事ありがとうございます。
ファイルを調べると文字コードがＳｈｉｆｔ－ＪＩＳ
でした。試しにＥＵＣに変換してやると
うまくいきました。Ｓｈｉｆｔ－ＪＩＳでは
だめなのでしょうか？
とりあえず今は

iconv -f shift-jis -t euc
sort
iconv -f euc -t shift-jis

みたいにしてソートしています。
gaktankさん３度をお返事をいただいて
本当にありがとうございました。

回答No.2

gaktank

> insufficient memory; use -S option to increase allocation
> というエラーが発生します。

-S オプションで、sortで使用するスワップメモリを指定してください。
ソート対象ファイルの２～３倍程度あれば大丈夫だと思います。
仮に２０ＭＢとするなら、

$ sort -S20m -k1,1 -k4,4 textfile

です。

ちなみに、実際に使用できる仮想メモリ量より大きい値を指定すると、膨大な量のスワップが発生してパフォーマンスが悪くなるので、システムの実メモリ量を考慮した上で指定したほうがよいです。

お礼

２度もお返事をいただき誠にありがとう
ございます。
下記のコマンドを実行したのですが、
前回と同じようにエラーが出てしまいます。
ソートするファイルが悪いのでしょうか．．．

sort -S25m -n -k1,1 -k5,5 ../data/from/PGCMCMWAKUTAB.TXT > ../data/from/PGCMTOKUBANTAB_WK.TXT

回答No.1

gaktank

こういうことですか？

$ sort -k1,1 -k4,4 textfile

お礼

お返事ありがとうございます。
教えていただいたコマンドを
実行してみたのですが、

insufficient memory; use -S option to increase allocation
というエラーが発生します。
メモリ不足のエラーだと思うのですが、
メモリ不足になる原因がわからず
現在悩んでいます。
（ファイルは６ＭＢ程度）