Sortコマンドメモリーオーバー

OKWave

2007-07-31 13:00

Sortコマンドメモリーオーバー

sortコマンドで2GBのファイルをソートしよとしたところメモリオーバーのため失敗しました。 sortコマンドの最大メモリーは5GBを指定しています。(sort -S 5000000) そこでこれを解決するために幾つか質問があります。

1. -Sで最大メモリを指定しない場合の最大メモリはいくらになるのでしょうか?

2. Unixのsortコマンドは巨大ファイルをソートするために用途として使用するのに向いているのでしょうか?(使用することはあるのでしょうか?)

3. 解決方法がありましたら宜しくお願いいたいます。

4. 代替案がありましたら宣しくお願い致します。 (メモリーはなるべく消費しない方法)

宜しくお願い致します。

良回答

いくつか確認させてください

1.実行しているsortのオプションはなんですか?
2.もし、-Sを付けていないならば、10M程度を指定したらどうなりますか?
3.実行しているユーザにリソース制限はありませんか?
ulimit -aで確認してください。 メモリやオープンできるファイル数に制限が無いですか?

回答

2GBのファイルでも失敗したというので気になったのですが、 使用しているsort は、大規模ファイルに対応しているのでしょうか?

Sun Microsystems - Solarisでの実装
http://jp.sun.com/products/software/solaris/
wp/Sol_file/sol_5.html

ここを見ると、sortは対応しているものの中に入っていないようですが。

ZDNET Japan 記事を毎朝メールでまとめ読み(登録無料)

ホワイトペーパー

新着

ランキング

  1. セキュリティ

    マンガで解説!情シスが悩む「Microsoft 365/Copilot」の有効活用に役立つ支援策

  2. 運用管理

    データベース管理の課題を一挙に解決!効率化と柔軟性を両立する新しいアプローチとは

  3. セキュリティ

    新入社員に教えるべき情報セキュリティの基礎知識--企業全体を守るための基本ルールを徹底解説

  4. セキュリティ

    警察把握分だけで年間4000件発生、IPA10大脅威の常連「標的型攻撃」を正しく知る用語集

  5. ビジネスアプリケーション

    AIエージェントの課題に対応、生成AIの活用を推進するための5つのデータガバナンス戦略

ZDNET Japan クイックポール

所属する組織のデータ活用状況はどの段階にありますか?

NEWSLETTERS

エンタープライズコンピューティングの最前線を配信

ZDNET Japanは、CIOとITマネージャーを対象に、ビジネス課題の解決とITを活用した新たな価値創造を支援します。
ITビジネス全般については、CNET Japanをご覧ください。

このサイトでは、利用状況の把握や広告配信などのために、Cookieなどを使用してアクセスデータを取得・利用しています。 これ以降ページを遷移した場合、Cookieなどの設定や使用に同意したことになります。
Cookieなどの設定や使用の詳細、オプトアウトについては詳細をご覧ください。
[ 閉じる ]