Spiderfish

ウェブページをサーチするためには、ウェブページのテキストボックスにURLを入れ、ダウンロードディレクトリをセットし、"Go" ボタンを押します。Spiderfishが検索したファイルはすべて、ダウンロードディレクトリの中に入れられます。特徴：-ダウンロードディレクトリの選択が可能 -アクティビティのロギング（オプション） -サーチレベルの選択が可能 -軽量で強力な解析エンジン（悪質だったり、壊れていたりするHTMLでも処理が可能） -バナーやその他の小さなファイルをフィルタする"Content Filter" ©技術-ホストネームをもとにし、サブディレクトリごとにコンテントを区別-jarfileをクリックするだけでSpiderFishを実行 -SpiderFishをコマンドラインモードで実行 -ダウンロードのサイズ制限をコントロール -テキスト／HTMLページをバイナリーファイルとしてディスクに保存できる -ホストネームをもとにした自動ディレクトリ作成を中止できる -はじめのウェブページを読む際、リファラーの起動を設定できる-カスタムHTTPソケットクラスが、反応の遅いあるいは動かないサーバーから読み込む際のハングアップを阻止