サイト内のページやファイルのURLを全て抽出するようなソフトってありま

質問

サイト内のページやファイルのURLを全て抽出するようなソフトってありますか？

具体的に例をあげると、
http://www.abc.com/というサイトがあるとします。そこで、index.html gazou1.jpg gazou2.jpgという3つのファイルのみアップロードされていたとすると、
http://www.abc.com/index.html
http://www.abc.com/gazou1.jpg
http://www.abc.com/gazou2.jpg
というようにそのURL以降にアップされたファイルのURLをすべて抽出できるようなソフトを探しています。

もしあったら教えてください。

回答No.2

bloodybell

ご自身でFTP/SCPのアカウントをもつサイトであれば方法はありますが、WEB上で一般公開されたサイト内の公開されていないファイルやデータの確認はセキュリティの観点から不可能かと思われます。
httpd.conf、もしくはhtaccess等のディレクティブで、ディレクトリ内のファイル一覧表示を許可（Options Indexes FollowSymLinks）しているような場合等にはディレクトリパスでの閲覧でリスト表示することは可能ですが、基本的にご要望頂いているような解析は(そのサーバーの権限がない限り)公開されている部分を覗き取得できないと思って頂いて良いと思います。

回答No.1

bloodybell

こちらのソフトなんていかがでしょうか？

Website Explorer
http://www.umechando.com/webex/

お礼

ありがとうございます。
リンクをたどって行ってURLを調べるソフトですよね？
しかし、このソフトだと上の例でいうと、index.htmlにgazou1.jpgのリンクが張られていて、gazou2.jpgのリンクが張られていないばあい、index.htmlとgazou1.jpgは抽出できますが、gazou2.jpgは抽出できないことになりますよね。
リンクで繋がっていなくてもアップロードされたファイルを全て抽出するソフトを探しています。
他にいいソフトがあったら教えてください。