登録されていないページの探し方？

質問

いくつかのホームページを運営していますが、検索エンジンに登録されていないページを探すのに苦労しています。
主にＹＳＴとグーグルに登録をしていますが、登録されているページもあれば登録されていないページもあります。
登録されていないページを探して登録しようと思うのですが、ページ数が複数あるのでそれを探すのには時間がかかり過ぎてしまいます。そこで質問ですが、簡単に検索エンジンに登録されていないページを捜す方法を教えてください。

回答No.2

123isao

たぶん上位表示などのために全てのページを登録したいと思うのでしょうが登録されていないページを申請したといって必ず検索結果に表示されるとは限りません。
例えば100ページあるサイトを持っていて全てのページが検索結果に表示されているサイトはないと思います。

YSTはディレクトリ登録なのでトップページ以外申請するやり方はないのでは？リンクを増やしてロボットの巡回を待つだけです。
googleであれば登録しているページを再申請しても問題ないので全てのページを申請したらどうですか？私がやるやり方はWebsiteExplorerというソフトを使用し全URLをテキストに出力します。
それをコピーペーストで参考URLのサイトで申請しています。

参考URL：

http://www.deshop.to/registerurl.html

回答No.1

oscar-

Googleは登録するものではありません。詳しくはこちらを↓
http://ja.wikipedia.org/wiki/Google

ロボット検索の基本は、どの単語をどのくらいどう組み合わせて絞り込むか、によります。
また、どうしても検索出来ないページは少なからず存在します。検索されないようにする方法があるからです。

お礼

ご回答ありがとうございました。
私が質問しているのは、ページの検索ではなく、登録されていないページを探しているのです。
仮に私のホームージが１０００ページあるとして、あるページは登録されているのにあるページは登録されていないとします。
グーグルやヤフーはロボットが自動で拾ってくれるようになってはいるのですが、場合によってはなかなか拾ってくれません。
その対策として、グーグルやヤフーはサイトを登録するページがあります。
グーグル登録ページ
http://www.google.co.jp/addurl/?hl=ja&continue=/addurl
ヤフーのロボット登録ページ
http://submit.search.yahoo.co.jp/add/request

なのでいかに自分のサイト内のページで登録されていないページを見つけるかがポイントになっています。

どなたか、自分のサイト内のページで登録されているページまた、登録されていないページを見つけるツール、あるいはソフトなど知っている方いませんでしょうか？