• 締切済み

ロボット検索について

ホームページ上のソースコード 例: <script type="text/javascript" src="ext_web.js"> を記述しているサイトをピックアップすることが出きるロボットを開発したいのですが、技術的に可能かどうか教えていただけますでしょうか? また、既存で検索出来るTOOLなどございましたらご教授お願いいたします。

みんなの回答

回答No.1

技術的には可能だと思います。 cronあたりで、ピックアップするスクリプトなりを適当な時間で動かして、 最初のページに含まれるリンクタグ(<a href="">)で、httpから始まる絶対パスを収集して、 そのページの中に含まれるリンクタグを収集して、を繰り返しつつ、そのページに掲題のようなext_web.jsが含まれているものを別のデータベースなりに登録する、といった感じじゃないでしょうか。 どれほどの時間がかかるのかわかりませんが・・・

関連するQ&A