METAを無視する検索エンジン？

2001/10/17 21:09

検索エンジンのロボットを排除するMETAタグがありますが、もしこれを無視して収集する検索エンジンを作ったらどうなるのでしょうか？マナー違反以上の何か問題点がありますか？

みんなの回答

2001/10/18 04:55 回答No.1

私が持っているHTML辞典によると、実際にあるそうです。そのような場合には、サーバー側に"robots.txt"というファイルを置いてもらうそうです。