htmlで、meta情報について教えてください

質問

参考書には、「ロボット検索用のメタ情報を記入する」という項目があるのですが、実際のウェブサイトのソースを見ると、<meta name="robots" content="index,follow" />といったコードをほとんど見かけません。このコードは本当に必要なのでしょうか? あったほうがいいのか、なくてもいいのか、どなたか教えてください。

回答No.1

大野 悟（@ohnosatoru） · ベストアンサー

こんにちは、大野悟です。

検索エンジンロボットは、原則として巡回を行ってくれますので、
通常のサイトで敢えて明示して許可の記載する必要はないかと思います。

サイト内で一部巡回を拒否しているケースや、
コンテンツの入れ替えなどでロボットの挙動を制御したい場合などの
場合に使用されることが多いです。

お礼

回答ありがとうございます。納得いたしました。

回答No.2

noname#218036

googleだけですが、
http://support.google.com/webmasters/?hl=ja
こう言う文書を公開してます。

お礼

回答ありがとうございます。