HTMLにこのような

質問

記述があります。
---------------------------------------------------
<META name="ROBOTS" content="NOINDEX">
<META name="ROBOTS" content="NOFOLLOW">
<META name="ROBOTS" content="NOINDEX, NOFOLLOW">
<META name="ROBOTS" content="NONE">
<META name="robots" content="noindex">
<META name="robots" content="nofollow">
<META name="robots" content="noindex, nofollow">
<META name="robots" content="none">
-----------------------------------------------
これはどんな記述でしょうか？巡回ロボットを回避する
記述でしょうか？

自分でこれを記述した記憶がありません。

回答No.4

think49 · ベストアンサー

<meta name="robots" content="noindex"> は検索bot避けで間違いありませんが、私の知る限りでは標準化されてません。
# 「robots.txt は標準化されている」という意見もあるようですので私が間違っていましたら遠慮なく指摘ください。
http://support.google.com/webmasters/bin/answer.py?hl=ja&answer=93710
http://support.google.com/webmasters/bin/answer.py?hl=ja&answer=156449
http://help.yahoo.co.jp/help/jp/search/multimedia/multimedia-14.html
http://www.robotstxt.org/meta.html (有志サイト)

HTML 4.01 の B.4 節で robots.txt に言及されていますが、この文書は参考情報であり、規範ではありません。(※ページ上部の記述を参照してください)
http://www.asahi-net.or.jp/~sd5a-ucd/rec-html401j/appendix/notes.html#h-B.4

つまり、大文字/小文字を併記しているのは「大文字/小文字を区別しない仕様」が標準化されてなく、その動作が保障されないためと思われます。
実際、Google では小文字表記で説明されていますが、Yahooでは大文字表記になっています。
どちらの検索エンジンでも期待通りに動作させるには大文字/小文字を併記する必要があります。

---
勝手にmeta要素が挿入される原因については現情報では特定できません。
いくつか原因は思い当たりますが、もう少し詳しい情報があった方がクリティカルな回答がでやすいかと。

- ホームページビルダーに設定されている⇒正しく設定するか、シンプルなテキストエディタで作るか
- Webブラウザ経由でアップロードしていてアップローダでmeta要素が挿入される設定になっている⇒ FTPでUPすれば解決

回答No.5

gungnir7

>大文字は寧ろロボット対策では？
ここのサイトもヤフーもソースを見て貰えれば分かりますけど小文字です。
大文字のサイトを見つける方が大変です。ロボ対策と言えるものではありません。

HTML4が出来たときは大文字でも小文字でもどちらでもいいかという雰囲気で、
DTDとか幾つかの大文字固定のものがありますけど、
次期HTMLを目標としたXHTMLは全部小文字にしましょうという流れになりました。
でもXHTMLはどこかに消えてしまい、結局うやむやになって現在に至っています。

>犯罪ロボットは小文字を無視するので、大文字を準備したとか

ページを解析するのですから、そんな単純な話ではありませんよ。
犯罪組織と書きましたが、基本的に日本と外国（白人）では考え方に違いがあります。
公式な機関であろうと堂々と無視して入って来ます。
モサドがユダヤ批判のサイトをくまなく探し回っているのはその１つの好例でしょう。

回答No.3

gungnir7

>なんで8本も存在するのか？
>しかも、大文字小文字だ。どうして？不思議です

大文字ははっきり言えば不要です。web標準は小文字です。
Windowsは大文字・小文字を区別しませんが、UNIXは区別します。
でも、小文字で書いておきましょうというのがW3C勧告なので大文字は予備ではないしょうか？

ちなみにその記述はお願いです。巡回ロボがそれを受容するとは限りません。
大手の巡回ロボは素直ですが、犯罪組織のロボはこれを無視する傾向にあります。

また、その記述の友好範囲はhtml単位です。
他のhtmlにその記述がない場合、ロボはそのページをマークしていきます。
トップページにrobots.txtを配置しておくのがベターとされています。

補足

なるほど
W3C勧告は小文字にせよ。ですか。大文字は寧ろロボット
対策では？

犯罪ロボットは小文字を無視するので、大文字を
準備したとか。

下層のページで無視するのは、この記述がないからだわ。
良くしたものだね。

robots.txtを配置って何でしょうか？

回答No.2

axuaxua

ページ=METAが書かれたページ

noindex
ページをGoogleなどの検索対象にしない
nofollow
ページに存在するリンク先への移動を拒否する
none
ページにnoindexとnofollowを指定する

何も書いてなければ検索対象にし、リンク先への移動を許可という意味になります

一部ブログなどではコメントにたいし、自動的に設定される事があります。
HTML作成ソフトを使っている場合は、設定を確認してください。

補足

ページ内のリンク先へ移動しますので
nofollowが効いてません。どうしてだろう？

そいで、なんで8本も存在するのか？
しかも、大文字小文字だ。どうして？不思議です。

必要なの？

誰か答えて頂戴。

回答No.1

noname#174135

回避するというより拒否するみたいですね

　http://www.seo-matome.jp/index-control/meta-robots/
　こちらでなんとなく詳しく書いてあるようです

記述した記憶がない　となると

ホームページ作成の時にですか

テンプレートから作成したりしていませんか？

もしくはサイトの設定で、拒否設定ができる場合

設定で拒否した後にＨＴＭＬタグの編集をする時に

これらの拒否するタグが打ち込まれる場合があるかも。

補足

Googleロボットを拒否する記述ですね。
道理でおかしいのです。

Google検索しても出てこないのです。
これでは、ホームページ作成した意味がありません。
ヒット数の凄い有名サイトにあこがれているのですが。

問題は、どこでこの記述が埋め込まれたのでしょうか？
自分で記憶がない。Spyウエアーに仕込まれえたのか。

作成はIBMいまはJustsystemのホームページビルダー
で作成してますが、これで設定で作成するようにしてるのだろうか。調べてみます。

私はてっきりSpyウェアーに仕込まれたのかと思ってました。