ロボット検索でページを拾われないようにするには？

質問

ロボット検索でページを拾われないようにするにはどうしたらいいのでしょうか？

私的なファイルをアップロードしたいのです。

回答No.4

shige_70 · ベストアンサー

<meta>がなくても、行儀の悪いロボットは根こそぎ持っていくので無意味ですね。

とりあえず、ざっと思いつく方法は３つあります。

1) 認証をかける。

2) そのファイルにリンクを張らない。

3) ロボットにリンクをたどれなければいいので、JavaScriptを活用して、urlを分割しておいてスクリプトでくっつけて飛ぶ。

3)はたとえば、http://www.foo.ne.jp/bar.htmlにリンクを張るなら、
<a href="javascript:location.href='http://www.foo.ne'+'.jp/bar.h'+'tml';">リンク</a>
といった感じにすれば、おそらくロボットはたどれないでしょう。

お礼

ありがとうございました。参考になりました。

回答No.5

Kendai

METAタグでやるなら、以下の記述はいかがでしょう？
でも、悪質なロボットにかかれば無意味ですね。
<META NAME="ROBOTS" CONTENT="NOINDEX,NOFOLLOW">
<META NAME="ROBOTS" CONTENT="NONE">
<meta name="robots" content="noindex,nofollow">
<meta name="robots" content="none">

ベストなのは、shige_70さんのおっしゃるとおり
>1) 認証をかける。
方法が良いかと…。

お礼

ありがとうございました。参考になりました。

回答No.3

babysun

HTMLで、metaに入力されたモノが検索エンジンの情報源になるので、そこに入れなければ引っかからないはずです。

参考URL：

http://tohoho.wakusei.ne.jp/html/meta.htm

お礼

ありがとうございました。参考になりました。

回答No.2

milk_and_sugar

こちらのサイトの検索ロボット制御のところを参考に。

参考URL：

http://tohoho.wakusei.ne.jp/html/meta.htm

お礼

ありがとうございました。参考になりました。

回答No.1

Mizyu

アップするファイルがHTMLならばMETAタグを使って回避できます。

参考URL：

http://webaccessup.com/spider.html

お礼

ありがとうございました。参考になりました。