• ベストアンサー

robots

baidu(百度)のクローラーをはじきたいのですが robots.txtではじく方法を教えてください 下記のようにしていますがもっと良い書き方はありますか? user-agent: Baiduspider disallow: / user-agent: BaiduImagespider disallow: / user-agent: BaiduMobaider disallow: /

質問者が選んだベストアンサー

  • ベストアンサー
  • devgirl
  • ベストアンサー率83% (5/6)
回答No.1

User-agent:Baiduspider User-agent:Baiduspider-image User-agent:Baiduspider-video User-agent:Baiduspider-news User-agent:Baiduspider-favo User-agent:Baiduspider-cpro User-agent:Baiduspider-ads クローラーの種類です。 参考してください。(-_-)b

参考URL:
http://www.baidu.com/search/spider_english.html
flash0
質問者

お礼

回答ありがとうございます Baiduspiderがこんなに!?もうあきらめるしかないのでしょうか? robots.txtでははじけないのでしょうか?

関連するQ&A