- ベストアンサー
robots
baidu(百度)のクローラーをはじきたいのですが robots.txtではじく方法を教えてください 下記のようにしていますがもっと良い書き方はありますか? user-agent: Baiduspider disallow: / user-agent: BaiduImagespider disallow: / user-agent: BaiduMobaider disallow: /
- みんなの回答 (1)
- 専門家の回答
質問者が選んだベストアンサー
User-agent:Baiduspider User-agent:Baiduspider-image User-agent:Baiduspider-video User-agent:Baiduspider-news User-agent:Baiduspider-favo User-agent:Baiduspider-cpro User-agent:Baiduspider-ads クローラーの種類です。 参考してください。(-_-)b
お礼
回答ありがとうございます Baiduspiderがこんなに!?もうあきらめるしかないのでしょうか? robots.txtでははじけないのでしょうか?