某サイトからデータ収集するためのプログラムを作ったのですが

質問

某サイトからデータ収集するためのプログラムを作ったのですが
実行したところ44秒で126回(1秒間に約3回)アクセスしていました。
更に単純計算ですが126回のアクセスを250回ぐらいしなければなりません。
できる限りサーバ管理者に迷惑をかけたくないのですが
アクセスは1秒間に何回ぐらいにすべきでしょうか。
3回じゃ多いでしょうか。
サーバのスペックはわかりませんがかなり規模が大きいサイトなので
多分、それなりのスペックではある。と思います。。。

回答No.2

SilverThaw

>アクセスは1秒間に何回ぐらいにすべきでしょうか。
それだって十分に迷惑でしょ。
1分に1回だって迷惑なレベル。

「サイトが大きいから」というのはこっち側の勝手な理屈であり、同意がない限り免罪符にはならない。

回答No.1

Boba_Fett

それは多すぎだろ。。。１５分～２０分に１回かと。。

それは、そのピッチ間隔から察すると、
ほぼリアルタイム表示になりますが
収集することに理由があるのですか？

APIが公開されてれば、API越しに取得というのもあるかと思うのですが。。

そーいうことしていると、スパムBOTと判断されて
ネットワーク的に完全に締め出されるか、
最悪サーバに過負荷をかけたということで、
訴えられる可能性があるのでご注意を。

⇒もしくは接続プロバイダから怒られて
　アカウント停止になりますよ。