WEBサイト上の情報を自動収集するプログラム

質問

WEBサイト上の情報を自動収集して自分のホームページの内容を更新するプログラムを組みたいです。
ロボット型検索エンジンとかの単語を見るのですが、何も知らない初心者が一から学べて作れるようなサイト、または本などの知識を教えてほしいです。

FC2のホームページスペースとかなら借りれそうですがそういうのでもできるんでしょうか？
データベースとかそういう大きなものは必要ありません。２サイトくらいの情報で十分ですので。
どうか、ご教授宜しくお願いします。

回答No.2

tracer · ベストアンサー

具体的に何をやりたいのか分かりませんが、まずはそれが実現可能かどうかを調べた方がいいですよ。そもそも出来ない可能性もあるわけで。

やる気に水をさすわけではありませんが、やろうとしていることは簡単ではありません。何がなんでもやりたいのであれば問題ありませんが、やりたいことと、これからご自身が費やすであろう時間を冷静に考えたとき、かならずしも自分でプログラムを組むことが正解ではないかもしれませんよ。たとえば、普通にプログラムを買うことを選択肢に入れるのもありだと思います。

ちなみに、知識0からスタートして、まともなある程度の規模の収集プログラムを完成させるには、要領よく独学を積み重ねて最低でも2年くらいはかかると思いますよ。もちろん、優秀な人はもっと速くできるでしょうし、逆にいつまでたっても出来ない人もいると思います。そのあたりを考慮して挑戦するかどうかを決めても遅くはないと思います。

前置きが長くなりましたが、収集システムをつくるには、PHPやPerl、Rupy、Pythonなど、サーバーで動作する何らかの言語の習得が必須です。その上で、そのプログラムを動作させるにはどのようなサーバーが必要かということを調べてみてください。
もっとも、やりたいことはもっと単純なことかもしれませんが、それを判断するにも知識が必要ですね。

回答No.3

aoyama984

http://blog.nzakr.com/2012/02/021410.html
http://dxd8.com/archives/85/
http://www.kaasan.info/archives/1457
http://php-fan.org/%E3%82%A6%E3%82%A7%E3%83%96%E4%B8%8A%E3%81%AE%E5%BF%85%E8%A6%81%E3%81%AA%E3%83%87%E3%83%BC%E3%82%BF%E3%82%92%E6%8A%BD%E5%87%BA%E3%81%99%E3%82%8B%E6%96%B9%E6%B3%95-%E3%82%B9%E3%82%AF%E3%83%AC%E3%82%A4.html
情報収集
http://sitemix.jp/
http://atpages.jp/
http://lolipop.jp/service/about/
レンタルサーバ

具体的には　どのページから　どの情報　どのように加工したいか　によります
どのページ　の　どの情報ですか

回答No.1

tanteiq

とりあえずネットに強いプログラミング言語をある程度使えるようになって、それから考えてみては？
FC2のような物はせいぜいjavascriptぐらいしか使えないのでレンタルサーバーか自分でサーバー組むかしないと厳しいと思いますよ

もしかしたらそういう需要に合わせたサイトがあるかもしれませんが聞いたことはないですね
学ぶべき順番を箇条書きにすると

プログラミング言語
ネットワークプログラミング
サーバーの構築
ロボット型検索エンジン

ぐらいですかね、細かい所はやっていけば必要になるので自分で調べられると思います
ただ本当に、コンピュータもわからないぐらい0、とかなら諦めたほうがいいですよ