visualC#でのスクレイピング方法

質問

こんばんは、いつもお世話になっております。

会社にてvisualC#による情報処理を請け負うようになりました。
C#はあまり扱ったことがないのですが、早急に覚えなければならないため、
皆様のお知恵をいただきたく投稿させていただきました。

webサイトなどの情報を取得し、適正な値を表示するアプリケーションを作成する業務なので、
とりあえずオークションサイトなどの落札価格などを取得し、平均価格をだすようなソフトの工程を勉強したいと思っています。

プログラムに疎いため、的確な質問になっていないかもしれませんが、
スクレイピングなどの知識が必要だといわれました。

試験が9月と12月なのでそれまでにと思っています。

何か詳しい参考書や参考になるサイト、またはアプリケーションのサンプル等ありませんでしょうか？
宜しくお願いいたします！

回答No.1

notnot · ベストアンサー

スクレイピングというキーワードがわかっているなら、検索すればいくらでも情報がありますよ。

スクレイピング(scrape, scraping)というのは、「引っ掻いてはがす」というような意味で、この場合はHTMLを解析してそこから情報を取り出すことを指します。

方法１：自分でHTMLから文字列サーチや正規表現などで情報を抜き出す
特定のサイトについて、HTMLを眺めて、たまたま簡単に情報が抜き出せるような時にはこの方がわかりやす。何も新たに覚えなくて良いし。

方法２：HTMLを解析するライブラリを使う
ふつうはこちらですね。C#用も何種類かあるようです。どれが良いのかは知りません。何種類かあると言うことは定番がないと言うことかな？

ということで、C#用スクレイピングライブラリを調べて、どれを使うか決め、それの使い方を学ぶというのがやるべき事です。書籍はおそらく無いです。

お礼

ありがとうございます。スクレイピング用のライブラリもたくさんあるようですね。難しそうですが、少しずつやっていきたいとおもいます。またわからないときは投稿しますので、宜しくお願いします