Webスクレイピングとは、インターネット上のコンテンツを検索するためのプログラムで、クローラーともよばれます。
株価の変動情報をいつも人間が目で見て確認しているわけにもゆきませんから、プログラムで機械的にチェックさせたいというニーズには適しています。
とはいっても、１秒間に何百回もアクセスしていると、サイトに対するDoS攻撃とみなされますし、アクセスしちゃダメというお触書や、ルールを知らないで野放図にやっていると、法律で罰せられます。時々そういう人がいて、逮捕されることもありますので、注意は必要ですね。
仕事の合間にこんなこともしてます。プログラムは相当手を入れて修正しようと思ってます。
そのうち、Raspberry Pi にROSを入れて、家にあるルンバのコントローラーも作りたい、Webスクレイピングのアプリも・・ やや一度に手を広げすぎ気味か
https://www.tensorflow.org/tutorials/layers に出ているサンプルを動かしてますが、快適です。
ここの処理には通常のCPUだと約1時間くらいかかると書かれてますが、２、３分程度で終了します。
GPUの威力を実感中。
Chainerだとなぜか実行エラーが出てしまいますが、当面tensoflowにしようと思ってます。
