goodbyegangsterのブログ

備忘録的な

2016-10-06から1日間の記事一覧

並列でWEBスクレイピングする方法

四季報データをWEBスクレイピングするスクリプトを作成したのですが、取得に約1日かかった。。。 証券コードを1000から9999までの連番で1件ずつ総当りして、四季報の情報あれば取得する処理を書いているのですが、 直列で実行して、1件あたり10秒くらい…