PythonとScrapyを使ったWebスクレイピング

著者名：川原英明【著者】

インプレスR&D（2021/10発売）

内容説明

本書ではWebスクレイピングを、PythonとScrapyフレームワークを利用して行うことをソースコードとともに解説します。Webサイトには多くの情報があり、ブラウザの利用だけでも取得できます。しかし、Webサイトを閲覧するという行為が能動的であり手間と時間を使うことになります。本書はPythonを使って普通のサイトからWebスクレイピングをはじめ、少しづつ難易度を高めていく実践的な内容です。

目次

第1章　環境構築
第2章　最初のスクレイピング
第3章　POSTメソッドがあるサイトでスクレイピング
第4章　データベースを使用する
第5章　動的画面のスクレイピング
第6章　Lazy loading画面のスクレイピング
第7章　Dropboxと連携する
第8章　Cloudサービスを使ってスクレイピング
第9章　cloudサービスで定期的実行をする