![[加藤 耕太]のPythonクローリング＆スクレイピング ―データ収集・解析のための実践開発ガイド―](https://images-fe.ssl-images-amazon.com/images/I/51MK3rXBRRL._SX260_.jpg)
![Pythonクローリング＆スクレイピング[増補改訂版] -データ収集・解析のための実践開発ガイド-](https://images-na.ssl-images-amazon.com/images/I/71xlP7dE-tL.__BG0,0,0,0_FMpng_AC_UL160_SR127,160_.jpg)
タイトル通りの本なのだが、予想より幅広い内容の本だった。URLの基礎知識や各種のスクレーピングの方法はもちろんある。XPathとCSSセレクター、lxmlによるスクレーピング、BeautifulSoupの利用、Javascriptを使ったページに対するスクレーピングといったような盛沢山の方法が実際のコードのサンプルとともに紹介されている。特に、フレームワークであるScrapyの利用方法についてはSpiderの作成方法から詳しく書かれている。
しかし、この本はそれだけではない。MySQLへのデータ保存法、NoSQLであるMongoDBへのデータ保存、GoogleのBigQueryの利用、地図データの可視化、メッセージキューであるRQでの利用、asyncioでの非同期IO、Flickerからの画像収集、OpenCVによる顔画像の抽出、AWSでの利用と、とにかくクローリングとスクレーピングに関連する処理の説明がいろいろ盛り込まれているのが素晴らしい。
著作権上の注意、robots.txtによるクローラーへの指示、クローリングとスクレーピングは処理を分けるべき、というような説明もある。また、FREST APIについても載っている。Vagrantの導入と基本操作についても紹介されている。掲載されているサンプルプログラムは記載されたWebサイトからダウンロードできる。
すべて白黒印刷だし、実際はWindowsのPython環境でもそのまま動くコードも多いとはいえUbuntuでの利用が前提になっている。まったくの初心者にはとっつきにくいかもしれないが、中身はかなり良い。とても勉強になる。
内容紹介
（概要）
Pythonによるクローリング・スクレイピングの入門から実践までを解説した書籍です。基本的なクローリングやAPIを活用したデータ収集，HTMLやXMLの解析から，データ取得後の分析や機械学習前の処理まで解説。データの収集・解析，活用がしっかりと基本から学べます。Webサービスの開発やデータサイエンスや機械学習分野で実用したい人はもちろん，基礎から解説しているのでPython初心者でもつまずかずに学習できます。多数のライブラリ，強力なフレームワークを活用して高効率に開発できます。
（こんな方におすすめ）
・業務や学術研究でクローラーを作りたい人
・Pythonの一歩先の活用方法に興味のある人
（目次）
1. クローリング・スクレイピングとは何か
2. Pythonではじめるクローリング・スクレイピング
3. 強力なライブラリの活用
4. 実用のためのメソッド
5. クローリング・スクレイピングの実践とデータの活用
6. フレームワーク Scrapy
7. クローラーの継続的な運用・管理
Pythonによるクローリング・スクレイピングの入門から実践までを解説した書籍です。基本的なクローリングやAPIを活用したデータ収集，HTMLやXMLの解析から，データ取得後の分析や機械学習前の処理まで解説。データの収集・解析，活用がしっかりと基本から学べます。Webサービスの開発やデータサイエンスや機械学習分野で実用したい人はもちろん，基礎から解説しているのでPython初心者でもつまずかずに学習できます。多数のライブラリ，強力なフレームワークを活用して高効率に開発できます。
（こんな方におすすめ）
・業務や学術研究でクローラーを作りたい人
・Pythonの一歩先の活用方法に興味のある人
（目次）
1. クローリング・スクレイピングとは何か
2. Pythonではじめるクローリング・スクレイピング
3. 強力なライブラリの活用
4. 実用のためのメソッド
5. クローリング・スクレイピングの実践とデータの活用
6. フレームワーク Scrapy
7. クローラーの継続的な運用・管理
内容（「BOOK」データベースより）
Webデータ収集・解析の技法を基礎から実用まで徹底解説。