精通Python網(wǎng)絡(luò)爬蟲這是一本實(shí)戰(zhàn)性的網(wǎng)絡(luò)爬蟲秘笈，不僅講解了如何編寫爬蟲，而且還講解了流行的網(wǎng)絡(luò)爬蟲的使用。

全書分為4個(gè)部分：第壹部分對網(wǎng)絡(luò)爬蟲做了概要性的介紹，主要介紹了網(wǎng)絡(luò)爬蟲的常識和所涉及的技術(shù)概覽；第二部分是本書的重點(diǎn)之一，詳細(xì)講解了網(wǎng)絡(luò)爬蟲的核心技術(shù)，包括網(wǎng)絡(luò)爬蟲的實(shí)現(xiàn)原理與實(shí)現(xiàn)技術(shù)、Urllib庫和URLError庫的異常處理、正則表達(dá)式與Cookie的使用、Fiddler的使用、爬蟲的瀏覽器偽裝技術(shù)、爬蟲的定向抓取技術(shù)等；第三部分講解了流行的爬蟲框架Scrapy的使用、架構(gòu)和高級應(yīng)用，是目前關(guān)于Scrapy詳細(xì)的講解；第四部分是3個(gè)實(shí)戰(zhàn)案例，講解了博客爬蟲、圖片爬蟲和模擬登陸爬蟲的編寫方法。

本書從技術(shù)、工具與實(shí)戰(zhàn)3個(gè)維度講解了Python網(wǎng)絡(luò)爬蟲：

技術(shù)維度：詳細(xì)講解了Python網(wǎng)絡(luò)爬蟲實(shí)現(xiàn)的核心技術(shù)，包括網(wǎng)絡(luò)爬蟲的工作原理、如何用urllib庫編寫網(wǎng)絡(luò)爬蟲、爬蟲的異常處理、正則表達(dá)式、爬蟲中Cookie的使用、爬蟲的瀏覽器偽裝技術(shù)、定向爬取技術(shù)、反爬蟲技術(shù)，以及如何自己動(dòng)手編寫網(wǎng)絡(luò)爬蟲；
工具維度：以流行的Python網(wǎng)絡(luò)爬蟲框架Scrapy為對象，詳細(xì)講解了Scrapy的功能使用、高級技巧、架構(gòu)設(shè)計(jì)、實(shí)現(xiàn)原理，以及如何通過Scrapy來更便捷、高效地編寫網(wǎng)絡(luò)爬蟲；
實(shí)戰(zhàn)維度：以實(shí)戰(zhàn)為導(dǎo)向，是本書的主旨，除了完全通過手動(dòng)編程實(shí)現(xiàn)網(wǎng)絡(luò)爬蟲和通過Scrapy框架實(shí)現(xiàn)網(wǎng)絡(luò)爬蟲的實(shí)戰(zhàn)案例以外，本書還有博客爬取、圖片爬取、模擬登錄等多個(gè)綜合性的網(wǎng)絡(luò)爬蟲實(shí)踐案例。

作者在Python領(lǐng)域有非常深厚的積累，不僅精通Python網(wǎng)絡(luò)爬蟲，在Python機(jī)器學(xué)習(xí)、Python數(shù)據(jù)分析與挖掘、Python Web開發(fā)等多個(gè)領(lǐng)域都有豐富的實(shí)戰(zhàn)經(jīng)驗(yàn)。
 

目錄

第一篇　理論基礎(chǔ)篇
第1章　什么是網(wǎng)絡(luò)爬蟲 3
第2章　網(wǎng)絡(luò)爬蟲技能總覽 9
第二篇　核心技術(shù)篇
第3章　網(wǎng)絡(luò)爬蟲實(shí)現(xiàn)原理與實(shí)現(xiàn)技術(shù) 15
第4章　Urllib庫與URLError異常處理 29
第5章　正則表達(dá)式與Cookie的使用 52
第6章　手寫Python爬蟲 73
第7章　學(xué)會使用Fiddler 99
第8章　爬蟲的瀏覽器偽裝技術(shù) 114
第9章　爬蟲的定向爬取技術(shù) 122
第三篇　框架實(shí)現(xiàn)篇
第10章　了解Python爬蟲框架 133
第11章　爬蟲利器——Scrapy安裝與配置 141
第12章　開啟Scrapy爬蟲項(xiàng)目之旅 162
第13章　Scrapy核心架構(gòu) 214
第14章　Scrapy中文輸出與存儲 220
第15章　編寫自動(dòng)爬取網(wǎng)頁的爬蟲 231
第16章　CrawlSpider 243
第17章　Scrapy高級應(yīng)用 250
第四篇　項(xiàng)目實(shí)戰(zhàn)篇
第18章　博客類爬蟲項(xiàng)目 263
第19章　圖片類爬蟲項(xiàng)目 276
第20章　模擬登錄爬蟲項(xiàng)目 283