本書由七個項目組成，分為初識網絡爬蟲、基于Python庫實現靜態(tài)數據采集、基于urllib實現客戶端數據采集、基于Requests-HTML實現動態(tài)數據采集、基于Scrapy框架實現網頁數據采集、基于Scrapy-redis分布式實現網頁數據采集以及基于自動化測試工具實現網頁數據采集。