精通Scrapy网络爬虫电子书

精通Scrapy网络爬虫

本书深入系统地介绍了Python流行框架Scrapy的相关技术及使用技巧。全书共14章，从逻辑上可分为基础篇和高级篇两部分，基础篇重点介绍Scrapy的核心元素，如spider、selector、item、link等；高级篇讲解爬虫的高级话题，如登录认证、文件下载、执行JavaScript、动态网页爬取、使用HTTP代理、分布式爬虫的编写等，并配合项目案例讲解，包括供练习使用的网站，以及京东、知乎、豆瓣、360爬虫案例等。

本书案例丰富，注重实践，代码注释详尽，适合有一定Python语言基础，想学习编写复杂网络爬虫的读者使用。

作者简介：

刘硕：硕士，曾就职于知名外企，从事一线开发工作10年，目前主要从事Python开发与教学工作，在慕课网开设有多门Python课程，深受学员欢迎。

前言
关于本书
如今是互联网的时代，而且正在迈入智能时代。人们早已意识到互联网中的数据是有待开采的巨大金矿，这些数据将会改善我们的生活，网络爬虫开发工作岗位的出现和不断增加正是基于对数据价值的重视。优秀的爬虫框架就像是开采金矿的强力挖掘机，如果你能娴熟地驾驶它们，就能大幅提高开采效率。
本书讲解目前最流行的Python爬虫框架Scrapy，它简单易用、灵活易拓展、文档丰富、开发社区活跃，使用Scrapy可以高效地开发网络爬虫应用。本书的读者只需要有Python语言基础即可，我们从零基础、逐步由浅入深进行讲解。第1～8章讲解Scrapy开发的核心基础部分，其中包括：
●　初识Scrapy
●　编写Spider
●　使用Selector提取数据

●　使用Item封装数据
●　使用Item Pipeline处理数据
●　使用Link Extractor提取链接
●　使用Exporter导出数据
●　项目练习
第9～14章讲解实际爬虫开发中使用频率最高的一些实用技术，其中包括：
●　下载文件和图片
●　模拟登录
●　爬取动态页面
●　存入数据库
●　使用HTTP代理
●　分布式爬取
本书特色
本书的宗旨是以实用和实战为教学目标，主要特色是：
●　所有基础部分的讲解都配有代码示例，而不仅仅是枯燥的文档。
●　案例选材方面以讲解知识点为核心，尽量选择专门供练习爬虫技术的网站（不易变动）或贴近日常生活的网站（京东、知乎、豆瓣、360）进行演示。