当前位置：网站首页 > 技术资源 > 正文

信息量爆炸!这510页的《Python爬虫开发与项目实战》，直接膜拜

off999 2024-12-25 14:48 35 浏览 0 评论

【文末有获取方式】

关于这本书

本书是Python爬虫入门非常经典的一本书，无数人通过这本书入门了Python爬虫，相信你也可以。

本书目录：

本书总共分为三个部分：基础篇、中级篇和深入篇

基础篇包括第 1 -7 章．主要讲解了什么是网络爬虫、如何分析静态两站、如何开发一个完，的爬虫。

第 1 -2 章带助大家回顾了 Python 和 web 方面的知识．主要是为之后的爬虫学习打下基础，毕竟之后要和 python 、 web 打交道。
第 3 -5 章详细介绍了什么是网络爬虫、如何分析静态网站、如何从 HTML 页面中提取出有效的数据．以及对如何将数据合理地存储成各类文件以实现持久化。
第 6 一 7 章包含了两个实战项目‘第一个项目是基础爬虫，也就是一个单机爬虫．功能是爬取百度百科的词条，并据此讲解了一个爬虫所应该具有的全部功能组件以及编码实现。第二个项目是分布式爬虫，功能和幕础爬虫一致，在单机爬虫的基础上进行分布式改进，带助大家从很本上了解分布式爬虫，消除分布式爬虫的神秘感

中级篇包括第 8 一 14 章，主要讲解了三种教据库的存储方式、动态网站的抓取、协议分析和scrapy爬虫框架

第 8 章详细介绍了 sQLite 、 MySQL 和 Mong0DB 三种数据库的操作方式，帮助大家实现爬取教据存储的多样化
第9章主要讲解动态网站分析和爬取的两种思路，并通过网个实战项目带助大家理解。
第 10 章首先探讨了爬虫开发中遇到的两个问题 ― 登录爬取问题和较证码问题，并提供了解决办法和分析实例。接着对web 端的爬取提供了另外的思路．当在PC网页端爬取遇到困难时．爬取方式可以向手机网页端转变
第 11 章接着延伸第10 章的问题．又提出了两种爬取思路。当在网页站点爬取遇到困难时．爬取思路可以向 PC 客户端和移动客户端转变．并通过两个实战项目帮助大家了解实施过程。

深人篇为第15~18章，详细介绍了大规模爬取中的去重问题以及如何通过Scrapy框架

开发分布式爬虫，最后又介绍了一个较新的爬虫框架PySpider。