
韦玮
随着大数据时代的到来,我们经常需要在海量数据的互联网环境中搜集一些特定的数据并对其进行分析,我们可以使用网络爬虫对这些特定的数据进行爬取,并对一些无关的数据进行过滤,将目标数据筛选出来。对特定的数据进行爬取的爬虫,我们将其称为聚焦网络爬虫。在大数据时代,聚焦网络爬虫的应用需求越来越大。本书从系统化的视角,为那些想学习Python网络爬虫或者正在研究Python网络爬虫的朋友们提供了一个全面的参考,让读者可以系统地学习Python网络爬虫的方方面面,在理解并掌握了本书的实例之后,能够独立编写出自己的Python网络爬虫项目,并且能够胜任Python网络爬虫工程师相关岗位的工作。
内容冗长,而且不全,名不符实。书中介绍的方法仅适合静态页面的爬取,无法爬取AJAX生成的页面,而后者越来越成为网站的主流技术,特别是移动页面。部分内容仅适合参考。
开头部分太不友好了,不用requests库有点遗憾。ajax和selenium也没有讲到,scrapy讲的也不是很全面!大体上还可以看看!
有些初级,书中对scrapy功能应用并不全面
一星给通俗详细的语言,小白还能跟着学学逻辑,但是一本技术书,你自己放的代码都编译不成功,是什么鬼?
相对于Scrapy0.25文档,写的很通俗易懂。按照文章里的代码依样画葫芦确实也能爬到不少数据 但是,还是需要全局性地去掌握了python,网页的设计构造,还有数据库的语句,因为如果只是掌握了简单的基础,读起来很痛苦,当然很痛苦我也读完了,摊手,我总是安慰自己:里面不懂的内容和你自己的智力没有关系,如果掌握了全面的知识,现在的问题就不是问题了。 但是为什么不掌握了所有的基础知识再来看这本书呢,毕竟知识的掌握和应用,总是相辅相成的,就像你了解一个地方,博览群书固然不错,但是亲身踏足也许也没有什么不好,当然我总是这样安慰自己,知道了一个知识点一门编程语言的应用场景,再去系统学习这门语言,会有很多不一样的角度 另外Fiddler对于mac用户非常不友好,希望韦大大能介绍一款用户界面友好的抓包软件 最后,这本书只是一个起点,想要深刻了解爬虫,乃至数据分析,还要继续学习
1.scrapy框架写的很细(赞赞赞👍) 2.防反爬取:模拟登录,IP池,用户池,设置延时 3.数据导入数据库 4.没有涉及的:没有细写分布式爬取。数据处理不够详细(得另找书看看数据可视化numpy,matplotlib,pandos之类的,可以看看《Python网络数据采集》《Python数据处理》) 总体不错,买了实体书看了一遍
本书由浅入深,循序渐进地讲解了Python网络爬虫系列知识,理论与实践相结合,读起来并不会感觉到枯燥。 书中案例基本以python3来实现,但也照顾到了还一直坚持使用python2的读者。从使用urllib等标准库写一些简单的定向爬虫,到用Scarpy框架来实现一些较复杂的爬虫,各种知识点都有涵盖。喜欢爬虫的此书一定不要错过,值得一读。
看开头几章节不像本好书,写的太生硬了,有点晦涩难懂。但是从讲编程开始,就变得流畅多了。小白直接略过前几章,往后面看,会有收获的。我能给个七八分吧,毕竟还没看完,看完再总结。
虽然已经读完一遍,而且和b站上的一个视频感觉是配套的。内容一模一样。但是还是不甚了了,需要再读一遍,边读边操作。
本书从技术、工具与实战3个维度讲解了Python网络爬虫: 技术维度:详细讲解了Python网络爬虫实现的核心技术,包括网络爬虫的工作原理、如何用urllib库编写网络爬虫、爬虫的异常处理、正则表达式、爬虫中Cookie的使用、爬虫的浏览器伪装技术、定向爬取技术、反爬虫技术,以及如何自己动手编写网络爬虫; 工具维度:以流行的Python网络爬虫框架Scrapy为对象,详细讲解了Scrapy的功能使用、高级技巧、架构设计、实现原理,以及如何通过Scrapy来更便捷、高效地编写网络爬虫; 实战维度:以实战为导向,是本书的主旨,除了完全通过手动编程实现网络爬虫和通过Scrapy框架实现网络爬虫的实战案例以外,本书还有博客爬取、图片爬取、模拟登录等多个综合性的网络爬虫实践案例。 作者在Python领域有非常深厚的积累,不仅精通Python网络爬虫,在Python机器学习、Python数据分析与挖掘、Python Web开发等多个领域都有丰富的实战经验