【Python分布式爬虫开发搜索引擎 您所在的位置:网站首页 python爬虫的框架 【Python分布式爬虫开发搜索引擎

【Python分布式爬虫开发搜索引擎

2023-07-18 13:34| 来源: 网络整理| 查看: 265

喵耳朵儿

好评

我觉得这个爬虫课程真的很不错。虽然我本身已经有了一些爬虫的基础,但是在听了这个课之后还是有了很多的收获。首先是工具的使用,老师在环境搭建课程中介绍的virtualenvwrapper这个工具我就之前没用过,python2和3之间的切换等等一直是比较头疼的问题。之后就是scrapy的具体使用。老师先从简单的demo实现,然后逐级封装,最后变成一个高可用的框架。所谓授之以鱼不如授之以渔,老师期间也不忘介绍网站工作的各种原理。 唯一的不足就是,,,这门课和《Python高效编程技巧实战》组合起来是有优惠的,我买的时候并没有看到。。。orz,想买的同学一定要看看有没有心动的组合套餐!

匿名用户

好评

这是我参加过第二个爬虫课程,说实话上个爬虫课程很好,感觉很难有讲得更好的。bobby老师的爬虫课程真的是更好的一个爬虫课程,非常的棒。之前我写过不少爬虫,有过一点开发爬虫项目的经验,但是scrapy的工作机制什么确实没有彻底搞懂,这次的课程搞懂了scrapy工作机制,还接触了es,感觉可以把之前难看的爬虫程序和dj es结合在一起,变成好看完整的项目。非常棒,给力。

玖河

好评

课程非常棒,我一个只会部分基本语法的菜鸟刚开始学的时候觉得框架好厚重,但是坚持学下来现在基本上运用起来基本上也没太大压力了,觉得真的很实用,老师讲的也很明了;网站更新后老师也会补录最新教程,非常赞!看到楼上那些说英语不好的我只想说这又不是英语课,要的是了解scrapy的基本框架原理以及如何让自己把scrapy改造成自己想实现的功能等等,要觉得自己英语好就去看官方文档吧;还有人说:“用requests+xpath语法就行了”,我觉得这种人要么就是小白,白的不行的小白,要么就是大神,神到自己完全可以写出自己爬虫框架的大神,反正对于我们常人来说scrapy真的非常好!



【本文地址】

公司简介

联系我们

今日新闻

    推荐新闻

      专题文章
        CopyRight 2018-2019 实验室设备网 版权所有