02
天17
时53
分05
秒未来是什么时代？是数据时代！数据分析服务、互联网金融，数据建模、自然语言处理、医疗病例分析……越来越多的工作会基于数据来做，而爬虫正是快速获取数据最重要的方式，相比其它语言，Python爬虫更简单、高效。
爬虫开发环境搭建
及基础知识
- 于windows和linux
Scrapy爬虫搭建
及单机爬虫实战案例
- 数据解析和入库
- Scrapy-Redis分布式爬虫开发
- 数据保存到elasticsearch
- 通过django搭建搜索引擎
喵耳朵儿
好评
我觉得这个爬虫课程真的很不错。虽然我本身已经有了一些爬虫的基础，但是在听了这个课之后还是有了很多的收获。首先是工具的使用，老师在环境搭建课程中介绍的virtualenvwrapper这个工具我就之前没用过，python2和3之间的切换等等一直是比较头疼的问题。之后就是scrapy的具体使用。老师先从简单的demo实现，然后逐级封装，最后变成一个高可用的框架。所谓授之以鱼不如授之以渔，老师期间也不忘介绍网站工作的各种原理。 唯一的不足就是，，，这门课和《Python高效编程技巧实战》组合起来是有优惠的，我买的时候并没有看到。。。orz，想买的同学一定要看看有没有心动的组合套餐！
匿名用户
好评
这是我参加过第二个爬虫课程，说实话上个爬虫课程很好，感觉很难有讲得更好的。bobby老师的爬虫课程真的是更好的一个爬虫课程，非常的棒。之前我写过不少爬虫，有过一点开发爬虫项目的经验，但是scrapy的工作机制什么确实没有彻底搞懂，这次的课程搞懂了scrapy工作机制，还接触了es，感觉可以把之前难看的爬虫程序和dj es结合在一起，变成好看完整的项目。非常棒，给力。
玖河
好评
课程非常棒，我一个只会部分基本语法的菜鸟刚开始学的时候觉得框架好厚重，但是坚持学下来现在基本上运用起来基本上也没太大压力了，觉得真的很实用，老师讲的也很明了；网站更新后老师也会补录最新教程，非常赞！看到楼上那些说英语不好的我只想说这又不是英语课，要的是了解scrapy的基本框架原理以及如何让自己把scrapy改造成自己想实现的功能等等，要觉得自己英语好就去看官方文档吧；还有人说：“用requests+xpath语法就行了”，我觉得这种人要么就是小白，白的不行的小白，要么就是大神，神到自己完全可以写出自己爬虫框架的大神，反正对于我们常人来说scrapy真的非常好！
有用的，本课程不只是简单介绍scrapy和scrapy-redis的使用，更多的时候会分析源码，特别是scray-redis的源码会完整的分析，这样对于爬虫有定制性需求的话会有很大帮助，课程的知识点几乎覆盖了scray的所有功能
亲，您好~给呢，课程会一直维护更新，也不用担心技术版本迭代。祝您学习愉快~
亲，您好~您好课程属于视频教程，会带着学生一起爬取网站数据，课程本身就是一个大的实战项目（大作业），课程设有问答区，有疑问可以在问答区随时提问老师会帮你解惑呢，加油！祝您学习愉快~
亲，scrapy已经支持python3了呢，祝学习愉快，加油哦！
亲，你好。代码量比较大 做毕业设计没问题。之前有学员拿这个当毕业设计做过的。祝亲学习愉快！
亲，完全掌握本课程当然可以到达初级爬虫工程师的水平， 但是要明确的是爬虫工程师是多种技能的综合体，包括基本的html，js和css基础， 多线程，异步io、正则表达式、redis等等知识。这些知识也只是属于爬虫中最基础的部分， 想要构建一个符合自己要求的爬虫，除了这些知识之外最重要的是要有很高的代码设计能力以及快速的学习能力，因为当我们为了解决爬虫中各种问题去写各种代码之后，代码庞大之后很容易变的很糟糕甚至无法维护。 scrapy就是一款设计的比较精良的爬虫框架， 本课程的目的是让大家彻底弄清楚scrapy以及scrapy-redis分布式爬虫，让大家知道爬虫需要解决的大部分问题以及解决办法，通过对scrapy的理解可以知道自己去设计一个爬虫时候应该怎么样去写代码才具有通用性。大家随着课程的思路就知道学习爬虫应该要学习些什么，然后自己一步步去深入学习以及去完成各个知识点的深入就会达到中级和高级的阶段。祝学习愉快，同学加油哦！
向您推荐
如无法下载使用图片另存为
下载海报选课、学习遇到问题？
扫码添加指导老师 1V1 帮助你！
添加后老师会第一时间解决你的问题
