网络爬虫

课程内容：

爬虫与数据

Scrapy框架

Mongodb+Redis

Scrapy-redis框架

培养目标：

可掌握的核心能力： 1.掌握爬虫的工作原理和设计思想；2.掌握反爬虫机制； 3.通过学习NoSql数据库和Scrapy-redis框架，可以独立运用分布式爬虫框架实现海量数据的爬取。

范老师

优就业Python人工智能/PHP高级讲师

原大型求职网站开发工程师

8年项目开发经验，3年授课经验，参与开发了某大学生求职招聘网站、某大型商城系 统。精 通PHP+My SQL 技术、P y thon开发语言，熟 悉Think PHP、 Laravel、YII、Flask、Django等开发框架。同时对机器学习、人工智能也有着深入研究。

授课风格：上课语言通俗易懂，精炼朴实，对学生平易近人，极具耐心、责任心。

学后

就业指导：全部理论+实战课程完成后，学员可以登录学习平台，接受一对一的就业指导。优就业将根据学员自身条件、性格特点等，为学员指明职业方向，挖掘求职亮点， 并对学员进行面试技巧培训，帮助学员做好就职准备。

简历修改：优就业提供专属简历修改服务，帮助学员根据求职企业要求和特点，进行有针对性的修改。简历亮点突出，契合职位需求，才是卓有成效的名企敲门砖。

名企求职：工作技能get√、实战能力get√、就业准备get√以后，相信有志者，不懈努力，能够进入名企。

数据分析：

在大量数据的基础上，结合科学计算、机器学习等技术，对数据进行清洗、去重、规格化和针对性的分析是大数据行业的基石。Python是数据分析的主流语言之一。

成为1个bug赏金猎人：

当你开始编写复杂的程序时，遇到bug时不可避免的，每一个程序员都无法避免！但是不应该因为遇到bug而失落，相反，你应该感到自豪，因为你已经成为了一个bug赏金猎人。 当你调试程序的时候，有一套方法论可以帮助你更快找到错误所在。首先按照程序的执行顺序看一遍代码，当你感觉哪里可能出问题时，可能出问题的地方插入一行代码，import pdb; pdb.set_trace()，然后再运行程序。这是Python调试器，使用如下命令行语句，可以运行调试器。

python -m pdb <my_file.py>

第二篇：交流协作

无论你做什么，团队工作都是不可避免的，做一个Python开发者也是如此。下面，给你介绍一些技巧，让你更快的适应与别人一起工作和学习。