网络爬虫

课程内容：

爬虫与数据

Scrapy框架

Mongodb+Redis

Scrapy-redis框架

培养目标：

可掌握的核心能力： 1.掌握爬虫的工作原理和设计思想；2.掌握反爬虫机制； 3.通过学习NoSql数据库和Scrapy-redis框架，可以独立运用分布式爬虫框架实现海量数据的爬取。

许老师

优就业VR/AR游戏开发高级讲师、大前端高级讲师

原大型旅游类互联网企业开发工程师

某大型旅游类互联网企业HTML5开发工程师，项目实战经验丰富，负责过某旅游APP产品H5页面开发，H5小游戏开发。设计的多个H5旅游活动页面访问人数达上百万。后担任Web前端讲师，在教育行业积累了丰富的教学经验，曾主导研发某教育机构H5整套课程，累计授课学员达数千人，口碑极佳。

授课风格：授课有激情，善于引导学生思考，极具耐心，责任心。

教学平台

O2O+CTS双教学平台

优就业秉承“学员的事是最重要的事”这一办学理念，历经十余年，百余位业界专家精心研发，重磅推出从线上到线下一体化互动式CTS云教学系统平台、从入学到就业持续跟踪的O2O教学服务平台。

学前

体验学习：学员可以登录我们的学习平台，挑选自己感兴趣的线上课程免费进行试听，得到真实的学习体验。

选班报班：试听结束，进入选课中心，挑选自己想要学习的课程和想要报的班次。海量课程、多种班次，一站式报名。

能力测评：选课报班成功后、入学前，学员可以进行能力测评，对自己现阶段的能力储备有一个清晰的了解，从而在学习中能够有的放矢。

将列表转换成字符串

teams = ["Packers", "49ers", "Ravens", "Patriots"]

print ", ".join(teams)

>>> 'Packers, 49ers, Ravens, Patriots'

从字典中获取元素

不要用下列的方式

data = {'user': 1, 'name': 'Max', 'three': 4}

try:

is_admin = data['admin']

except KeyError:

is_admin = False

替换为

data = {'user': 1, 'name': 'Max', 'three': 4}

is_admin = data.get('admin', False)