网络爬虫

课程内容：

爬虫与数据

Scrapy框架

Mongodb+Redis

Scrapy-redis框架

培养目标：

可掌握的核心能力： 1.掌握爬虫的工作原理和设计思想；2.掌握反爬虫机制； 3.通过学习NoSql数据库和Scrapy-redis框架，可以独立运用分布式爬虫框架实现海量数据的爬取。

姓名：王老师 

优就业Python人工智能高级讲师

主讲：Python

多年互联网开发经验。曾任某大型IT公司项目经理。精通Python/Javascript/shell/C，精通大规模高并发的Web、爬虫项目开发，擅长项目管理和流程控制。对于数据结构、数据分析、数据库、机器学习、人工智能算法等有较深入的研究。

教学环境

优就业拥有全国500多家直营分部，为学员提供便捷的面授服务，优美的学习环境。教室环境、实训环境、培训基地均设施完善、环境优美。

带索引的列表迭代

teams = ["Packers", "49ers", "Ravens", "Patriots"]

for index, team in enumerate(teams):

print index, team

>>> 0 Packers

>>> 1 49ers

>>> 2 Ravens

>>> 3 Patriots

获取子列表：

x = [1,2,3,4,5,6]

#前3个

print x[:3]

>>> [1,2,3]

#中间4个

print x[1:5]

>>> [2,3,4,5]

#最后3个

print x[-3:]

>>> [4,5,6]

#奇数项

print x[::2]

>>> [1,3,5]

#偶数项

print x[1::2]

>>> [2,4,6]