网络爬虫

课程内容：

爬虫与数据

Scrapy框架

Mongodb+Redis

Scrapy-redis框架

培养目标：

可掌握的核心能力： 1.掌握爬虫的工作原理和设计思想；2.掌握反爬虫机制； 3.通过学习NoSql数据库和Scrapy-redis框架，可以独立运用分布式爬虫框架实现海量数据的爬取。

姓名：李老师  

优就业Unity游戏开发高级讲师

主讲：Unity

毕业于华北电力大学网络工程专业。多年Unity3D引擎研发经验，曾负责“DoLo视频”、“像素大战”、“SimCity”等多款应用和游戏的开发。现致力于Unity游戏开发的人才培养工作。精通C#编程语言及VR/AR技术。精通游戏架构设计、WebGL、图形学。熟练掌握U3D引擎，MMD4Mecanim，JMOAssets， PhotonNet，行为树等。对行业技术与发展趋势有独到见解。

授课风格：教学过程不拘泥于条条框框，浅显易懂，更注重知识点的灵活应用，善于引导学生尽情发挥创造力。深受学员好评。

品牌荣誉

优就业优秀的教育成果，以及行业领先的经营模式得到了社会各界的广泛赞誉，在中国IT教育咨询培训和职业教育领域有较强的影响力，近年来荣获各界机构的认可。

带索引的列表迭代

teams = ["Packers", "49ers", "Ravens", "Patriots"]

for index, team in enumerate(teams):

print index, team

>>> 0 Packers

>>> 1 49ers

>>> 2 Ravens

>>> 3 Patriots

控制语句

if语句，当条件成立时运行语句块。经常与else, elif(相当于else if) 配合使用。

for语句，遍历列表、字符串、字典、集合等迭代器，依次处理迭代器中的每个元素。

while语句，当条件为真时，循环运行语句块。

try语句，与except,finally配合使用处理在程序运行中出现的异常情况。

class语句，用于定义类型。

def语句，用于定义函数和类型的方法。

pass语句，表示此行为空，不运行任何操作。

assert语句，用于程序调试阶段时测试运行条件是否满足。

with语句，Python2.6以后定义的语法，在一个场景中运行语句块。比如，运行语句块前加密，然后在语句块运行退出后解密。

yield语句，在迭代器函数内使用，用于返回一个元素。自从Python 2.5版本以后。这个语句变成一个运算符。

raise语句，制造一个错误。

import语句，导入一个模块或包。

from import语句，从包导入模块或从模块导入某个对象。

import as语句，将导入的对象赋值给一个变量。

in语句，判断一个对象是否在一个字符串/列表/元组里。