百知教育是落实国家软件人才发展战略、促进大学生创新*，打造互联网+创新型技术人才培训服务示范区，为实训学员提供一站式实训服务。开设有企业应用学院（JavaEE）、云计算学院、Linux系统集成学院、OracleDBA学院、移动互联学院（Android\苹果IOS方向）等众多人才培养方向课程。
对于没有学过代码的同学，Python无疑是你的*选择，简单易学功能强大使得它进入了世界编程语言的前四，从云端、客户端，到物联网终端，Python应用无处不在，几乎适配各种场景
作为人工智能和数据分析*语言，使得Python程序员成了人才市场的“抢手货”，工资待遇也水涨船高。
大数据时代来临互联网+发展，系统的高并发和大数据越发流行，
而大数据主流的Hadoop框架是Java编写。
JavaEE已成为“大数据时代”必备技能。
课程模块
实训模块
课程内容
培养目标
爬虫
Python原生爬虫
爬虫的
核心思想
课程模块
实训模块
课程内容
培养目标
爬虫
Python原生爬虫
爬虫的核心思想
Urllib
Urllib2
Xpath
正则表达式
根据爬虫核心思想，即模拟浏览器发起请求获得目标数据，使用urllib和urllib2发起http请求并获得响应页面，使用xpath和正则表达式进行解析网页和抽取数据
requests
Requests的使用
破解验证码
使用第三方的requests的库来代替原生的urllib来发起http请求会更加的简单和方便，也需要掌握网站验证码的破解方式
scrapy
Scrapy的基本架构
Scrapy的使用
代理ip池的搭建
Python主流爬虫框架scrapy提供非常强大的便利的爬虫框架，可以通过此框架快速搭建自己的爬虫项目，并且使用代理ip的方式来破解网站封ip的防爬手段
分布式爬虫
分布式爬虫设计思想
基于分布式进程的分布式爬虫
基于scrapy-redis的分布式爬虫
学生需要掌握分布式爬虫的设计思想，掌握使用原生的分布式进程进行搭建分布式爬虫，另外也要和之前所学的scrapy和redis来构建分布式爬虫
Urllib
Urllib2
Xpath
正则表达式
根据爬虫核心思想，即模拟浏览器发起请求获得目标数据，使用urllib和urllib2发起http请求并获得响应页面，使用xpath和正则表达式进行解析网页和抽取数据
requests
Requests的使用
破解验证码
使用第三方的requests的库来代替原生的urllib来发起http请求会更加的简单和方便，也需要掌握网站验证码的破解方式
scrapy
Scrapy的基本架构
Scrapy的使用
代理ip池的搭建
Python主流爬虫框架scrapy提供非常强大的便利的爬虫框架，可以通过此框架快速搭建自己的爬虫项目，并且使用代理ip的方式来破解网站封ip的防爬手段
分布式爬虫
分布式爬虫设计思想
基于分布式进程的分布式爬虫
基于scrapy-redis的分布式爬虫
学生需要掌握分布式爬虫的设计思想，掌握使用原生的分布式进程进行搭建分布式爬虫，另外也要和之前所学的scrapy和redis来构建分布式爬虫
