Python爬虫数据采集课程

 1. 课程内容全面覆盖爬虫技术栈 
这套由传智播客&黑马程序员推出的Python爬虫课程，从基础概念到高级应用层层递进。课程包含10大知识模块，从爬虫基础、requests模块到Scrapy框架应用，完整覆盖数据采集全流程。特别值得关注的是反爬策略与MongoDB数据库等实战内容，这些都是企业级爬虫开发的必备技能。 

 2. 循序渐进的教学体系设计 
课程采用阶梯式教学法，从01_爬虫基础模块开始建立认知框架，详细讲解HTTP协议、请求响应过程等核心概念。02_requests模块则通过金山翻译等实际案例，帮助学员掌握API调用技巧。每个知识单元都配有对应的实战练习，如04_selenium模块的斗鱼直播案例，确保学习效果落地。 

 3. 重点攻克企业级开发难题 
在05_反爬与反反爬模块中，课程深入解析了验证码识别、JS逆向分析等高级技术，通过人人网登录、有道翻译等典型案例演示解决方案。07_scrapy基础到09_scrapy其他模块，则系统讲解分布式爬虫开发与部署，包含京东图书爬虫等商业项目实战。 

 4. 配套资源完善助力学习 
课程提供完整的课件、代码和工具包，如xpathhelper、selenium驱动等开发工具。特别包含爬虫课件完整版本(HTML版本).zip等资料，学员可以随时查阅。每个技术模块都有对应的代码示例，方便学习者边学边练。 

 5. 掌握移动端数据采集技术 
独特的10_appium模块教授移动端自动化测试技术，从环境搭建到实际应用完整覆盖。这部分内容让课程不仅限于PC端数据采集，更拓展到移动互联网领域，使学员的技术能力更加全面。 

这套课程通过200+课时系统讲解，配合20+实战案例，帮助学习者从零构建Python爬虫知识体系。无论是想入门数据采集的新手，还是希望提升反爬应对能力的开发者，都能从中获得实用价值。

资源目录列表：

├─传智播客&黑马程序员《Python爬虫数据采集课程》
│  ├─01_爬虫基础
│  │  ├─01.爬虫特点介绍.flv
│  │  ├─02.课程结构.flv
│  │  ├─03.爬虫的概念.flv
│  │  ├─04.爬虫的作用.flv
│  │  ├─05.爬虫的分类.flv
│  │  ├─06.爬虫的流程.flv
│  │  ├─07.http与https的区别.flv
│  │  ├─08.常见的请求头与响应头.flv
│  │  ├─09.创建的响应状态码.flv
│  │  ├─10.浏览器运行过程.flv
│  ├─02_requests模块
│  │  ├─1.requests模块-简介-安装-使用.flv
│  │  ├─10.requests模块-代理proxies使用.flv
│  │  ├─11.requests模块-verify参数与ca证书.flv
│  │  ├─12.requests模块-post请求_金山翻译案例.flv
│  │  ├─13.requests-post数据来源.flv
│  │  ├─14.requests模块-session.flv
│  │  ├─15.案例-github模拟登陆.flv
│  │  ├─2.requests模块-响应对象的text与content之间的区别.flv
│  │  ├─3.requests模块-响应对象常用的参数和方法.flv
│  │  ├─4.requests模块-发送带请求头的请求.flv
│  │  ├─5.requests模块-发送带参数的请求.flv
│  │  ├─6.requests模块-在headers中设置cookies参数.flv
│  │  ├─7.requests模块-cookies参数的使用.flv
│  │  ├─8.requests模块-cookiejar对象的处理.flv
│  │  ├─9.requests模块-timeout参数.flv
│  ├─03_数据提取
│  │  ├─01.数据提取-响应内容的分类.flv
│  │  ├─02.xml与html.flv
│  │  ├─03.常用数据解析方法.flv
│  │  ├─04.jsonpath-场景-安装-使用.flv
│  │  ├─05.jsonpath-练习.flv
│  │  ├─06.jsonpath-案例-拉钩.flv
│  │  ├─07.lxml简介.flv
│  │  ├─08.xpathhelper简介_安装.flv
│  │  ├─09.xpath语法-基础节点选择.flv
│  │  ├─10.xpath语法-节点修饰语法.flv
│  │  ├─11.xpath语法-其他常用语法.flv
│  │  ├─12.lxml使用.flv
│  │  ├─13.百度贴吧.flv
│  │  ├─14.tostring.flv
│  ├─04_selenium
│  │  ├─01.selenium-介绍_效果展示.flv
│  │  ├─02.selenium的工作原理.flv
│  │  ├─03.selenium-模块与driver的安装.flv
│  │  ├─04.selenium-简单使用.flv
│  │  ├─05.selenium-driver属性和方法.flv
│  │  ├─06.selenium-元素定位.flv
│  │  ├─07.selenium-元素操作.flv
│  │  ├─08.selenium-标签切换.flv
│  │  ├─09.selenium-窗口切换.flv
│  │  ├─10.selenium-cookies操作.flv
│  │  ├─11.selenium-执行js.flv
│  │  ├─12.selenium-页面等待.flv
│  │  ├─13.selenium-配置对象.flv
│  │  ├─14.selenium-案例-斗鱼直播.flv
│  ├─05_反爬与反反爬
│  │  ├─01.反爬与反反爬-反爬原因.flv
│  │  ├─02.反爬与反反爬-什么样的爬虫会被反.flv
│  │  ├─03.反爬与反反爬-常见概念与反爬方向.flv
│  │  ├─04.反爬与反反爬-基于身份识别的反爬.flv
│  │  ├─05.反爬与反反爬-及与爬虫行为的反爬.flv
│  │  ├─06.反爬与反反爬-基于数据加密进行反爬.flv
│  │  ├─07.验证码-验证码的知识.flv
│  │  ├─08.验证码-图像识别引擎.flv
│  │  ├─09.验证码-打码平台.flv
│  │  ├─10.chrome浏览器的使用.flv
│  │  ├─11.js解析-人人网登录分析.flv
│  │  ├─12.js解析-定位js文件.flv
│  │  ├─13.js解析-js代码分析.flv
│  │  ├─14.js解析-js2py使用.flv
│  │  ├─15.js解析-人人网登陆.flv
│  │  ├─16.有道翻译分析.flv
│  │  ├─17.hashlib使用.flv
│  │  ├─18.有道翻译实现.flv
│  ├─06_MongoDB数据库
│  │  ├─01.mongodb的介绍.flv
│  │  ├─02.mongodb的安装.flv
│  │  ├─03.mongodb简单使用-测试启动.flv
│  │  ├─04.mongodb简单使用-生产启动.flv
│  │  ├─05.mongodb简单使用-数据库操作.flv
│  │  ├─06.mongdb简单使用-集合操作.flv
│  │  ├─07.mongodb的数据类型.flv
│  │  ├─08.mongdb插入数据.flv
│  │  ├─09.mongodb查询数据.flv
│  │  ├─10.mongodb查询结果操作.flv
│  │  ├─11.mongodb-修改&删除.flv
│  │  ├─12.聚合管道-分组管道.flv
│  │  ├─13.聚合管道-其他管道.flv
│  │  ├─14.mongodb-索引.flv
│  │  ├─15.mongodb的权限管理-管理用户.flv
│  │  ├─16.mongodb权限管理-普通用户.flv
│  │  ├─17.pymongo使用.flv
│  ├─07_scrapy基础
│  │  ├─01.scrapy-概念&作用.flv
│  │  ├─02.scrapy-工作流程.flv
│  │  ├─03.scrapy-各模块功能.flv
│  │  ├─04.项目开发流程-1框架安装&流程简介.flv
│  │  ├─05.项目开发流程-2创建项目.flv
│  │  ├─06.项目开发流程-3创建爬虫.flv
│  │  ├─07.项目开发流程-4完成爬虫.flv
│  │  ├─08.项目开发流程-5保存数据.flv
│  │  ├─09.项目开发流程-数据建模&流程完善.flv
│  │  ├─10.请求对象-请求&网易招聘简介.flv
│  │  ├─11.请求对象-案例-网易招聘.flv
│  │  ├─12.请求对象-其他参数.flv
│  │  ├─13.请求对象-meta传参.flv
│  │  ├─14.scrapy模拟登陆-cookies参数使用.flv
│  │  ├─15.scrapy模拟登陆-FormRequest发送post请求.flv
│  │  ├─16.scrapy管道的使用.flv
│  │  ├─17.crawlspider.flv
│  │  ├─18.tencent_crawl.flv
│  │  ├─19.中间件-分类与作用.flv
│  │  ├─20.中间件-豆瓣爬虫.flv
│  │  ├─21.中间件-随机请求头.flv
│  │  ├─22.中间件-随机ip代理.flv
│  │  ├─23.中间件-selenium动态加载.flv
│  ├─08_scrapy-redis
│  │  ├─01.scrapy-redis-分布式的概念_原理.flv
│  │  ├─02.scrapy-redis-断点续爬.flv
│  │  ├─03.scrapy-redis-源码分析.flv
│  │  ├─04.scrapy-redis-分布式爬虫实现.flv
│  │  ├─05.scrapy-redis-分布式爬虫编写流程.flv
│  │  ├─06.scrapy-redis-京东爬虫-简介.flv
│  │  ├─07.scrapy-redis-京东爬虫-图书分类页面.flv
│  │  ├─08.scrapy-redis-京东爬虫-图书列表页面.flv
│  │  ├─09.scrapy-redis-京东爬虫-图书价格.flv
│  │  ├─10.scrapy-redis-京东爬虫-修改成分布式爬虫.flv
│  ├─09_scrapy其他
│  │  ├─01.splash-介绍_环境配置.flv
│  │  ├─02.splash-使用.flv
│  │  ├─03.scrapy-日志信息.flv
│  │  ├─04.scrpay配置-常用配置.flv
│  │  ├─05.scrapy配置-其他配置.flv
│  │  ├─06.使用scrapyd进行爬虫部署.flv
│  │  ├─07.使用Gerapy进行爬虫管理.flv
│  ├─10_appium
│  │  ├─01.appium简介.flv
│  │  ├─02.appium环境搭建.flv
│  │  ├─03.appium环境联调测试.flv
│  │  ├─04.appium使用.flv
│  ├─资料
│  │  ├─第10节appium
│  │  │  ├─1.课件
│  │  │  ├─2.其他资料(空)
│  │  │  ├─3.代码
│  │  ├─第1节爬虫基础
│  │  │  ├─1.课件
│  │  │  ├─2.其他资料(空)
│  │  │  ├─3.代码(空)
│  │  ├─第2节requests模块
│  │  │  ├─1.课件
│  │  │  ├─2.其他资料(空)
│  │  │  ├─3.代码
│  │  ├─第3节数据提取
│  │  │  ├─1.课件
│  │  │  ├─2.其他资料(空)
│  │  │  ├─3.代码
│  │  ├─第4节selenium
│  │  │  ├─1.课件
│  │  │  ├─2.其他资料(空)
│  │  │  ├─3.代码
│  │  ├─第5节反爬与反反爬
│  │  │  ├─1.课件
│  │  │  ├─2.其他资料(空)
│  │  │  ├─3.代码
│  │  ├─第6节MongoDB数据库
│  │  │  ├─1.课件
│  │  │  ├─2.其他资料(空)
│  │  │  ├─3.代码
│  │  ├─第7节scrapy基础
│  │  │  ├─1.课件
│  │  │  ├─2.其他资料(空)
│  │  │  ├─3.代码
│  │  ├─第8节scrapy-redis
│  │  │  ├─1.课件
│  │  │  ├─2.其他资料(空)
│  │  │  ├─3.代码
│  │  ├─第9节scrapy其他
│  │  │  ├─1.课件
│  │  │  ├─2.其他资料(空)
│  │  │  ├─3.代码
│  │  ├─爬虫课件完整版本(HTML版本).zip