大数据技术实战
Python数据分析全流程实战：从爬虫采集到可视化
课程介绍
这是一门以项目为驱动的Python数据分析实战课，以「数据分析师岗位招聘分析」为主线，全程代码实操，带你走完数据采集、清洗、处理、分析到可视化的完整流程。你将用Requests和BeautifulSoup爬取网页数据，用Pandas完成去重、缺失值处理与多表合并，再用Pyecharts绘制柱状图、折线图、饼图和地图等交互式图表。课程还附带豆瓣电影Top250爬虫项目，适合有Python基础、想入门数据分析或准备求职的你。
学完你将能够
- 走完从数据采集到可视化的分析全流程
- 用Requests与BeautifulSoup编写网页爬虫
- 用Pandas完成去重、缺失值处理与多表合并
- 用Pyecharts绘制柱状图、饼图、地图等交互图表
- 完成招聘分析与豆瓣电影两个实战项目
- 独立承担中小型数据分析项目
课程大纲
第1章 课程介绍与项目概述 4 个要点
- 大数据应用场景与岗位介绍
- 项目五大模块与整体架构
- 数据分析六大标准步骤
- 各环节任务与常见误区
第2章 技术准备与项目规划 4 个要点
- Pyecharts安装与图表类型
- 全局配置与系列配置
- HTML渲染与Notebook配合
- 项目四大分析维度拆解
第3章 数据收集与爬虫技术 4 个要点
- 数据来源与采集字段设计
- Requests发送网页请求
- 数据提取与CSV存储
- 招聘数据爬虫代码实操
第4章 数据预处理（数据清洗） 4 个要点
- 数据归类合并与格式转换
- Pandas加载数据与概览
- 重复值检测与删除
- 缺失值检测与填充策略
第5章 数据分析与可视化 5 个要点
- 岗位需求时间趋势分析
- 热门城市地域分布
- 各城市薪资水平对比
- 学历要求与薪资交叉分析
- 折线图柱状图饼图实战
第6章 爬虫实战项目：豆瓣电影Top250 4 个要点
- Requests请求与BeautifulSoup解析
- 多页数据爬取
- 电影信息字段提取
- 数据结构化存储