# spider-for-51job
Python期末大作业，基于selenium的51job网站爬虫与数据可视化分析
## 配置环境
```bash
conda env create -f environment.yaml
```
```bash
pip install -r requirements.txt
```
## 运行爬虫
```bash
python ./GetData.py
```
## 创建数据库和表
> 使用`SQL Server`数据库
创建表：`CreateTable.sql`文件
## 数据入库
```bash
python ./DataStorage.py
```
## 数据可视化
```bash
python ./DataView
```
python爬虫数据可视化分析大作业（）.zip （39个子文件） 
主-main 
stealth.min.js 176KB LICENSE.chromedriver 238KB data 
爬虫.xlsx 68KB tensorflow.xlsx 77KB pytorch.xlsx 77KB python.xlsx 75KB CreateTable.sql 803B DataView.py 8KB
chromedriver.exe 11.71MB
requirements.txt 8KB DataStorage.py 4KB chart 爬虫 
前程无忧职位城市薪资对比柱状图.html 7KB 前程无忧职位经验要求分布饼状图.html 6KB 前程无忧标题词云图.html 67KB 前程无忧城市职位数量排行柱状图.html 5KB 前程无忧职位学历要求分布饼状图.html 5KB 前程无忧职位主要城市平均薪资折线图.html 5KB tensorflow 前程无忧职位城市薪资对比柱状图.html 7KB 前程无忧职位经验要求分布饼状图.html 5KB 前程无忧标题词云图.html 97KB 前程无忧城市职位数量排行柱状图.html 5KB 前程无忧职位学历要求分布饼状图.html 5KB 前程无忧职位主要城市平均薪资折线图.html 6KB python 前程无忧职位城市薪资对比柱状图.html 7KB 前程无忧职位经验要求分布饼状图.html 5KB 前程无忧标题词云图.html 79KB 前程无忧城市职位数量排行柱状图.html 5KB 前程无忧职位学历要求分布饼状图.html 5KB 前程无忧职位主要城市平均薪资折线图.html 5KB pytorch 前程无忧职位城市薪资对比柱状图.html 7KB 前程无忧职位经验要求分布饼状图.html 5KB 前程无忧标题词云图.html 92KB 前程无忧城市职位数量排行柱状图.html 5KB 前程无忧职位学历要求分布饼状图.html 5KB 前程无忧职位主要城市平均薪资折线图.html 6KB GetData.py 3KB environment.yaml 7KB .gitignore 187B README.md 458B资源评论
