python爬取机械专业考研大学排名
今天写了一个简单简单的爬虫,用来爬取自己专业的考研大学排名,思想比较简单,但是可能是初学者的原因,写的过程比较繁琐,希望大家理解,下面看一下代码
# -*- coding:utf-8 -*-
# -Author-= JamesBen
# Email: 1597757775@qq.com
import requests
import re
import time
def get_HTMLText(url):
try :
use = {'User-Agent': 'Mozilla/5.0'} #此行代码骗过服务器我们是使用浏览器