python定向爬虫校园论坛帖子信息

引言 写这个小爬虫主要是为了爬校园论坛上的实习信息，主要采用了Requests库 源码 URLs.py 主要功能是根据一个初始url（包含page页面参数）来获得page页面从当前页面数到pageNum的url列表 import re def getURLs(url, attr, pageNum=1): all_links = [] try: now_page_number = int(re.search(attr+'=(\d+)', url, re.S).group(1)) for i in range(now_page_number, pageNum + 1):