python爬取微博一二级评论数据代码（需设置cookie）

这段Python代码是一个微博评论爬虫，它主要用于抓取微博的一级评论和二级评论，并将抓取的数据保存到CSV文件中。下面是代码的详细描述： 导入模块：代码首先导入了所需的模块，包括json、csv、re（正则表达式）、requests（发送HTTP请求）、time（暂停执行）、pandas（数据处理）、os（操作系统功能）和datetime（日期时间处理）。 获取网页源码：get_html 函数通过HTTP请求获取给定URL的网页源码，并设置了User-Agent和Referer头，以模拟浏览器访问。它还包含了一个时间延迟，以避免因频繁请求而被服务器限制访问。 清理HTML标签：get_string 函数用于从HTML内容中提取纯文本，移除所有HTML标签。 保存评论数据：save_text_data 函数将评论数据保存到CSV文件中。它首先创建一个包含评论数据的字典，然后将其转换为pandas的DataFrame。如果CSV文件已存在，则在追加数据时不添加表头；如果文件不存在，则添加表头。数据以UTF-8编码格式保存。 时间转换：trans_time 函数用于将微博评论的时间