正则爬虫小工具资源-CSDN文库

共3个文件

py：1个

exe：1个

ui：1个

Python

正则表达式

PyQt5

需积分: 15 198 浏览量 2018-12-21 15:50:56 上传评论 1 收藏 33.56MB ZIP 举报

**正则爬虫小工具** 是一款基于Python编程语言开发的简单爬虫应用程序，它巧妙地结合了正则表达式和PyQt5库，为初学者提供了一个直观易用的界面来学习和实践网络数据抓取。这个工具的目的是帮助用户理解和应用正则表达式在网页数据提取中的作用，同时也提供了图形用户界面（GUI）的实现，让编程新手也能快速上手。让我们详细了解一下**正则表达式**。正则表达式，简称regex，是一种模式匹配语言，用于在文本中搜索、查找、替换或验证特定模式的字符串。在爬虫领域，正则表达式是解析HTML、XML等网页结构数据的关键工具。例如，你可以用正则表达式来匹配特定的URL、电子邮件地址、电话号码等。Python的`re`模块提供了对正则表达式的支持，包括匹配、查找、分割、替换等一系列功能。 **Python** 是一种广泛应用于爬虫开发的高级编程语言，其简洁的语法和丰富的库使其成为数据抓取的理想选择。在本项目中，Python被用来编写爬虫的核心逻辑，以及与PyQt5的交互。 **PyQt5** 是一个用于创建桌面应用程序的Python绑定库，它是Qt库的一个版本，由英国Trolltech公司（现为Digia公司的一部分）开发。PyQt5允许开发者使用Python语言来构建GUI应用，提供了丰富的组件和事件处理机制。在这个正则爬虫小工具中，PyQt5被用来设计和实现用户界面，用户可以通过点击按钮、输入框等交互元素来操作爬虫。在压缩包内的文件中，`ZhengZe.py`是Python源代码文件，其中包含了爬虫的实现逻辑和与PyQt5界面的交互代码。通过阅读和理解这段代码，初学者可以学习到如何结合Python的网络请求库（如`requests`）来获取网页内容，然后利用正则表达式（`re`模块）进行数据解析，并最终将结果展示在PyQt5界面中。 `ZhengZe.ui`文件是Qt Designer生成的用户界面描述文件，使用Qt Designer工具可以可视化地设计GUI界面，然后将设计导出为`.ui`文件。Python的`pyuic5`工具可以将`.ui`文件转换成Python代码，这样就可以在Python程序中直接使用该界面。 `正则爬虫小工具.exe`是Windows操作系统下的可执行文件，它是通过将Python脚本和所有依赖打包成一个独立的可运行程序，方便用户在没有安装Python环境的情况下直接运行。这款**正则爬虫小工具** 是一个很好的学习资源，它不仅涵盖了Python爬虫的基础知识，还展示了如何将Python脚本与GUI界面相结合，使得数据抓取变得更加直观和便捷。对于想要踏入网络爬虫领域的初学者而言，这是一个非常实用的起点。通过实际操作这个工具，不仅可以掌握正则表达式的基本用法，还能了解到Python GUI编程的一些基本技巧。

资源推荐

资源详情

资源评论

收起资源包目录

ZhengZe.zip （3个子文件）

ZhengZe.ui 5KB

ZhengZe.py 6KB

正则爬虫小工具.exe 33.8MB

# -*- coding: utf-8 -*- # Form implementation generated from reading ui file 'ZhengZe.ui' # # Created by: PyQt5 UI code generator 5.11.3 # # WARNING! All changes made in this file will be lost! from PyQt5 import QtCore, QtGui, QtWidgets import sys import requests import re import time class Ui_MainWindow(object): def setupUi(self, MainWindow): MainWindow.setObjectName("MainWindow") MainWindow.resize(870, 887) self.centralwidget = QtWidgets.QWidget(MainWindow) self.centralwidget.setObjectName("centralwidget") self.label = QtWidgets.QLabel(self.centralwidget) self.label.setGeometry(QtCore.QRect(0, 20, 871, 71)) font = QtGui.QFont() font.setFamily("Adobe Devanagari") font.setPointSize(24) self.label.setFont(font) self.label.setCursor(QtGui.QCursor(QtCore.Qt.PointingHandCursor)) self.label.setLayoutDirection(QtCore.Qt.LeftToRight) self.label.setTextFormat(QtCore.Qt.AutoText) self.label.setAlignment(QtCore.Qt.AlignCenter) self.label.setObjectName("label") self.label_2 = QtWidgets.QLabel(self.centralwidget) self.label_2.setGeometry(QtCore.QRect(40, 100, 131, 51)) font = QtGui.QFont() font.setFamily("Adobe Devanagari") font.setPointSize(12) self.label_2.setFont(font) self.label_2.setObjectName("label_2") self.textEdit = QtWidgets.QTextEdit(self.centralwidget) self.textEdit.setGeometry(QtCore.QRect(190, 100, 601, 51)) font = QtGui.QFont() font.setFamily("Adobe Devanagari") font.setPointSize(14) self.textEdit.setFont(font) self.textEdit.viewport().setProperty("cursor", QtGui.QCursor(QtCore.Qt.IBeamCursor)) self.textEdit.setObjectName("textEdit") self.label_3 = QtWidgets.QLabel(self.centralwidget) self.label_3.setGeometry(QtCore.QRect(20, 180, 151, 51)) font = QtGui.QFont() font.setFamily("Adobe Devanagari") font.setPointSize(12) self.label_3.setFont(font) self.label_3.setObjectName("label_3") self.textEdit_2 = QtWidgets.QTextEdit(self.centralwidget) self.textEdit_2.setGeometry(QtCore.QRect(190, 170, 361, 51)) font = QtGui.QFont() font.setFamily("Adobe Devanagari") font.setPointSize(14) self.textEdit_2.setFont(font) self.textEdit_2.viewport().setProperty("cursor", QtGui.QCursor(QtCore.Qt.IBeamCursor)) self.textEdit_2.setObjectName("textEdit_2") self.textBrowser = QtWidgets.QTextBrowser(self.centralwidget) self.textBrowser.setGeometry(QtCore.QRect(0, 300, 871, 561)) font = QtGui.QFont() font.setFamily("Adobe Devanagari") font.setPointSize(10) self.textBrowser.setFont(font) self.textBrowser.viewport().setProperty("cursor", QtGui.QCursor(QtCore.Qt.IBeamCursor)) self.textBrowser.setObjectName("textBrowser") self.pushButton = QtWidgets.QPushButton(self.centralwidget) self.pushButton.setGeometry(QtCore.QRect(570, 170, 221, 51)) font = QtGui.QFont() font.setFamily("Adobe Devanagari") font.setPointSize(14) self.pushButton.setFont(font) self.pushButton.setCursor(QtGui.QCursor(QtCore.Qt.PointingHandCursor)) self.pushButton.setObjectName("pushButton") self.label_4 = QtWidgets.QLabel(self.centralwidget) self.label_4.setGeometry(QtCore.QRect(60, 240, 111, 41)) font = QtGui.QFont() font.setFamily("Adobe Devanagari") font.setPointSize(12) self.label_4.setFont(font) self.label_4.setObjectName("label_4") self.textEdit_3 = QtWidgets.QTextEdit(self.centralwidget) self.textEdit_3.setGeometry(QtCore.QRect(190, 240, 601, 41)) self.textEdit_3.setObjectName("textEdit_3") MainWindow.setCentralWidget(self.centralwidget) self.menubar = QtWidgets.QMenuBar(MainWindow) self.menubar.setGeometry(QtCore.QRect(0, 0, 870, 26)) self.menubar.setObjectName("menubar") MainWindow.setMenuBar(self.menubar) self.statusbar = QtWidgets.QStatusBar(MainWindow) self.statusbar.setObjectName("statusbar") MainWindow.setStatusBar(self.statusbar) self.pushButton.clicked.connect(self.spider) self.retranslateUi(MainWindow) QtCore.QMetaObject.connectSlotsByName(MainWindow) def retranslateUi(self, MainWindow): _translate = QtCore.QCoreApplication.translate MainWindow.setWindowTitle(_translate("MainWindow", "正则爬虫")) self.label.setText(_translate("MainWindow", "正则爬虫小工具")) self.label_2.setText(_translate("MainWindow", "输入网址链接：")) self.label_3.setText(_translate("MainWindow", "输入正则表达式：")) self.pushButton.setText(_translate("MainWindow", "开始爬取")) self.label_4.setText(_translate("MainWindow", "添加Cookie：")) def spider(self): t1 = time.perf_counter() header = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.67 Safari/537.36'} try: res = requests.get(self.textEdit.toPlainText(), headers=header,cookies=self.textEdit_3.toPlainText()).text info = re.compile(self.textEdit_2.toPlainText(), re.S).findall(res) for i in info: self.textBrowser.append(i) t2=time.perf_counter() self.label.setText("共取到"+str(len(info))+"条数据！共用时："+str(t2-t1)+"秒") except Exception: self.textBrowser.setText("爬取出现异常....") if __name__=="__main__": app = QtWidgets.QApplication(sys.argv) MainWindow = QtWidgets.QMainWindow() ui = Ui_MainWindow() ui.setupUi(MainWindow) MainWindow.show() sys.exit(app.exec_())

评论收藏

内容反馈