flask_spider
Python
Python, HTML, CSS, Shell, JavaScript
共52个文件
py: 23
html: 16
css: 5
md: 2
sh: 2
js: 1
log: 1
sql: 1
txt: 1
基于flask+request小说爬取项目
基于flask+requests个人博客系统
博客地址
1.基本环境搭建
1.本人使用的系统是 Centos7
2.python环境
2.1 安装python3.6
2.2 安装pip工具
3.安装mysql数据库 使用的是mysql 5.7 charset=utf8
4.建立相关数据库及表
2.安装教程(推荐安装环境:Centos7,python版本要超过3.4)
1.git clone https://github.com/longzx-9527/flask_spider.git
2.cd flask_spider
3.pyvenv myvenv #虚拟环境
4.source venv/bin/activate #激活虚拟环境
5.pip install -r requirement.txt # 安装依赖
以上,应该安装好了python依赖包。
接下来是初始化数据:
1.首先你应该创建了一个blog数据库(utf-8格式),然后修改config.py里面的user、passwd、db
2.初始化数据库:python manage.py db init
3.生成数据库语句:python manage.py db migrate
4.创建数据库:python manage.py upgrade
运行:./start.sh
2.个人博客首页
2.1 首页界面
2.2 可以发布一些自己写的文章
2.3 文章显示
2.4 文章管理
3.小说爬取展示
最终实现效果如下图:
首页显示
可以输入查询小说,如果小说不存在,就调用后台爬虫程序下载
点开具体页面显示,小说章节列表,对于每个章节,如果本地没有就直接下载,可以点开具体章节开心的阅读,而没有广告,是的没有广告,纯净的
https://gitee.com/xubo20180703/flask_spider
没有合适的资源?快使用搜索试试~ 我知道了~
温馨提示
项目概述:基于Python的Flask框架的小说爬取网站源码,融合了Web开发与数据抓取技术。该项目使用Python作为主要开发语言,辅以HTML、CSS、Shell、JavaScript等,共包含52个文件,具体文件类型分布如下:Python脚本(23个),HTML页面(16个),CSS样式表(5个),Markdown文档(2个),Shell脚本(2个),JavaScript文件(1个),日志文件(1个),SQL文件(1个),以及文本文件(1个)。该项目通过Flask框架和request库实现,为用户提供了便捷的小说内容爬取服务,是一套功能全面的小说内容获取平台。
资源推荐
资源详情
资源评论
收起资源包目录
upload.zip (56个子文件)
blog.sql 4KB
stop.sh 65B
app
__init__.py 1KB
api
__init__.py 1KB
comments.py 2KB
api说明.md 3KB
ficitons.py 1KB
articles.py 4KB
users.py 3KB
authentication.py 982B
errors.py 0B
models.py 5KB
mylogger.py 1KB
templates
manage_article.html 1KB
tools.html 113B
add_task.html 3KB
base_login.html 2KB
fiction_error.html 2KB
article.html 5KB
fiction_index.html 3KB
fiction_lst.html 3KB
login.html 426B
login_in.html 2KB
fiction.html 2KB
base.html 5KB
index.html 3KB
manage_task.html 2KB
wrarticle.html 3KB
login_up.html 426B
fiction
__init__.py 108B
views.py 6KB
tools.py 738B
main
__init__.py 266B
views.py 8KB
forms.py 3KB
errors.py 0B
static
js
ie-emulation-modes-warning.js 2KB
css
ie10-viewport-bug-workaround.css 433B
dashboard.css 2KB
xscss.css 2KB
mycss.css 953B
github-markdown.css 13KB
xiaoshuo
spider_tools.py 5KB
__init__.py 0B
data
log
error_20180418.log 0B
info_20180418.log 8KB
mylogger.py 945B
xiaoshuoSpider.py 5KB
config.py 1KB
wsgi.py 188B
manage.py 476B
start.sh 92B
requirements.txt 1KB
sendemail.py 4KB
readme.txt 2KB
config.py 3KB
共 56 条
- 1
资源评论
沐知全栈开发
- 粉丝: 4774
- 资源: 3423
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功