1.安装pyinstaller https://www.jb51.net/article/177160.htm
2.安装pywin32 https://www.jb51.net/article/187388.htm
3.安装其他模块
注意点:
scrapy用pyinstaller打包不能用
cmdline.execute('scrapy crawl douban -o test.csv --nolog'.split())
我用的是CrawlerProcess方式来输出
举个栗子：
1、在scrapy项目根目录下建一个crawl.py(你可以自己定义)如下图
cralw.py代码如下
#
在Python开发中，有时我们需要将Scrapy爬虫项目打包成可执行文件，便于在没有Python环境的机器上运行。PyInstaller就是这样一个工具，它可以将Python脚本及其依赖项打包成独立的可执行程序。以下是如何使用PyInstaller打包Scrapy项目的详细步骤：
1. **安装PyInstaller**
你需要确保已经安装了PyInstaller。如果没有，可以通过pip进行安装：
```
pip install pyinstaller
```
2. **安装pywin32**
如果你是在Windows平台上打包，还需要安装pywin32，因为Scrapy在Windows系统中依赖这个库来处理某些功能。安装命令如下：
```
pip install pywin32
```
3. **Scrapy打包注意事项**
使用PyInstaller打包Scrapy项目时，不能直接通过命令行执行Scrapy爬虫，即不能使用`cmdline.execute()`方法。这是因为Scrapy内部结构较为复杂，直接调用可能无法正确处理所有依赖。推荐使用`CrawlerProcess`类来启动Scrapy爬虫。
创建一个新的Python脚本（如`crawl.py`），在这个脚本中导入Scrapy的相关组件，并使用`CrawlerProcess`来启动爬虫。以下是一个简单的例子：
```python
# -*- coding: utf-8 -*-
from scrapy.crawler import CrawlerProcess
from scrapy.utils.project import get_project_settings
from myproject.spiders.my_spider import MySpider
process = CrawlerProcess(get_project_settings())
process.crawl(MySpider)
process.start() # 这行会阻塞，直到爬虫完成
```
在这里，`myproject.spiders.my_spider`应替换为你的实际项目名和蜘蛛名。
4. **配置PyInstaller**
在`crawl.py`所在目录下，使用PyInstaller命令创建一个单文件可执行程序。如果你的Scrapy项目中没有使用到动态生成的依赖，可以使用如下命令：
```
pyinstaller --onefile crawl.py
```
如果你的项目有动态生成的依赖，可能需要使用`--hidden-import`选项指定这些依赖，例如：
```
pyinstaller --onefile --hidden-import=scrapy.utils.log --hidden-import=scrapy.utils.project crawl.py
```
你可能需要根据实际的依赖情况添加更多的`--hidden-import`参数。
5. **打包过程**
执行上述命令后，PyInstaller会在当前目录下生成一个`dist`文件夹，里面包含了打包后的可执行文件。将这个文件分发到目标机器上，就可以在没有Python环境的情况下运行Scrapy爬虫了。
6. **潜在问题与解决方案**
- **动态依赖**：Scrapy项目可能包含动态导入的模块，如果PyInstaller没有捕获到这些依赖，运行时可能会出错。使用`--hidden-import`选项可以帮助解决这个问题。
- **路径问题**：Scrapy在运行时可能需要访问项目中的配置文件或其他资源。确保打包过程中这些文件被正确包含。
- **环境变量**：Scrapy可能依赖某些环境变量，确保这些变量在目标机器上也设置正确。
- **第三方库**：确保所有使用的第三方库都已正确安装并打包。
以上就是使用PyInstaller打包Scrapy项目的详细步骤，需要注意的是，由于Scrapy的复杂性，可能还会遇到其他问题，需要根据具体情况调整打包策略。在打包和测试过程中，不断尝试和调试是解决这些问题的关键。
