安装Scrapy过程中遇到的几个问题总结
安装Scrapy
1.https://www.lfd.uci.edu/~gohlke/pythonlibs/下载 Twisted
安装 Twisted-19.10.0-cp37-cp37m-win_amd64.whl
这里有许多坑 需要分别从https://pypi.org/project/zope.interface/#files
下载wheel文件 包含:incremental-17.5.0-py2.py3-none-any.whl
zope.interface-4.7.1-cp37-cp37m-win_amd64.whl
Scrapy-1.8.0-py2.py3-none-any.whl
2.安装Scrapy
pip3 install Scrapy-1.8.0-py2.py3-none-any.whl又报错坑爹
继续下载安装以下文件
queuelib-1.5.0-py2.py3-none-any.whl
parsel-1.5.2-py2.py3-none-any.whl
最终发现一个非常好的解决下载文件慢超时失败的问题,就是下载国内的镜像
pip3 install scrapy -i https://pypi.tuna.tsinghua.edu.cn/simple
搞定大工搞成
第五步:测试
参考https://blog.csdn.net/weixin_43012220/article/details/83755488
https://www.cnblogs.com/yebaofang/p/9820860.html