一、安装 pip
环境是 windows 64。
背景是本机已安装过 python 环境。
① 先下载压缩包进行解压
地址:https://pypi.org/project/pip/#files
② 进入解压后的文件夹下进行安装:
python setup.py install
③ 环境变量调整
④ 验证,
命令行输入命令:pip –version
二、使用 pip 安装 scrapy
坑来了,直接使用 pip install Scrapy,最后居然提示出错: error: Microsoft Visual C++ 14.0 is required.
解决:
① 安装 wheel 库:
pip install wheel
② 安装 lxml 库:
pip install lxml
③ 下载 scrapy 的 whl 包:
http://www.lfd.uci.edu/~gohlke/pythonlibs/,
下载Scrapy‑1.5.1‑py2.py3‑none‑any.whl
④ 同一个资源网站下载 twiste 的 whl 包
Twisted‑18.9.0‑cp36‑cp36m‑win_amd64.whl
⑤ 在文件下载路径下分别安装刚才下载的 Twisted 和 Scrapy:
注:要先安装 twiste,再安装 scrapy,因为 scrapy 依赖 twiste
pip install Twisted-18.9.0-cp36-cp36m-win_amd64.whl
pip install Scrapy-1.5.1-py2.py3-none-any.whl
⑥ 验证:
scrapy -h,显示版本号即代表成功
三、文档资料
官方文档:https://docs.scrapy.org/en/latest/intro/install.html
中文文档:https://scrapy-chs.readthedocs.io/zh_CN/1.0/intro/tutorial.html
https://pypi.org/
https://www.lfd.uci.edu/~gohlke/pythonlibs/
领取专属 10元无门槛券
私享最新 技术干货