我只是试着在我工作时运行Windows XP的PC上安装和运行scrapy。如果我运行scrapy startproject myproject，我会得到以下错误：Wining:在windowsXP上运行Python / Scrapy真的很麻烦。在linux上，我只需要运行pip install Scrapy就可以了，哈哈。
浏览 2提问于2011-11-28得票数 3
回答已采纳
我正在尝试用scrapy抓取一个网站。我的代码工作得很好，但在python3-venv中不行。我发现下面的错误"builtins.ModuleNotFoundError:没有名为‘scrapy_proxy_pool’的模块“，我在谷歌上搜索了一些说python3.8.5错误，但我不确定发生了什么
浏览 16提问于2020-11-15得票数 1
回答已采纳
2回答
当尝试在Scrapy中运行爬行器时，在之前使用其他参数运行它之后，我得到了这个错误消息：我将此解释为在某种意义上仍在运行的第一次爬行。我正在寻找一些方法来终止所有正在运行的Scrapy进程，以便开始一个新的抓取干净。
浏览 0提问于2016-01-06得票数 0
在使用'scrapy startproject tutorial/cd tutorial/scrapy genspider quotes quotes.toscrape.coom‘命令并添加解析函数和更改项后，详细代码如下：import scrapy
items.py
浏览 0提问于2018-10-01得票数 0
python version=3.5.1
我知道scrapy 1.1.0完全支持Python3.x，我已经成功地创建了一个项目。但是，当我试图引导程序:scrapy crawl dmoz时，我得到了以下错误：
2016-04-09 21:15:17 [scrapy] INFO: Scrapy 1
浏览 9提问于2016-04-09得票数 1
我正试图在一台ubuntu机器上使用scrapy运行我在python中编写的刮取程序。刮伤装置已经安装。我可以导入，直到python没有问题，当尝试pip install scrapy时，我得到
当我尝试从命令中运行scrapy (例如使用scrapy crawl ..
浏览 8提问于2016-06-10得票数 6
3回答
我已经使用Scrapy网站上提供的Ubuntu包安装了Scrapy。但是在开始一个Scrapy项目时我收到的错误消息是。Traceback (most recent call last): File "/usr/bin/scrapy", line 5, from pkg_resourcesimport load_entry_point File &
浏览 0提问于2015-08-31得票数 8
但我想把它当作剧本来运行。我怎么能这么做。现在，我可以在终端中通过这个命令运行：但是我想像一个简单的python脚本一样运行它。
浏览 14提问于2017-12-13得票数 9
回答已采纳
我正在迁移到Windows，并希望让Scrapy与Pycharm一起工作。我尝试添加以下内容：以及更改- /Library/Python/2.7/site-packages/scrapy/cmdline.py我的输出如下所示-
from scrapy import cmdline
cmdline.execute("scrapy crawl s
浏览 0提问于2017-11-16得票数 0
我的Scrapy在我的本地机器Windows上运行得很好。然后我尝试在我的AWS Linux服务器上运行它，但我得到了以下结果 File "run<spider_name>.py", line12, in <module> File "/usr/lib/python2.7/site-packages&#
浏览 12提问于2017-02-17得票数 0
回答已采纳
1回答
随时间的刮擦递归回调
、、、
perform parsing
yield scrapy.Request出于某种原因，scrapy确实发出了请求，但是产量项没有(或很少)输出到给定的输出文件中。
我认为这与scrapy的请求优先级有关，这可能会优先发送新的请求，而不是产生被刮掉的项目。会不会是这样？
浏览 5提问于2022-05-28得票数 3
回答已采纳
当我用在Scrapy pipeline.py或spider.py中，我得到以下错误我知道错误是无效的，因为我用postgresql运行Django服务器，使用包含psycopg2的相同的venv。此外，我可以在Scrapy中运行导入psycopg2，没有问题。所以我很困惑我可能错过了什么，我很感激有人能帮我，
浏览 6提问于2019-05-26得票数 0
我开始学习Scrapy，但在奇怪的情况下，我无法将默认shell设置为ipython。我的笔记本电脑的操作系统是Ubuntu15.10。我还安装了ipython和scrapy。它们运行良好，没有造成任何错误。 [settings]问题是我找不到配置文件。我制作了这三个配置文件
~/.c
浏览 5提问于2016-07-06得票数 0
3回答
试图伪造和轮换用户代理
、、、、
settings.pyNEWSPIDER_MODULE= [ 'AppleWebKit/537.36 (KHTML, like Gecko) '
'Chromex86_64;
浏览 2提问于2019-05-10得票数 2
回答已采纳
2回答
安装刮伤时出错
、、、
我只是试着运行一个简单的在下载了每个组件之后，它给了我一个错误： :~$ sudo pip install scrapy Using cached Scrapy-0.24.5-py2-none-any.whl-2.7
crea
浏览 1提问于2015-03-14得票数 2
回答已采纳
我们想在linux机器上使用scrapy。我们使用python 2.7版本并安装scrapy 1.4.0 (pip install scrapy)。我们将导入剪贴画添加到.py文件中。当我们运行.py文件时，会出现如下错误： import scrapy
File "/usr/local/lib/python2.7
浏览 27提问于2017-12-19得票数 0
1回答
我想使用Django 3.1和Scrapy 2.3.0。call_command('Scrapy crawl ..
浏览 2提问于2020-08-12得票数 0
回答已采纳
我想部署用python编写的刮痕蜘蛛。引用文档，它告诉我安装scrapyd包。但文档中没有额外的资源。
有没有办法从其他来源安装它？
浏览 0提问于2021-12-21得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
云直播
对象存储
腾讯会议活动推荐
腾讯云开发者
