我正在尝试从一个部分的网站源代码中提取文本。我正在尝试提取的站点的源代码如下： if ('function' === typeof window.ToggleFilters) {}
<div
浏览 16提问于2019-02-10得票数 0
回答已采纳
1回答
我想解析的PDF文件，遇到时，爬行网站使用scrapy。我使用下面的代码从PDF文档中提取HTML页面源代码，但它不起作用如何从PDF文档中获取内容并将其合并到scrapy工作流中
浏览 1提问于2015-02-13得票数 0
1回答
抓取脚本值
、、
在一个特定的url上使用scrapy shell，我试图确定如何在页面源代码中从这个脚本中提取作者值或贡献者值？我试过了 response.xpath('//script').re(r'author":"([0-9.]+)"') 这是网站源代码中的脚本 <script charSet="UTF-8">...
浏览 7提问于2019-03-06得票数 1
1回答
我正在尝试从urls列表中提取一些数据，例如，以提取所有团队名称。下面是我的爬虫，它正在运行URL，但没有获取任何数据？from scrapy.spider import Spiderfrom teams.items import
浏览 4提问于2014-10-20得票数 0
我想用Scrapy和Selenium从亚马逊网站上提取产品的信息。 from scrapy.contrib.spiders import CrawlSpider from('//h1[@id="aiv-content-title&q
浏览 3提问于2015-07-20得票数 0
= requests.get(url) 获取一个requests.models.Response实例，我可以从其中使用scrapy提取数据 from scrapy import Selectorprint(response.json())
浏览 13提问于2020-07-02得票数 0
回答已采纳
2回答
仅剪贴式正文文本
、、、
我尝试使用python Scrapy从正文中抓取文本，但还没有成功。
希望一些学者能够在这里帮助我从<body>标记中抓取所有的文本。
浏览 1提问于2011-03-22得票数 9
回答已采纳
1回答
我已经让脚本部分工作，我可以启动它没有任何问题，这是脚本。粘贴链接在这里：，您可以看到我在cmd行中得到了什么。我确信正在搜索的关键字在这些链接中，因为我也尝试过其他单词，但它没有下载它们。import scrapy
from scrapy.http import Request
from FinalSpider.itemsitems.py
URL = "http://url.com=%d&q
浏览 2提问于2015-11-30得票数 0
回答已采纳
我的目标是构建一个从的表中提取数据的刮板。
我可能漏掉了一些很明显的东西。如果你能看看我的代码，让我知
浏览 0提问于2018-11-03得票数 0
1回答
如何获取该页中每个广告的数据？
、、、、
我正在抓取这个页面以获取每个Ad：的数据scrapy shell "http://www.cars2buy.co.uk/business-car-leasing/Abarth/695C/"
浏览 1提问于2017-04-29得票数 1
回答已采纳
1回答
我开始学习scrapy，我想知道如何在excel文件中获得每个州的学校信息。每个状态都是一个指向另一个页面的链接，我不确定如何为此编写xpath语法。请给我建议。import scrapy name = 'raiseme'
allowed_domains = ['raise.mestart_urls = ['http://raise.me&#
浏览 5提问于2021-03-20得票数 0
我使用刮除外壳来提取以下网页的数据：
fetch('https://www.apo-in.de/product/acc-akut-600-brausetabletten.24170.html')
>>> response.xpath"accordionContent5e95408f73
浏览 4提问于2020-04-14得票数 0
回答已采纳
我正在尝试提取论坛中所有帖子的标题()但是，相同的xpath在scrapy shell中不起作用。附件是chrome devtools的工作演示
浏览 2提问于2018-02-21得票数 0
我正在尝试为数据项构建xpath结构，我希望从一个站点的数百页中提取所有格式化相同的数据项。一个示例站点是response.xpath('.]/span/text()').extract()
我不知道如何
浏览 0提问于2015-06-10得票数 0
回答已采纳
我用Scrapy编写了一个蜘蛛来从quotes.toscrape.com中提取数据，但是当我将提取出来的数据导出到csv时，“(引号符号)正在将自己转换成字符，比如-欧元。# -*- coding: utf-8 -*-
name = 'Test'
allowed_domains//*[@class="text"]&#
浏览 0提问于2018-06-19得票数 2
回答已采纳
1回答
我开始学习xpath和python scrapy。到目前为止，我已经学习了这些two.But的基础知识，现在我需要知道如何定义有效的xpath选择器，以及在scrapy和xpath.Is中的一些最佳实践。有什么好的web资源可以帮助我吗？
浏览 2提问于2014-11-17得票数 0
1回答
我正在尝试从amazon.in中提取产品的url。源代码中a-tag中的href-attribute如下所示：/Parachute-Coconut-Oil-Bottle-600ml/dp/B071FB2ZVT?dchild=1
我使用了以下xpath：
浏览 0提问于2020-05-05得票数 1
1回答
我刚开始刮擦，在从表格中的嵌套标记中提取文本时遇到了一些困难。我发现的示例教程大部分仍然引用旧的被弃用的HtmlXPathSelector，但是我使用的是在更新的scrapyv0.22中找到的新的“选择器”导入(我相信HtmlXPathSelector在2013年的某个时候被废弃了::td//text()').extract()
exceptions.AttributeError: 'unicode' object has no attribute '
浏览 4提问于2014-02-03得票数 0
回答已采纳
我正在使用scrapy shell抓取这个站点的子类别部分中的所有链接：。可能有一种更高效的Xpath，但我想到的是：据我从页面源代码可以看出，只有一个带有[@id当我在Chrome中搜索这个Xpath时，这是有效的。但是当我跑的时候
response.
浏览 1提问于2016-08-01得票数 0
云服务器
ICP备案
云直播
实时音视频
即时通信 IM
腾讯云开发者
