1回答
我正在努力废除，特别是，我试图访问每一行中都有信息的表行，如下图中高亮显示的绿色。我不需要表标题，只需要行。response.css('.datadisplaytable .datadisplaytable')
我使用.datadisplaytable两次，因为我试图选
浏览 7提问于2017-07-27得票数 0
回答已采纳
1回答
但是，我无法从scrapy响应中选择包含ASIN的表。如何选择表以便解析表中的数据？import scrapy name= 'amazon.com'
浏览 2提问于2018-09-26得票数 1
1回答
是否有可能扫描表格中的一行并仅改变列，以获得一系列数字。我目前使用了很多变量。html/body/div/table/tr[6]/td[counter in range 2 - 9]/p/span/text()').extract()class MainSpider(scrapy.Spider
浏览 1提问于2019-11-04得票数 2
我目前的程序包括：- Current Pipeline:理想情况下，我希望使用</em
浏览 6提问于2020-01-06得票数 1
回答已采纳
1回答
我用姜戈，芹菜，scrapy。import CrawlerProcessfrom scrapy_parser.scrapy_parser.spiders.map_linksimport MapLinksSpiderfrom thread
浏览 0提问于2018-06-21得票数 0
我正在尝试抓取多个表，这些表的表名都存储在h3标记下。有一些数据列我可以抓取，没有问题，当我提供下一个url时，我可以将这些数据附加到csv文件中。我不能解决的问题是获取表头并将其相对于表的每一行进行存储。这样做的原因是，当下一个表被输入时，我需要知道它属于哪个表。是否可以使用len循环来建立表的长度，然后将表头写到每一行？可以
浏览 0提问于2017-11-16得票数 0
结构如下
response.css("div.trk-cell.title a").xpath("@href").extract()resource.xpath("//div[@class='trk-cell title']/a/@href").get()response.css("div.trk-cell.artistsimport scr
浏览 6提问于2021-12-29得票数 0
回答已采纳
我正在尝试将我的selenium web刮刀转换为scrapy，因为selenium并不是主要用于web抓取。from scrapy.crawler import CrawlerProcessmin_price = "65000"
c
浏览 30提问于2020-06-04得票数 0
回答已采纳
2回答
thelist表是一个实体列表--业务、博客、场所等--我已经为这些实体刮过目录站点(使用机械化、BeautifulSoup和regex)。数据表中的行id是"thelist_id“，它是返回到thelist表的外键。
现在，我想使用蜘蛛到每个实体的自己的网站和刮电子邮件。我计划使用python脚本从"thelist“中选择一个实体，并使用os
浏览 5提问于2015-10-19得票数 1
回答已采纳
1回答
我有一些看起来像截图的html。我想弄到桌子的行。cellspacing="0"'>Out[6]: []Out[7]: []
为什么我不能选择
浏览 3提问于2016-10-19得票数 3
回答已采纳
3回答
我无法执行以下操作：错误是：这就好像我的机器上没有安装LXML，但它确实安装了。另外，我认为这是scrapy内置的默认模块。也许不是？
浏览 0提问于2013-10-17得票数 5
回答已采纳
1回答
从网站上抓取桌子时遇到的问题？
、、、、
虽然我匹配xpath并发现了表的字段，但我无法从站点中提取任何内容，这就是我的蜘蛛的样子：import scrapy
name = "table1" 'wesite.comsite.xpath('td[2]
浏览 1提问于2016-10-27得票数 1
回答已采纳
当我打电话的时候print "Hello World"
它在cmdline.execute之后停止脚本，并且不运行脚本的其余部分并打印"Hello World“。
浏览 0提问于2014-07-22得票数 3
1回答
我尝试只解析html表中item和Skill Cap列的数据：http://ffxi.allakhazam.com/dyn/guilds/Alchemy.html 在解析时，我遇到了对齐问题，因为我的脚本是从其他列解析的import scrapy
name = "recipe_table"
start_urls = ['http:&#
浏览 22提问于2019-05-10得票数 0
回答已采纳
我有一个ProductItemlLoader，它只是一个简单的ItemlLoader，它加载到一个带有offer_type字段的简单ProductItem中 我运行以下代码： il = ProductItemLoader
浏览 59提问于2020-09-19得票数 0
我有下面的例子import scrapy_playwrightfromscrapy_playwright.handler import Page, PageMethod
name =from second parse next")
def parse_
浏览 16提问于2022-11-03得票数 -1
我正试图从以下页面获得GDP估计数(根据IMF)：def parse(self, response): for country in title//td[3]/text()").get()}
另一方面，我可以使用getall()方法来获取所有数据，但是当我将所有数据点导出到CSV/XLSX时
浏览 1提问于2022-09-28得票数 0
回答已采纳
8回答
我正在使用Python 2.7开发Scrapy 0.20。我发现PyCharm有一个很好的Python调试器。我想用它来测试我的抓取蜘蛛。有谁知道怎么做吗？我尝试过的东西File->Setting->Project structure->Add content root.
浏览 119提问于2014-02-15得票数 107
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
