1回答
我正在尝试刮一个电子商务网站(Lazada.sg)，我发现了一个基于scrapy：的Github代码。但是，当我在修改他是如何开发代码的时候，我不能复制以ajax格式显示相同的URL搜索(如果我错了，请纠正我)。下面是scrapy:中请求的URL示例。
他搜索的是婴儿用品。我正在尝试复制乐高项目。如果我能在显示URL的格式上得到一些帮助，我会很高兴，因为它的格式与他对刮刮的格式相同，所以我可以在我自己的用例中重用他的代码。谢谢
浏览 7提问于2022-09-07得票数 1
回答已采纳
1回答
考虑以下应用程序结构。
📷
刮板类从页面中提取必要的信息，我想将它保存到DB中。
ORM类是sequelize.js的包装器。它建立到数据库的连接，加载模型，与数据库同步。
app.js在ORM中，然后在刮板类中。
我的问题是:刮板类应该如何将收集到的数据刷新到数据库？它应该导入ORM (连接)，并有一个刷新方法，该方法检查数据是否已经被刮过。如果没有，那就保存它。有件事告诉我，这不应该是刮板班的工作。
浏览 0提问于2017-07-10得票数 0
回答已采纳
1回答
我需要使一个类似于乐高设计师的程序(只为DNA部分，而不是乐高)。有这么多不同的选项可供选择，我不确定哪一个最适合我的需求。，，，我相信还有其他的。
你能推荐一种最适合我需要的吗？
是程序最后应该看起来很像的样子。这里有一张图片：
我只知道一点JOGL编程，但在我开始之前，我想确保它对我来说是正确的。
浏览 2提问于2012-09-17得票数 2
回答已采纳
2回答
如果在乐透中从39个数字中选择七个数字，则任务是列出每个乐透行的列表。有比我的解决方案更优雅的方法吗？
rows = []
for a in range(1,40):
for b in range(a+1,40):
for c in range(b+1,40):
for d in range(c+1,40):
for e in range(d+1,40):
for f in range(e+1,40):
for g in ran
浏览 0提问于2020-11-03得票数 12
回答已采纳
3回答
我被分配到一个项目，旨在编程乐高头脑风暴与JavaScript。但是，我找不到很多关于使用Mindstorm的JS的好资源。有人有吗？
此外，我也不太明白我如何能够，例如，让车轮转动使用JS。据我所知，我需要使用Node.js。
浏览 4提问于2015-06-08得票数 1
回答已采纳
比方说，我有一份关于各种乐高及其成本的主要清单。只有两根柱子。A栏是乐高类型，B栏是乐高的费用。例如：3x3 thin block和1。或者small wheel和3。现在我想做一个单独的单张，我们把它叫做car，它从主列表中导入A和B列，并添加了C列，其中包含了建造汽车所需的零件数，比如"4轮“。列D是每一项的成本，并将有一个总数在底部。
IMPORTRANGE允许我将A和B拉到car表中。我在C列中为乐高汽车所需的所有部件加了编号，D列将给我一辆车的总成本。为了制作直升机工作表，我只需从car表中生成一个空白模板，并将编号放入C列中，生成直升机。
这一切都很好，直到我添加新的乐高片
浏览 0提问于2015-10-27得票数 3
我正在尝试从乐购网站上获取数据，以获得产品的名称和价格。下面是我的代码。有些产品没有价格，因为它们已经售罄，Python给了我一个错误，因为没有什么可刮的。我希望它能够跳过该瓷砖，并转移到下一个，如果没有价格可用。 有人知道我是怎么做到的吗？ from bs4 import BeautifulSoup
import requests
#URL to be scraped
url_to_scrape = 'https://www.tesco.com/groceries/en-GB/shop/fresh-food/all?page=1&count=48'
#Load h
浏览 12提问于2020-04-12得票数 1
回答已采纳
我正在编写一个程序，在用户的两个特定日期之间刮推文，同时确保它们不是转发或回复。我使用的是snscrape和tweepy。
for i, tweet in enumerate(sntwitter.TwitterSearchScraper('from:' + lines[x] + ' since:' + startDate + ' until:' + endDate).get_items()):
if tweet.retweetedTweet is None and tweet.inReplyToTweetId is None and tw
浏览 0提问于2021-12-25得票数 0
回答已采纳
我创建了一个爬虫网站，
(例如)
我的代码，接受开始和结束的月份和每个月的每一天，有一个乐透的结果，然后具体到每个结果的网址，例如和刮结果返回的JSON格式。除了一个特定的月份，，每个可点击的结果都不会提示一个新页面，而是一个弹出警报。
如果page.evaluate (Url)不是实际呈现页面而是调用弹出，那么我如何编写代码来处理这个问题，这样就不想执行page.goto。
const finalUrl = result_url + drawNum;
// await page.goto(finalUrl, {waitUntil: 'load', timeout:
浏览 4提问于2021-06-28得票数 0
回答已采纳
我研究了安卓平台的DropBoxManager，用来跟踪和调试我的应用程序。
我参考了这篇文章。它描述“队列是有大小限制的，如果入队数据超过最大大小，将丢弃旧数据。”但是我找不到它有多大。DropBoxManager的最大大小是多少？如果是取决于设备，我想知道三星的旗舰设备-盖乐世S20，盖乐世Note20等。
请帮帮我。我试着去找资料，但是很难找到。谢谢
浏览 0提问于2020-09-29得票数 0
9回答
是否有任何.Net库来删除字符串中所有有问题的字符，并且只以智能方式保留字母数字、连字符和下划线(或类似子集)？这是用于URL，文件名等。
我正在寻找类似于的东西，它可以执行以下操作：
简单的前奏曲
“简单英语”.to_url =>“简单英语”
“这根本就不是”.to_url =>“--什么都不是”
“摇滚乐”.to_url =>“摇滚乐”
让我们炫耀一下
“价值12美元的红宝石动力”(.to_url => )--价值12美元--红宝石权“
“如果你现在行动的话，10%的折扣”“.to_url =>”--如果你现在行动的话--10%的折扣
你甚至不想相信Icon
浏览 6提问于2010-01-10得票数 3
回答已采纳
2回答
假设我有一个看起来像这样的类型列表：
$genres = array(
'soul',
'soul jazz',
'blues',
'jazz blues',
'rock',
'indie',
'cool jazz',
'rock-blues');
...And等，用于762个值。我如何将这些类型组织成类别？
例如，我希望蓝调类别包含“蓝调”、“爵士蓝调”和“摇滚乐”。我希望爵士乐类别包含“
浏览 6提问于2013-12-27得票数 0
回答已采纳
android:networkSecurityConfig="@xml/networksecurityconfig"
用这个方法 不加固前ANDROID9.0 都可以通讯 乐固加固后就不能通讯了 怎么处理 希望解答 急 APP 在其他地方依据上线乐 应用宝被卡在这个问题上乐
浏览 508提问于2019-10-17
1回答
我使用python 4/selenium来、刮和抓取网页。我对刮这个很感兴趣。如您所见，有几个js图表。但是当我查看源代码时，我找不到点的值。我怎样才能刮掉这些价值。
浏览 3提问于2020-05-18得票数 0
1回答
如何让我的产品搜索更有效率？
、、、、
我使用MySQL作为eCommerce project.In first屏幕的后端，我在用户搜索的时候显示结果，有了这些结果，用户可以选择任何一个结果，并在选择的基础上，用户获得与所选结果相关的所有产品。
示例:屏幕1(从搜索栏)：用户搜索"tropicana“，则结果集将是：
第一:纯果乐果汁混合果汁(类别)
第二名:果汁中的纯果乐苹果汁(类别)
第3名:纯果乐橙汁(类别)
第4名:果汁中的纯果乐菠萝汁(类别)
5:果汁中的纯果番石榴汁(类别)和所有其他与纯果乐相关的产品，无论任何类别
屏幕2(在选择"tropicana凤梨果汁“之后)：用户根据选择的产品名称及其类别获得结果
浏览 0提问于2019-02-26得票数 0
1回答
我在我的任务中遇到了一个困难，我想要一些澄清。
我有下面的代码，找到书的作者和标题(或部分标题，例如找到乐高战争六号，并返回2个结果/找到顺式手和找到3个结果)。但是，如果作者返回，则仅按标题查找。如果标题是返回的，只有作者才能找到。
当我必须使用awk同时找到作者和标题时，问题就来了。
有人能指导我使用search_both函数吗？问题是我无法搜索这两个字段并打印出结果。
例如。如果我要键入作者=乐高和标题=乐高战争VI，应该只有一个字段找到，这将打印出来。
乐高战争六-乐高遗产，乐高公司，15.98美元，20，15美元
#!/bin/bash
function s
浏览 1提问于2014-01-29得票数 1
回答已采纳
2回答
在我的机器人俱乐部，我们试图让多线程功能在乐高Mindstorms NXT上工作，但看起来线程相互干扰，导致程序完全停止。
有人知道如何在NXT可视化编程环境中正确地实现多线程吗？
浏览 0提问于2009-04-24得票数 4
2回答
今天上午使用乐固加固后，上传市场，结果发现全部拒审了，因为APP闪退，测试了一下发现，原来的安装包没问题，乐固加固后闪退。也找不到客服来解决。大家遇到这种情况了吗，应用宝必须用乐固，结果发现都打不开，360市场必须用360加固，能够正常运行。
浏览 543提问于2019-11-28
1回答
我需要找到我的产品细节，如评级，而不刮刮。
这是可能的，还是任何现有的API来获取这些信息？
如果不是的话，我自己是否有可能为免费的节点js亚马逊刮刀器提供任何好的资源呢？
浏览 1提问于2021-02-06得票数 1
回答已采纳
1回答
我感兴趣的是定期抓取一个特定的网站，该网站上有大约1亿条内容。刮板可以非常快地下载和处理项目，在50毫秒左右，但即使以这样的速度，它将需要数天完成。
最明显的解决办法是使用多个刮板。然而，在某个时候，底层的the服务将变得饱和，并开始放慢速度。我想要尊重服务，而不是DDoS服务，同时尽可能高效地抓取服务。
这显然是一个优化问题，但我不知道如何建模。理想情况下，我需要知道刮板的数量，以及每个刮板的目标延迟。有什么想法吗？
浏览 0提问于2018-02-15得票数 1
回答已采纳
1回答
我的要求如下:所有录制艺术家的-names，摇滚乐的-number，每个艺术家都唱-list命令的，以便最少的摇滚歌曲的艺术家首先出现。
*请注意，有些艺术家可能不会唱任何摇滚乐，但仍应列入名单。
这应该在获得这些结果的单个查询中完成。
确保从结果集中删除不需要的列，并将您的列命名为用户友好和可读的列。
这就是我到目前为止所做的：
SELECT recording_artist.artist_name AS "Artist Name", Musical_genre.musical_genre AS "Genre",
COUNT(Song.song
浏览 1提问于2017-11-15得票数 0
1回答
这里提出的第一个问题。
我需要刮刮网站的JS onclick功能生成的url。因此，我认为Selenium可以完成这项工作，但我不知道如何在不打开其他选项卡/窗口的情况下编写代码，甚至不知道是否可行。
以下是onclick JS函数：
‘'tr class="linhares“onclick="javascript:grv(0,1,1);">
所以基本上需要这个函数返回的url。
希望你能帮我，谢谢！
浏览 2提问于2016-06-24得票数 0
回答已采纳
我需要检查不止一个子类别的函数。例如，假设我有两个类别:酒吧和音乐家。此外，音乐人类别有爵士乐，摇滚，流行音乐作为一个子类别。但是，它们也是酒吧的子类别。
我想为酒吧写不同的代码-爵士乐，音乐家-爵士乐类别。
这个代码结构不适合我。
if( has_term( 'jazz', 'genre' ) ) {
// do something
}
因为我把爵士乐分类在酒吧和音乐家下面。
当我用这种结构编写代码时，它也不起作用。
if( has_term( array('musicians','jazz'), 'genre&
浏览 0提问于2020-11-01得票数 0
我试着学习monad的概念，我正在看这个出色的 Beckend试图解释什么是monad。
当他谈到monoid时，它是一个类型的集合，它有一个组合规则，这个组合必须遵守两个规则：
联想：x @ (y @ z ) = (x @ y) @ z
集合中的一个特殊成员：x @ id = x and id @ x = x
我使用@符号来表示构图。id是指特殊成员。
第二点是我想要理解的。这有什么关系？如果没有这样的特殊成员呢？
当我学习新概念时，我总是试图把这些抽象的概念与其他一些具体的事物联系起来，这样我才能充分地理解和记忆它们。
所以我想把monad和monoid和lego联系起来
浏览 4提问于2016-02-25得票数 3
我正在寻找一个替代麻省理工的抓痕。，它有一个拖放视觉界面，使孩子可以构造编程指令，为屏幕上的行动，并控制乐高WeDo硬件。但是，尽管有开源的特性，除了乐高之外，对更便宜的硬件的改造却很少。软件似乎是在没有考虑的情况下编写的--据我所读，这段代码是复杂的、单块的，硬件接口没有可用的API。
我想要一个GUI库，它具有类似于Scratch的行为，完全允许孩子们可视化地构建编程结构。然后，我会写“块”，可以被拖放，或者允许读取输入(传感器)或写入输出(如灯，电机)。
有什么办法可以代替刮伤吗？
浏览 0提问于2016-09-26得票数 0
回答已采纳
1回答
有人知道RTMPS-Protocoll是如何工作的吗？我还没有在网上找到任何vb.net/c#的源代码、文档或库！我在某处读到它只是一个TCP连接，但这是正确的吗？如果是，我该如何使用它？
你能给我提供源代码、库或文档吗？提前感谢！
--酷乐农场主
浏览 4提问于2014-01-16得票数 0
比特币的火势带动了整个区块链行业的从业者和投资者的蜂拥而至，而区块链旅游的火势，不仅已经掀起了乐鸥在线文旅等区块链旅游平台成立的热潮，而且区块链旅游向全世界的游客描绘了没有假货、机器人自动化的蓝图。
乐鸥-风景-3.png
浏览 304提问于2018-07-13
3回答
我有一个php数据迁移脚本serializes一个文本数组。不知何故，这不在我的代码库中，但是脚本将\r\n插入到字符串中。下面是输出的示例：
产品线: 56313乐高蝙蝠侠截图\r\N56384乐高蝙蝠侠Screenshot56446乐高蝙蝠侠Screenshot56460乐高蝙蝠侠:T
不同的产品之间没有换行(如您所见，这里显示了两个产品-即两次迭代)。当第二个产品被附加到第一个产品后，\r\n被放在前面。这个问题很难解释，我真的不认为任何代码可以帮助解释它。这是什么，我如何摆脱它？我在windows平台上。
浏览 1提问于2010-01-14得票数 0
回答已采纳
因此，我正在进行我的第一个项目，我似乎不能加载刮板js文件，因为html说‘需要’是没有定义的。
我听说过需求，但这对我来说有点难理解。
这是我的javascript文件：
const malScraper = require('mal-scraper');
// more code ...
document.getElementById('output').innerHTML = currentSeason;
然后在index.html中，我希望它在这样的段落中加载刮过的结果
<p id='output'>Here: </
浏览 0提问于2019-05-12得票数 0
回答已采纳
如题，未用乐固打的包能正常使用，所以问题出在乐固打包程序自身上。怀疑是包优化的问题
崩溃日志：
vvvv5.png
浏览 589提问于2018-11-22
2回答
我一直在做一个网络应用程序，它检索所有我挑选的乐透彩票组合和它相应的获奖组合。下面是它的工作原理/我一步一步的工作：
检索将是数据库中的获奖组合表。
从“中奖组合”表中检索Lotto ID之后，它将使用它作为ID查找我自己选择的乐透票证组合。
--这里是逻辑错误开始的地方，
将第一次检索到的乐透组合与每个获奖组合进行比较。(第一次选中的组合等于第一次获胜组合1，以此类推。)
if($Picked1 == $Win1 || $Picked1 == $Win2 || $Picked1 == $Win3 || $Picked1 == $Win4 ||$Picked1 ==
浏览 1提问于2018-09-30得票数 0
回答已采纳
我试图计算多少乐高砖块，我需要建造一个简单的乐高房子。
我有以下砖块: 1x2，2x2，2x4。
我需要计算出在给定的宽度、长度和高度下，我需要建造多少块砖来建造乐高屋。
宽度和长度是以点表示的，就像在乐高板上看到的那样。这个高度是作为乐高砖头给出的。
2x4乐高积木是((2*4)*2)。就像这样：
例句:如果我想建一座房子，那就是:8点宽7点长1街区高
输出应该告诉我我需要：
点数总数: 56
1x2: 2砖
2x2: 2砖
2x4: 4砖
所以如果我用砖块盖乐高屋，它会是这样的：
到目前为止，我的代码显示了我可以用多少块砖建造房子，但我不知道如何使它只显
浏览 0提问于2017-10-11得票数 1
回答已采纳
1回答
我试着用JS刮谷歌奖学金网站。表底部有一个"Load more“按钮。有关参考，请参见以下页面：
显然，我在"Load more“按钮上使用了btn.click()，直到按钮被”禁用“为止。然后，我刮数据。有人能告诉我一种更好的方法来刮掉整个表数据吗？
浏览 3提问于2020-06-10得票数 0
我是新的与R和Rvest的网络刮刮主题。使用rvest，您可以刮静态HTML，但是我发现，从基于JS的重站点中抓取数据是非常困难的。
我找到了一些文章或博客文章，但它们似乎像一样被贬低了。
在我的例子中，我想从体育博彩网站中获得赔率，但在我看来，由于JS，这在我看来是不可能的。
2018年有一篇关于从PaddyPower()获取赔率的文章，但这也过时了，因为PhantomJS已经不可用了。RSelenium似乎是一种选择，但回购有许多问题，。
那么，是否有可能在当前状态下使用RSelenium，或者有什么选项可以代替RSelenium呢？
亲切问候
浏览 2提问于2020-09-13得票数 1
回答已采纳
2回答
我有一堆乐高积木。我还有一些由3块乐高积木制成的数字。我想知道我可以创建多少个数字组合，目前乐高砖块阵列。
有人给我一些参考资料，这样我就能解决这个问题了？
我可以使用哪种算法？有什么我能用的理论吗？
谢谢您能提供的任何帮助。
/Hans
编辑:这个问题是
浏览 2提问于2012-04-10得票数 2
回答已采纳
1回答
我用氦刮网页。
result = start_firefox(
"https://www.medtronic.com/covidien/en-us/products/brain-monitoring/bis-monitoring-system.html",
)
浏览 10提问于2022-03-10得票数 0
回答已采纳
如许多示例所示，您可以很容易地从响应中提取实体值，如下所示：
华生:好的！你想听什么样的音乐？
使用者:交响乐
华生:好的，演奏交响乐。
当用户说“我想听交响乐”而不仅仅是“交响乐”时，您可以从Watson那里得到同样的响应，前提是：
意图#i_want_to_hear有这样的例子：“交响乐”、“我想听摇滚”、“我想听爵士乐”。
实体体裁有价值类型:交响乐
节点条件为@ The。
节点输出文本为"OK！Playing @ The“
如果问题是关于自由文本(名称)而不是实体，那么我能实现同样的健壮性吗？例如：
华生:你叫什么名字？
使用
浏览 0提问于2016-09-13得票数 1
2回答
用react在R中抓取网页
、、、、
我试着在下面的页面上刮擦：
此页面具有反应内容。
我可以用代码刮第一页：
url="https://metro.zakaz.ua/uk/?promotion=1"
read_html(url)%>%
html_nodes("script")%>%
.[[8]] %>%
html_text()%>%
fromJSON()%>%
.$catalog%>%.$items%>%
data.frame
因此，我有所有的项目从第一页，但我不知道如何刮别人的网页。
这个js代码移动到另一个页面，如果有帮助的
浏览 0提问于2018-07-26得票数 4
回答已采纳
2回答
我不是开发人员，我有点绝望。我有一个建立在交响乐/反应-本土的应用程序。现在我们正在应用程序上实现条纹支付，我的开发人员似乎已经走投无路。
我之所以选择reason本地语言，是因为我的手机和网络应用程序都有一个代码库。我正在尝试使用stripe来处理我的应用程序上的付款，但是看起来条形反应本机并不在web平台上运行。
有没有人想过一种方式，使条纹在网上工作，而不必建立一个单独的反应应用？
我正在考虑使用平台条件从react本机模块或从stripe.js脚本运行条带，但我被告知这是不可能的。
如果有人知道我们可以试试的话，那会很有帮助的。
谢谢
浏览 4提问于2022-01-26得票数 0
我正在使用puppeteer制作刮板，我制作了js脚本，它将一些数据存储在数组中(当我在浏览器的控制台中使用它时，它可以工作)……但是当我尝试使用fs.writeFileSync将其存储在JSON文件中时，我得到了错误...这种方式可以在我使用nightmare.js创建的相同的刮板中工作。我假设我以错误的方式传递了array (对于木偶操纵者)，并且我不确定该怎么办。有问题的代码： await page.addScriptTag({path: 'script.js'}).then((array) => { fs.writeFileSync('data'
浏览 47提问于2019-03-05得票数 1
2回答
刮擦高特，等待满载
、、、
我试图通过Goutte从流行的拍卖web服务中抓取，但是它们的代码片段是由javascript提供的，问题是Goutte只返回我没有JS作业的DOM。那么，如果交响乐是无头浏览器，那么等待抓取直到呈现完整的内容是正确的吗？我检查过正常的幻影，但我在古特从来没有发现过这种能力。
浏览 14提问于2017-12-23得票数 3
回答已采纳
4回答
我最近升级了我的CPU从一个雅典乐II X2 250到雅典乐II X4 610 E(45W 4核-不能超过效率)。需要重新安装ubuntu吗？
浏览 0提问于2011-10-12得票数 17
我是很新的刮刮，我要弄清楚如何设置一个csv出口的结构。我在下面的示例中有2种数据刮除: ids和链接
下面是我使用的简单代码：
class MybotSpider(scrapy.Spider):
name = 'mybot'
start_urls = ['url']
def parse(self, response):
all_dataids = response.css('li::attr(data-id)').extract()
all_links = response.xpath(
浏览 1提问于2019-05-21得票数 2
回答已采纳
1回答
我仍然对REST、REST等等感到很困惑。
我想要建立一个简单的网络应用程序，让用户预订事件，我想做它在Symfony 3 + Angular。将来，我也可以让它在手机上工作。
我想这样做的原因是为了学习交响乐3，REST和角度更好，并增加我将被雇用的机会。
我有几个问题：
1)除了学习角之外，使用角模板和HTML作为前端的真正好处是什么？
2)据我所知，通常有人建议使用轻量级框架来构建REST。为什么他们不建议交响乐？
3)你有什么建议来证明你有一套很好的技能可以被录用？
浏览 2提问于2017-08-28得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
