1回答
我尝试解析一些bbc代码，如下所示：
[item=1]a[/item]
[item=2]b[/item]
[item=3]c[/item]
我能买到第一件，但买不到第二件和第三件。我正在尝试抓取每个项目，并将其转换为链接。下面是我想要的结果：
<a href="#1">a</a>
<a href="#2">b</a>
<a href="#3">c</a>
这就是我要做的：
/\[item=(\d+)\](.*?)\[\/item\]/
这给了我：
["[item=1]
浏览 0提问于2012-02-15得票数 0
回答已采纳
7回答
这里是C#的新手，但我已经用了很多年了。我试着用谷歌搜索一下，得到了几个我不太需要的答案。我想从网站上抓取(X)HTML，然后使用DOM (实际上，CSS选择器更好，但也行得通)来抓取特定元素。在C#中到底是如何做到这一点的？
浏览 0提问于2011-06-29得票数 2
7回答
Python HTML抓取
、、、、
这并不是真正的抓取，我只是试图在类具有特定值的网页中查找URL。例如：
<a class="myClass" href="/url/7df028f508c4685ddf65987a0bd6f22e">
我想要得到href的值。你有什么建议吗？也许是正则表达式？你能发布一些示例代码吗？我猜html抓取库，比如BeautifulSoup，就是为了这个有点过分了……
非常感谢！
浏览 1提问于2009-11-25得票数 3
回答已采纳
1回答
我正在寻找为英特尔x86上的提供高级接口的函数。
我知道我可以使用内联ASM来做这件事(如果需要的话，我会这样做)，但如果可以的话，我更愿意从别人那里抓取代码。
浏览 0提问于2009-03-05得票数 3
回答已采纳
2回答
一段时间以来，我一直试图想办法在C++中做一些简单的网站抓取。我偶然发现了cURL库，但是我无法正确地安装它，所以我将尝试另一种方法。
你们中有人知道什么方法吗？使用cURL是一个可以接受的答案，如果后面是关于如何使用C++在Win32上安装它的详细说明的话。
我可以在某种程度上简化它吗?还是在C++中这是一个不可能的任务？如果是这样的话，那么冒险使用C#会更容易吗，尽管我以前也从未使用过它？
浏览 3提问于2013-01-04得票数 0
13回答
我有一个特定的项目，我想在其中使用脚本语言+ C，或者作为替代方案使用100% Java解决方案。
该程序改编了一个遗留系统，以便与其他现代系统一起使用。
基本上，对于我可以使用的语言，我几乎没有选择。我有C/C++、Java1.4，我还为这个环境编译了Lua。
该程序进行“屏幕抓取”，并必须处理大量字符串。这部分代码是高度可变的。
我公司的大多数开发人员都使用C语言，所以我最初的设计是用C语言编写一些部分，并使用Lua来处理字符串和频繁更改的部分。我被告知‘你必须证明你使用脚本语言是合理的。’所以我用100%的Java修改了我的设计，结果被告知- Java的性能不够好。你应该用C语言来做所有
浏览 1提问于2009-12-09得票数 4
回答已采纳
有没有人有任何可以进行UDP跟踪器抓取的代码片段？我有抓取UDP URL和信息散列列表，但不知道如何发送和接收抓取请求。
浏览 50提问于2018-08-14得票数 0
我需要抓取的img src是：
div id="recaptcha_image" class="width: 300px; height: 57px;" style="width: 300px; height: 57px;">
<img width="300" height="57" src="http://www.google.com/recaptcha/api/image?c=03AHJ_VuvlvMA4JvVIQvDR4C_iDbOTwOF5FUIRPGkkSImDRYAD6sY2L0Ix
浏览 0提问于2012-01-09得票数 0
回答已采纳
我研究了一下RSelenium，发现支持的浏览器只有chrome、firefox、phantomjs和internet explorer。Microsoft Edge是我笔记本电脑上唯一的浏览器，因此我正在寻找一个软件包，它可以帮助我在不安装其他浏览器的情况下从Microsoft Edge中抓取数据。有没有可以安装的包来抓取Microsoft Edge中的数据？
浏览 28提问于2021-11-04得票数 1
我试图从这个中抓取一些html代码，现在当我打印所有内容时，一些链接(我只想要“目录”和“打印机友好版本”)在href内有这个字符串："../etc“。当我要打印抓取的代码时，我需要用全局路径替换href的本地路径，这样我就可以点击抓取的链接到达正确的网页。如果请求的操作没有用处，有没有办法在我需要处理的href中写入正确的路径？
#!C:/Python27/python
from lxml import etree
import requests
q = "http://www.dlib.org/dlib/november14/giannakopoulos/11gianna
浏览 0提问于2015-09-15得票数 1
我想要从windows应用程序中抓取文本数据，以便使用现有的ruby代码进行额外的处理。在windows应用程序中使用Ruby更新数据时可以抓取数据吗?我应该从哪里开始？
浏览 3提问于2010-04-07得票数 2
回答已采纳
有没有办法在C#中使用DOMXPath进行web抓取？或者，有没有其他方法可以做到这一点？
浏览 0提问于2011-12-20得票数 0
回答已采纳
在SharePoint 2013本地安装中，我们配置了增量爬网，每15分钟运行一次。
现在我们也需要一种手动开始抓取的可能性。有没有可以调用的WebService来手动开始抓取？也许甚至有可能在较小的范围内开始抓取，比如只有一个列表或网站？
浏览 0提问于2015-03-17得票数 1
1回答
优化Web爬行
、、、
我正在开发一个快速的工具，可以从网页上抓取图像。目前，我使用WebClient获取页面的源数据，解析源中的图像URL，然后使用WebClient.DownloadFile将它们单独下载到一个文件夹中。这可能需要相当长的一段时间。
我知道所需的大部分时间是由于我的连接和下载数据。
有没有其他更有效的方法来做这件事，无论是C#超文本标记语言解析库还是其他什么？
浏览 0提问于2012-12-18得票数 0
回答已采纳
3回答
我不知道是否允许它在这里问这个问题，但我会尝试任何方式。
我正在寻找一种简单的编程语言，供普通用户理解和编写，用于我正在制作的游戏中。我正在用C++构建我的框架。
我在考虑Lua，但我认为它可能对普通用户来说太难了。
只需要基本的动作，如向前走，射击，抓取这个，把这个放在这里，等等。这是一个基于瓦片的游戏。
浏览 0提问于2012-03-21得票数 4
回答已采纳
我想知道是否有类似于C++的WWW::Mechanize的web抓取库/API？我不仅在寻找HTML解析本身，而且还支持有状态的HTTP浏览、Web表单的提交，以及维护和使用cookies，例如用于制作Web机器人。
浏览 1提问于2011-09-11得票数 2
1回答
我试图通过转换成英语来抓取一个在法国的页面。
这是我的代码，使用了漂亮的汤和用python编写的请求包。
import requests
from bs4 import BeautifulSoup
url = '<url>'
headers = {"Accept-Language": "en,en-gb;q=0.5"}
r = requests.get(url, headers=headers)
c = r.content
soup = BeautifulSoup(c)
但这仍然是给出了法语文本。
有没有人能建议修改/替代代码。
浏览 16提问于2018-09-26得票数 0
2回答
这只是一个一般性的问题。目前，我正在做网页抓取使用正则表达式。但是我认为有时候弄清楚正则表达式太难了，所以我在想，XSL/XPath是C#中正则表达式的替代方案吗？
另外，我想知道除了上面列出的两种技术之外，是否还有更先进的网页抓取技术。谢谢。
浏览 0提问于2011-02-17得票数 4
回答已采纳
我尝试使用'edeR‘包抓取我的电子邮件数据。我成功获取“收件箱”文件夹，但未能获取“已发送邮件”。以下是代码。
Sys.setenv(JAVA_HOME="C:/Program Files/Java/jre1.8.0_121")
library(rJava)
library(edeR)
mail_sen<-extractBetween(username="xxxx@gmail.com",
password="xxxxx", folder="[Gmail]/Sent Mail"
浏览 0提问于2017-04-27得票数 0
2回答
我有一个网站，我正在尝试使用Python和BeautifulSoup抓取。网站本身可以用两种语言(泰语或英语)查看；您所要做的就是点击屏幕右上角的泰语或英国国旗，数据就会以所选语言显示。然而，在脚本中，我只能抓取泰语(默认语言)的数据，我不知道如何获得英语的数据，因为当你点击泰语或英国国旗时，URL不会改变。查看页面的源代码，发现没有与这两个标志相关联的href。我打开了Firebug跟踪，并试图搜索一些东西来给我提供线索，但没有找到任何东西(然后你必须确切地知道要寻找什么，才能知道发生了什么，这就是我的问题)。
谢谢，格伦
浏览 2提问于2011-06-08得票数 0
4回答
昨晚，我遇到了一个叫Jython的术语，这对我来说有点陌生，所以我开始阅读它，只是为了增加我对Python的困惑。我也从未真正使用过Python。这就是我所困惑的。
Python is implemented in C --这是否意味着解释器是用C编写的，还是解释器将其源代码转换为C呢？
CPython不过是最初的Python &这个词是后来发明出来的，是为了区别它和Jython -是真的还是假的？
既然Python是用C实现的(不太确定这意味着什么)，但这是否意味着python可以与任何C代码无缝集成。
Jython是一种新的编程语言，还是它的语法和其他编程结构看起来
浏览 4提问于2011-01-29得票数 11
回答已采纳
1回答
我是一个非常绿色的Linux。我现在正在学习Linux基础课程。作为我评估的一部分，我需要做一些Perl脚本和C。但是，我们也被要求构建一个GUI应用程序，它将启动那些脚本，提供它们作为输入，用户将通过GUI输入字符串。
我熟悉C、C#和Java:在IDE中开发一个简单的GUI的最好方法是，您只需抓取一个按钮或任何需要的东西，然后将它放在屏幕上，然后只编写代码即可。(我正在运行Ubuntu 64位。)
浏览 0提问于2013-07-11得票数 0
3回答
我是网络抓取的新手，并试图抓取以下网站：
我正在尝试使用python进行抓取。我已经尝试了请求，PhantomJS，selenium chromedriver来获取html。但是我得到的html与我在使用google chrome进行检查时看到的html不匹配。
我对抓取非常陌生，对html的了解很少，对JavaScript几乎一无所知。我的主要难题是获得我在google chrome中看到的html，这样我就可以开始抓取了。
提前感谢！
浏览 30提问于2018-02-01得票数 0
1回答
当我连接到正确的表时，我得到了太多的重复项。我正在尝试从正确的表中获取最新的记录，但是，无论我尝试什么，它都不起作用。 到目前为止，我已经尝试过： PROC SQL;
CREATE TABLE fs1.sample AS
SELECT A.*,
B.xx1,
max(B.time_s)
FROM lx1.results a left join (Select Distinct C.id, c.per FROM lx2.results c
Where c.id = a.id
浏览 37提问于2021-08-15得票数 0
回答已采纳
2回答
只需从中抓取以下代码(它基本上有助于转换ASP.NET GridView的分页，从而可以将引导程序的pagination类应用于它)。我试图理解代码中的多个返回语句?是错误还是Javascript实际上是那样工作的(我不是Javascript pro，但C++、Java和C#会跳过第二个return，C#实际上会显示编译时警告)：
function convertToPagination(obj) {
var list = $('<ul class="pagination"/>');
$(obj).find("tbody t
浏览 0提问于2014-06-17得票数 0
回答已采纳
我需要以一种确定性的方式将字符串分组到十个不同的组中，并保持一定程度的一致性。字符串是来自不同来源的标识符，它们都具有不同的(基本上未知的)格式。
为了实现这一点，我决定对字符串进行哈希运算，并对10进行mod。然而，我将在两个不同的位置执行此操作，我需要它们的结果保持一致，一个是C#应用程序，另一个是python应用程序。
为了确保一致的散列，我决定使用MD5 (相当快且一致)。Python在库中已经有了这个库，C#在中也有一个这样的库
然而，我需要对这些数字进行整型和模运算，以保持一致性。在python中，这很简单。
md5 = hashlib.md5()
md5.update(my_st
浏览 0提问于2016-03-04得票数 3
1回答
我读了一本关于编译器设计的书，其中有一个部分说，
不同语言编译器的主要区别在于它们生成的代码。通常可以说，命令语言和面向对象语言的编译器用汇编语言生成代码，而函数式语言编译器用C或C++生成代码。
关于C/C++的最后一部分是对的吗？我无法通过谷歌搜索找到任何东西，所以我在这里问。
浏览 2提问于2016-11-20得票数 0
回答已采纳
在DMD源代码中，tryMain函数在AST上运行几次优化。我要做的就是抓取AST，手动运行passes并检查AST模块。是仅仅修改了tryMain函数，还是在DMD中有一些专门用于此目的的钩子？我想保留所有预先完成的命令行处理，然后获取AST。我不反对DMD继续它的快乐之路，只要我能事先让AST检查它。
浏览 19提问于2021-03-30得票数 1
1回答
我已经成功地配置了Hadoop (2.x)、Hbase和Nutch 2.3.1。我还抓取了一些样本页也进行了测试。现在，我必须使用开源工具cld2对特定语言进行聚焦爬行。如果爬行文档不包含该特定语言，则不应保存该文档(以Hbase格式)，也不应将该文档索引到Solr。在Nutch 中，没有在获取时给出扩展点。有没有其他可能的方法来做这份工作？
浏览 2提问于2017-09-26得票数 0
回答已采纳
2回答
在MVC web应用程序框架的上下文中使用将存储检索的特定机制与控制器分离开来。
每当我使用此模式时，每个唯一查询的存储库类中都会出现大量的方法。例如，在我前面链接的文章中，有7条：
抓住所有问的问题
在视图中为表单绑定创建一个简单的问题
抓取分页的问题
创建和存储一个问题
按主键抓取问题
使用主键和某些数组数据更新问题
按主键删除问题
我能想象到更多：
抓住所有的问题并给出答案
抓住所有的问题，没有答案超过一定的年龄
用特定的关键词抓取所有问题
抓取所有标记为垃圾邮件或已删除的问题。
抓取所有问问题的用户
基本上，在这种模式下，
浏览 4提问于2015-03-09得票数 2
3回答
我有一个网站，我的爬虫需要遵循序列。例如，在开始执行a2之前，它需要执行a1、b1、c1等操作。a、b和c中的每一个都由不同的解析函数处理，相应的urls在请求对象中创建并生成。下面大致说明了我正在使用的代码：
class aspider(BaseSpider):
def parse(self,response):
yield Request(b, callback=self.parse_b, priority=10)
def parse_b(self,response):
yield Request(c, callback=self.par
浏览 1提问于2012-03-04得票数 11
回答已采纳
1回答
我是一名学生，我还在学习飞镖语言和颤振框架，我试着开发一个应用程序，让你能够用http post请求登录到一个站点，并通过使用一些正则表达式操纵html源代码的响应来获取数据(类似于数据抓取)。
我试过这样做，但没有按计划进行。
我做了这个！几年前，我使用了一个名为vb.net的类库，它是用于桌面的，它帮助我做到这一点。
在本例中，我使用了 dart包。
这种工作可以用飞镖做吗？
这个有什么特别的包裹吗？
有可用的文档吗？
我知道html不是一种常规的语言，我问是否可以使用http请求登录到一个站点！？如果我能做到这一点，我就可以操纵响应，并得到一些正则表达式所需的内容。
我想做些像C#这样的
浏览 0提问于2019-06-10得票数 0
在我开始编写自己的网站之前，我需要抓取(经过批准的)网站。什么是抓取网站的最好工具/方法，它既快速(多线程)又易于学习？
浏览 1提问于2010-03-09得票数 5
回答已采纳
我从中抓取了Nullable类的源代码，并将其放到文件中，并将其重命名为NullableZZ (以及NonVersionableAttribute的源代码为单独的文件)。当我尝试构建下一个代码时：
static void Main(string[] args)
{
NullableZZ<int> n1 = 100;
NullableZZ<int> n2 = null;
}
我有个错误：
Error CS0037不能将null转换为“NullableZZ”，因为它是不可空的值类型ConsoleApp2 ConsoleApp2
为什么C#编译器不想编
浏览 0提问于2018-10-12得票数 4
回答已采纳
13回答
嗨，我想创建一个桌面应用程序(c# prob)，抓取或操纵一个第三方网页上的表单。基本上我在桌面应用程序的表单中输入我的数据，它去到第三方网站，使用脚本或任何后台，输入我的数据(包括我的登录)，并为我单击提交按钮。我只想避免加载浏览器！
没有做太多(任何！)在这方面的工作我想知道像perl，python，ruby等脚本语言会允许我这样做吗？或者简单地使用c#和.net完成所有的抓取？哪一个是最好的？
我在想脚本，因为可能需要挂接到相同的脚本，来自不同平台上的应用程序的东西(例如symbian mobile，我不能像桌面版本那样用c#开发它)。
这不是一个网络应用程序，否则我可能会使用原来的网站
浏览 0提问于2009-04-17得票数 12
我正在尝试使用OpenCV编写一些代码。我的传感器来自Point Grey Systems，它使用FlyCapture应用编程接口来捕获图像。我想抓取这些图像，并使用Python在OpenCV中对它们做一些事情。FlyCapture完全是C/C++，所以我启动SWIG来创建绑定。我是在重新发明轮子吗？FlyCapture的python绑定是否已经存在于某个我不知道的地方？
浏览 2提问于2011-08-17得票数 4
回答已采纳
我目前使用的是以下代码：
var wordRandomizer = {
run: function (targetElem) {
var markup = this.createMarkup();
targetElem.appendChild(markup);
},
createMarkup: function () {
var that = this;
var frag = document.createDocumentFragment();
this.elem = document.cr
浏览 3提问于2013-10-30得票数 3
3回答
我理解COM如何实现编译器不可知论的C++代码，因为它通过谨慎使用C++语言的哪些特性来定义ABI。它只是C++代码，以一种非常聪明的方式与C++代码对话。但是，我仍然不明白它如何允许与C#或Javascript进行语言互操作。
边界在哪里？我现在唯一的解释是，语言编译器本身必须对COM有特殊的支持，这样它才能生成正确的汇编代码，以便在调用者/被调用者之间进行准确的通信。
浏览 2提问于2019-02-08得票数 0
回答已采纳
2回答
为iOS开发RSS阅读器？
、、、、
我喜欢做一个应用程序，阅读文章从网站广告RSS或JSON。我应该使用什么方法将XML或JSON抓取到我的应用程序？如何判断数据何时在本地可用？
谢谢。
编辑:我对iOS使用Objective-c。我需要iOS的代码。
浏览 0提问于2010-08-30得票数 0
回答已采纳
1回答
我有一个大学项目，在这个项目中我必须使用c++中的Bison和Flex为老师选择的语言构建一个编译器。
该语言是面向对象的垃圾回收动态类型化语言。
问题是，当我们只知道运行时的类型时，我和我的朋友只是对如何为a.x编写mips代码感到困惑。让我们来看看这段伪代码：
class A{private x;public A(){x=10}}
class B{public x;public B(){x=2}}
class C
{
public static main(args)
{
n=input('integer');
if(n>5)
浏览 1提问于2015-05-09得票数 3
我写了一个简单的OpenGLES应用程序使用马里-400GPU。我从摄像头抓取缓冲区，并使用GPU渲染。在摄像头流的顶部，我想渲染一些带有一些可配置文本的矩形框。在OpenGLES中渲染矩形文本的最佳方法是什么？
浏览 2提问于2019-07-15得票数 0
1回答
这里是Python新手。
我正在寻找一种方法来保存我的python脚本在线，以便我可以从工作和在家工作他们。我想构建一些(简单的) web抓取工具，使用机械化，也许是Scrapy。
在做了一些研究之后，我想我需要的是一个在线IDE (对吗？)我找到了c9.io。问题是c9.io被证明太慢了，即使对于像打开和阅读页面这样非常简单的任务来说也是如此。
你对我在网上写、保存和运行网络抓取脚本有什么想法吗？
请记住，我无法在工作中使用命令行保存或运行脚本。我需要网上的东西。
浏览 2提问于2013-08-13得票数 0
回答已采纳
2回答
因此，我一直在开发一个富文本编辑器，它实际上只是一个美化的、可内容编辑的div。当我保存它时，我使用.innerHTML抓取了所有的格式，但现在我遇到了一个问题，当不支持contenteditable时，我希望能够有一个备用文本框。(iOS) innerHTML的输出包含许多不必要的样式，我想知道清除这些样式的最好方法是什么。
例如：
将innerHTML输出过滤到“cleaned”示例的最佳方法是什么？
编辑:从google docs更改为jsfiddle
浏览 0提问于2010-11-07得票数 1
1回答
以下是我的PoC代码：
a.h:它实现了一个单例方法来创建一个实例
#pragma once
class A
{
public:
int a;
static A& Instance() {
static A a;
return a;
}
};
b.h:它声明一个函数，它将尝试在内部创建一个A实例，并输出它的地址。
#pragma once
void test_b();
b.cc：test_b的实现
#include "b.h"
#include <iostream>
#include "a.h"
void
浏览 4提问于2022-04-11得票数 1
2回答
我正在做一个项目，让我从页面中抓取HTML，将数据存储在XML中，然后从那里抓取特定标签之间的数据，并将其导出到电子邮件文件中。
我一直在通过互联网和stackexchange做研究，以了解试图完成这项任务的基础知识。但是，我猜这可能不像几行代码那样简单，只需几行代码就可以将HTML写成XML。我不是在寻找直接的代码，而是更多地寻找一个大致正确的方向。
浏览 0提问于2015-03-16得票数 0
使用Python，我正在尝试抓取一些Behat场景。下面是regex： (Scenario:([\s\S]*?)(And|When|Then|Given))。
当前版本的代码是items = re.findall(r'Scenario:([\s\S]*?)(And|When|Then|Given|#)', contents, re.MULTILINE)。这是可行的，除非其中一个字符串在场景中。
我搞不清楚的是，当出现的字符串是新行上的第一个字符串时，如何才能匹配(And|When|Then|Given)。更好的是，如果我可以匹配一个新的行，它有一个制表符或空格数。
这里的最终目
浏览 6提问于2019-09-26得票数 0
回答已采纳
1回答
我正在通过Zend_Mail创建一个动态内容的时事通讯，但是我想验证生成的W3C代码，有没有办法让整个电子邮件代码发送，以便我可以抓取它的验证？getBodyHtml函数没有正确返回代码，因为它在电子邮件中添加了诸如：<tr>=0D=0A=<td width=3D"100%">=0D=0A之类的内容。
浏览 0提问于2011-11-30得票数 4
回答已采纳
2回答
我一直在尝试从雅虎财经中抓取数据，但每次尝试都会得到以下错误：
Traceback (most recent call last):
File "C:\Users\nnarn\PycharmProjects\papaproject\main.py", line 15, in <module>
print(str(parsePrice()))
File "C:\Users\nnarn\PycharmProjects\papaproject\main.py", line 8, in parsePrice
soup=bs
浏览 34提问于2021-03-12得票数 0
当我用tensorflow抓取器库做推理时，我总是得到"I tensorflow/core/grappler/optimizers/meta_optimizer.cc:334] Starting optimization for c++ item: tf_graph“的信息，有谁知道如何关闭这个信息吗？
另外，我已经试过export TF_CPP_MIN_VLOG_LEVEL=X了，X号都不能用。我认为注释源代码334:LOG(INFO) << "Starting optimization for grappler item: " << item
浏览 0提问于2018-09-28得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
