1回答
我已经编写了一个爬虫应用程序，它打开给定的网页，并将HTTP请求和存储在excel表中。所以简单地说，我如何让我的爬虫点击按钮？
浏览 2提问于2013-11-09得票数 0
1回答
遍历远程数据
、、
我正在尝试从一个网站(一个电影列表)中抓取一些数据--但是这个网站一次只能显示大约50个数据，并且需要用户点击一个按钮才能加载更多。有没有一种方法可以让我编写单击按钮的脚本，或者以某种方式遍历数据？
浏览 0提问于2014-05-09得票数 0
3回答
我最近开始在我的网站上看到像Java/1.6.0_14 (及其变体)这样的用户代理
这是什么意思。它是浏览器还是机器人还是别的什么？
浏览 0提问于2009-07-02得票数 5
回答已采纳
我们正在尝试抓取这个页面上的可用性：
我需要使用我的爬虫来选择“所有楼层平面图”，并获取所有的可用性。但我相信数据实际上是通过Javascript请求发送的。有没有办法让我的Nokogiri爬虫渲染它？或者模拟点击按钮的过程？
浏览 1提问于2015-06-10得票数 4
facebook内部的URL共享方式如下：变成了
http://www.mydomain.com/?fb_action_ids=423308397714910&fb_action_types=og.likes&fb_source=timeline_og&action_object_map=%7B%22423308397714910%22%3A10151847670865082%7D&action_type_map=%7B%22423308397714910%22%3A%22og.likes%22%7D&action_r
浏览 2提问于2012-08-23得票数 3
回答已采纳
0回答
我正在使用ruby gems (nokogiri & mechanize)来制作一个网站爬虫，但这个网站包含引导模式(弹出窗口)，它是在点击按钮时动态生成的。这个(模态的)内容在按钮点击时显示，在一些URL上使用"get“方法。如何使用"ruby“获取动态内容的内容？
浏览 13提问于2018-07-16得票数 0
回答已采纳
我想写一个应用程序爬虫。为此，我想选择Android活动中所有可点击的按钮/图像/图标。然后一个接一个地点击。
浏览 7提问于2017-04-28得票数 1
我正在为我的网站制作一个类似java applet的图库(如果你感兴趣的话，可以处理applet)，我想让applet在网站第一次加载时不再运行。然后，当适当的按钮被点击时，一段javascript将告诉applet继续执行，直到按下另一个按钮停止它。由于某些原因，它使Firefox慢得像爬虫一样。
浏览 1提问于2010-04-04得票数 0
嗨，我有一个基本的蜘蛛，运行来获取给定的域上的所有链接。我希望确保它保持其状态，以便可以从它离开的地方恢复。当我第一次尝试时，我遵循了给定的url .But，它运行得很好，我以Ctrl+C结束它，当我试图恢复它时，爬行会在第一个url上停止。2016-08-29 16:51:08 [scrapy] INFO: Dumping Scrapy stats: 'downloader/request_count': 4,
'downloader/request_m
浏览 20提问于2016-08-30得票数 3
我有一个结果页面，结果是用ajax加载的，这意味着分页按钮正在调用JS。链接到结果页是美丽的‘/结果/销售/06589’，我会引导谷歌到这个页面，但有没有办法让爬虫机器人点击分页按钮。
浏览 0提问于2011-06-04得票数 1
我需要运行一个php脚本(网站爬虫)上提交按钮点击，而不是页面重新加载。后台脚本运行后，应出现确认/警报弹出窗口，表明站点爬网程序已结束。有什么想法吗？
浏览 0提问于2012-04-17得票数 0
我正在寻找一个爬虫，它能够处理与Ajax的页面，并能够在开始爬行网站之前与目标网站执行某些用户交互(例如，点击某些菜单项，填写一些表格等).I尝试webdriver/selenium (这是真正的网络抓取工具)，现在我想知道是否有任何爬虫程序，支持模拟某些用户交互之前开始爬行？(用Java、Python或Ruby ...)如果是，我很感谢任何描述这一点的链接。
浏览 1提问于2011-06-28得票数 0
我用java做了一个网络爬虫。它递归地遍历每个页面中的链接。现在我想要得到一个特定页面的点击数。可以通过网络爬虫吗？因为我们不能访问服务器代码，所以我们不能添加任何计数器来计算命中率。我只想显示每个链接的点击率。
浏览 2提问于2015-11-18得票数 0
1回答
我想在我的Facebook应用程序中测试like按钮，首先是在localhost中。由于这个url必须可以到达facebook，所以我使用了隧道技术，这对于信用回调来说已经很好用了。当一个人点击like按钮时，like计数递增，并且like按钮突然被“确认”链接所取代。单击它将显示内容预览，并要求确认。确认后，计数再次出现片刻，然后消失。但新闻提要显示了该活动。此外，当用户通过单击X按钮并从新闻提要中选择“删除帖子和不同的内容”来不喜欢该页面时，它总是在第一次失败，但当用户重复该操作时，它会成功地不受欢迎
浏览 2提问于2011-11-25得票数 0
回答已采纳
我想当一个按钮被点击时，使用jquery动态修改产品价格。
例如，如果有一个值为"22“的按钮，如果我单击该按钮，价格应更改为"22”。
浏览 0提问于2016-12-05得票数 0
2回答
Hi，我正在编写一个函数测试，我想知道如何对一个按钮执行简单的单击，我有一个隐藏的表单，显示在按钮单击后$button = $crawler->filter('button
浏览 4提问于2015-03-19得票数 4
回答已采纳
但是google的评论部分是由java script生成的。下面是一个链接，例如：。在该链接中，您可以看到，为了生成更多的评论，您需要多次单击一个按钮。(在5-6次点击后)页面通过执行javascript生成更多的评论。首先，我用一个网页驱动程序(firefox)解决了这个问题，并模拟了一个真人点击按钮，它会生成评论，然后他会一直按住，直到所有评论都生成。我需要的是一种方法，以更好，更快的方
浏览 0提问于2015-05-04得票数 0
我制作了一个网络爬虫，我只需要GUI来设置爬行的参数，在那之后，执行将永远在无限循环中运行。
当我开始爬行(当前点击一个按钮)时，我是否可以释放GUI来释放资源，并在文本/控制台模式下运行应用程序？
浏览 0提问于2011-05-20得票数 0
1回答
由于这个内容一直在被修改，页面的最大值可以也会发生变化，因此我是否需要将所有可能的页码添加到sitemap.xml中，还是将它们从第一个页面链接到爬虫中就足够了？
谢谢!
浏览 0提问于2014-01-25得票数 1
回答已采纳
我对基于PHP的网络爬虫有些怀疑，它能像基于java线程的爬虫一样运行吗？我之所以问这个问题，是因为在java中，线程可以一次又一次地执行，我不认为PHP有类似线程的功能，你们能说一下，哪个网络爬虫更能充分利用吗?基于PHP的爬虫还是基于Java的爬虫
浏览 1提问于2010-07-27得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
