我写了一个脚本，使用python中的post请求从网页上抓取“名字”。但是，运行我的脚本既没有得到任何结果，也没有得到任何错误。在我看来，我做事情的方式是正确的。12_4) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.81 Safari/537.36'}
response = requests
浏览 21提问于2017-06-20得票数 0
Title说明了一切，奇怪的是没有数据的GET请求和POST请求不会导致这个错误的发生。我假设数据有问题，我是POSTing，但不是很确定。顺便说一句，我使用了cfscrape模块(Re：)来绕过Cloudflare DDoS保护加载页面。= cfscrape.create_scraper()
res = scraper.post("http://www.umggami
浏览 2提问于2015-04-17得票数 1
2回答
但是，当我使用scrapy时，它会获取站点，但当我查看响应时，它显示的是cloudfare站点，而不是实际站点。
我该怎么做呢？？
浏览 9提问于2021-11-30得票数 0
1回答
使用post请求创建一个刮板，当我运行它时，我什么也得不到。不明白我做错了什么。使用工具时，当我看到表单数据查询时，如果我在控制台中粘贴了总字符串，那么它看起来很奇怪，这就是为什么我试图精简它的原因。如有任何建议，将不胜感激。AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.81 Safari/537.36'}
response = requests.postt
浏览 1提问于2017-05-15得票数 0
回答已采纳
我试图使用selenium抓取以下页面，以获取所有工厂的名称：
from bs4 import BeautifulSoupprint('Number of results', len(results))
结果我得到了
浏览 0提问于2019-10-31得票数 0
回答已采纳
1回答
我尝试让getCurrentSongData函数返回从刮取器传入的songdata对象，但我一直得到以下输出：c:\下面是我的routes.js文件中需要我的抓取器的部分。
console.log("******************T
浏览 0提问于2015-11-21得票数 0
1回答
我的刮刀用了大约一个小时。self.start_reactor() File "/home/scraper/.fakeroot/lib/python2.7/site-packages/tw
浏览 3提问于2014-01-16得票数 3
1回答
我有一个RESTFUL Flask API，我正在为gunicorn提供服务，并且我正在尝试在向发出POST请求的人发送响应后继续运行parse_request()，这样他们就不会等待它完成 except Exception as e:我正在发送一个类似于此的POST请求</
浏览 5提问于2019-03-27得票数 0
2回答
好的太好了。所以我下载了一个叫做imagescraper的模块在控制台中运行时效果很好。Import image_scraper
我得到一个(0，0)元组。我搜索了我的工作目录，我的图像应该在那里，但它不在那里。
我的</em
浏览 6提问于2016-04-03得票数 2
2回答
我现在运行它的方式是从pycharm中分别运行/执行，这样我就可以在任务管理器中看到执行中的3个python.exe。我尝试用子进程、多进程甚至来自不同SO帖子的os.system的例子……但如果没有任何运气..。从日志中，它们都是按顺序运行的，而从任务管理器中，我只看到一次python.exe执行。这是这种过程的正确模式吗？
编辑:1(尝试使用concurrent.futures ProcessPoolE
浏览 51提问于2018-10-15得票数 0
回答已采纳
1回答
我正在使用scrapy解析一个大的XML文件，并从XML中生成每个节点(我感兴趣的)上的一个请求和一个项。现在发生的事情是，XML文件首先被完全处理，我生成的项目成功地通过了我的项目管道，在此之后，scrapy开始处理我生成的所有请求以及这些项目。我想要的是，scrapy在我提交请求时立即执行它们，而不是在解析完整个XML之后。这个答案建议使用
# change
浏览 1提问于2015-04-28得票数 2
我正在编写一段代码(是的，我是新手)，以便从facebook上的页面中提取信息。我正在使用facebook-scraper来获取信息。我需要创建一个CSV文件来存储此信息，但我总是空着。原始代码 from facebook_scraper import get_posts print(post['
浏览 27提问于2020-11-08得票数 2
回答已采纳
2回答
报纸是一个很棒的库，它允许抓取web数据，但是我对文章缓存有点困惑。它缓存文章以加速操作，但是我如何访问这些文章呢？
我有这样的东西。现在，当我对同一组文章运行该命令两次时，第二次得到的返回类型是None。如何访问这些以前缓存的文章进行处理？
浏览 18提问于2018-07-24得票数 4
回答已采纳
我已经使用POST请求用vba写了一个非常小的脚本。但是，当我运行它时，除了一条空消息之外，我什么也得不到。我已经尝试相应地填写了请求参数。也许，我不知道应该在参数中包含哪些内容。我正在处理的页面在其右侧面板中包含几个图像。当一个图像被点击时，我在这里谈论的请求被发送到服务器，并返回结果，并在它下面显示关于它的味道的新信息。我的目标是解析与每个图像相关的所有味道。
浏览 12提问于2017-07-31得票数 0
回答已采纳
1回答
Main for循环是主形式的，但是从不同的线程运行，不会阻塞UI。如果我关闭程序，它不会退出，我认为它在WaitHandle.WaitOne上会被阻塞，因为还有更多的工作要做。为了获得更清晰的代码，我删除了一些不需要的</
浏览 2提问于2014-09-17得票数 0
回答已采纳
1回答
分块处理请求和返回响应
、、、
我正在制作一个搜索聚合器，我一直在想如何才能提高搜索的性能。 考虑到我正在从不同的网站获得结果，目前我需要等待接收每个提供商的结果，但这是一个接一个地完成，所以整个请求需要一段时间才能响应。最简单的解决方案是从客户端为每个提供者发出一个请求，但这将导致每次搜索都会有大量的请求(但如果这是正确的方式，我就直接这么做)。为什么我一直在想，是否有办法在每次提供者响应时都返回结果，所以如果
浏览 15提问于2020-12-11得票数 1
1回答
我试图使用机械提交一个网页表格和打印结果给我。输入坐标是从CSV文件输入的。def form_scraper(xcord,ycord): br.set_handle_refresh(False) form_result = response.read()这将给出以下错误，并且<em
浏览 0提问于2016-08-10得票数 1
回答已采纳
1回答
我正在调试一个表单，其中的值不会反映在rails应用程序中。在firebug中，有没有办法捕获post或put请求，进行一些调整，然后“重放”请求？我想是的，但谷歌搜索并没有给我带来那么多好的结果。
浏览 0提问于2012-05-20得票数 1
我正在用Python构建一个基本的推特爬行器，我想在我的RaspPi 4b上每小时运行一次。脚本已经编写好了，当使用以下命令从终端调用它时，它可以完美地工作 python scraper.py 现在，我想让它自动运行，而不需要我自己的物理提示。我用脚本执行了chmod，然后打开crontab，并使用编辑器添加了这一行(我知道这是为了每一分钟，我只想看到它工作)： * * * * * /usr/bin/python<
浏览 19提问于2020-01-04得票数 1
回答已采纳
云服务器
ICP备案
云直播
即时通信 IM
对象存储
腾讯云开发者
