腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
2
回答
BeautifulSoup
请求
还是
请求
?
、
我有一个问题,当我使用
BeautifulSoup
request时: page = urlopen(url).read().decode('utf8') soup =
BeautifulSoup
(page.content, 'html.parser')feed =
BeautifulSoup
(soup.
浏览 27
提问于2020-06-30
得票数 1
1
回答
Python
请求
作为Jenkins管道中的自动测试
、
、
、
、
我正在使用Python和
BeautifulSoup
。我用它编写的脚本都是可执行的。你的意见是什么?我必须使用Pytest
还是
Unittest
浏览 2
提问于2019-11-06
得票数 0
回答已采纳
3
回答
(
BeautifulSoup
,
请求
)
、
、
、
、
下面是我的代码和输出import bs4,requestsr = requests.get(url) soup = bs4.
BeautifulSoup
浏览 1
提问于2017-10-21
得票数 0
回答已采纳
1
回答
Python
请求
模块无法在网站上找到数据属性
、
、
、
我试图使用python中的 request 和
BeautifulSoup
模块在公共网站中
请求
一个特定的数据属性。网站标签中的数据属性没有任何价值,但我想我可以使用代码的标题部分来
请求
它。import requestsURL = 'https://www.oneplus.com/ca_en/oneplus-7pro?, like Gecko) Chrome/83.0.4103.61 Safari/
浏览 1
提问于2020-06-09
得票数 0
1
回答
BeautifulSoup
请求
失败
、
、
我现在正在使用urlopen从一个网站列表中提取数据,但在不成功的
请求
中一直存在问题。有人能帮我吗?我将网站另存为HTML文件 path = "/Users/runyao/Downloads/The Proposition 65 List | OEHHA.html"resp = urllib.request.urlopen(req) respData =
浏览 28
提问于2019-12-10
得票数 0
1
回答
Wayfair产品价格
、
、
import requests 'User-Agent': 'Mozilla/5.0 (Macintosh601.3.9' response = requests.get(url, headers=headers) soup =
BeautifulSoup
浏览 15
提问于2021-03-11
得票数 0
2
回答
urllib.requests或urllib.request
、
、
在"urlib“库下,无论我们有‘request’模块
还是
'request'模块from urllib.request import urlopenbsObj =
BeautifulSoup
(html.read()) print哪个shell成功导入<em
浏览 2
提问于2017-12-29
得票数 0
2
回答
我需要关于如何加速网络抓取器的建议
、
、
、
我对此
还是
个新手。我正在尝试从网页中提取数据,但我实现的这个方法似乎有点慢。我使用了time模块来缩小延迟的原因。requests.get(url)soup =
BeautifulSoup
(data.content)
请求
总是这么慢吗?雅虎的问题是限制来自他们服务器的
请求
吗?现在,从yahoo.com/finance上拉出一个股票价格大约需要2-5秒,
请求
是主要问题,有什么想法吗?
浏览 1
提问于2015-05-08
得票数 2
1
回答
正确的图书馆使用:要求w/ bs4.美丽汤?
、
、
、
、
在urllib中,您使用
BeautifulSoup
来使用findAll(tag='element')函数来提取html元素,我是以同样的方式继续使用
BeautifulSoup
,
还是
request有一个简化这个过程的函数使用urllib2的拉标签 from bs4 import
BeautifulSoup
as BS response = urllib2.urlopen('http://stackoverflow.com/'
浏览 0
提问于2013-03-21
得票数 2
回答已采纳
1
回答
下载站点的HTML页面并抓取它以获取所需的数据,因为他们没有公共api
、
所以我需要从一个网站获取一些数据,问题是他们没有一个公共的api,所以我想下载html文件,然后搜索我想要的数据。我只是不确定是否有可能这样做,我认为这应该是正确的?首先下载html文件....crawl ()包含我想要的数据的链接我如何抓取表格并从html文件中获取实际列,我已经从他们的xml文件中获得了其他详细信息,比如标题/事件名称。需要帮忙谢谢。
浏览 2
提问于2019-08-28
得票数 0
1
回答
Python:使用GET
请求
使用python登录网站
、
我尝试过查看这里和其他教程上的几个答案,其中大多数提示我检查developer选项卡并使用方法"POST“查看
请求
,但我没有看到任何这样的
请求
。相反,我看到了"GET“
请求
,我不确定
请求
是如何处理这些
请求
的。我尝试过许多不同的方法,但都没有奏效。下面是我有的更简单的代码:from bs4 import
BeautifulSoup
pw='PASSWORD' ur
浏览 1
提问于2015-04-27
得票数 1
回答已采纳
1
回答
Python
BeautifulSoup
和
请求
、
、
Chrome/39.0.2171.95 Safari/537.36'} Page = bs4.
BeautifulSoup
浏览 12
提问于2020-07-29
得票数 0
4
回答
Python和
请求
BeautifulSoup
、
、
、
/randomwordgenerator.com/phrase.php"pageContent =
BeautifulSoup
浏览 2
提问于2020-01-02
得票数 3
回答已采纳
1
回答
请求
返回的值不是实际值
、
我真的很享受,因为我在python
请求
甚至python3方面都是新手,但第二天我注意到价格变量没有更新。当我运行一周的代码时,它不会更新(709.49,如果重要的话)。所以我想问一下,是我写错了什么,
还是
网页不那么容易发出
请求
。你能告诉我发生了什么吗?以下是原始代码: import requestsfrom bs4 import
BeautifulSoup
site_doc = requests.get('https:
浏览 17
提问于2020-07-07
得票数 0
1
回答
在flickr上使用CSS选择器时遇到了困难,我是不是做错了什么?
、
、
、
我使用的是pythons
请求
和bs4 (
beautifulSoup
)模块。=&text=new+york')soupElement = soup.select('div.overlay') 然而,soupElement是div不可选
还是
。
浏览 6
提问于2017-07-27
得票数 0
1
回答
从网站上抽取课堂上所有学生的分数
、
、
此代码提取课堂上所有学生的标记,并使用results.txt将结果存储在文件
BeautifulSoup
中。我正在寻找代码评审和建议。from bs4 import
BeautifulSoup
url = 'http://www.*.org/' r = requests.get
浏览 0
提问于2015-04-17
得票数 2
2
回答
如何从python网页下载所有可下载的内容?
有一个网站,有13页的midi文件,我想要下载,我不能手工下载数百个文件,所以我想知道是否有任何方法获得所有可下载的文件与python。我编写了一个for循环来遍历所有13页,如下所示: url = "http://midkar.com/jazz/jazz_0" + str(i) + ".html"但这几乎是我所做的一切,我希望得到一些帮助。
浏览 2
提问于2017-06-02
得票数 1
回答已采纳
1
回答
BeautifulSoup
对象与
请求
内容不同
、
、
我将此
请求
内容传递给
BeautifulSoup
。但是当我打印这个
BeautifulSoup
对象时,它与
请求
内容有很大的不同。一些标签丢失了。其中一些是重复的。为什么会发生这样的事情?例如:print req1.contentprint s1
浏览 0
提问于2015-01-27
得票数 0
1
回答
Python urlopen和httplib都无法返回页面的实际html。
、
、
、
、
我首先尝试使用
BeautifulSoup
执行以下操作:soup =
BeautifulSoup
(comment_html然后,我按以下方式尝试了httplib2
请求
:resp, content = h.request(section_url, "GET")而且<em
浏览 4
提问于2015-10-19
得票数 0
回答已采纳
1
回答
不完全HTML-在一些使用
请求
的站点上的响应&
BeautifulSoup
或Selenium
、
、
、
我正在使用Python中的
请求
和
BeautifulSoup
从一些urls中抓取信息。但是有些站点只返回部分HTML响应,缺少页面的内容。这就是不起作用的代码:from bs4 import
BeautifulSoup
r = requests.get(url)以下是不完
浏览 0
提问于2021-01-09
得票数 2
回答已采纳
点击加载更多
相关
资讯
http请求中的8种请求方法
Jmeter JDBC请求
网络请求框架
HTTP请求响应
请求你爱我
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
活动推荐
运营活动
广告
关闭
领券