我不能从页面提取信息使用python请求和漂亮的汤
我了解您的要求，以下是对于您提供的问答内容的完善且全面的答案：
问：我不能从页面提取信息使用python请求和漂亮的汤。 答：从页面提取信息是一种常见的数据采集技术，通常使用Python的请求库和BeautifulSoup库来实现。然而，如果您不能使用这些库，仍然有其他方法可以实现页面信息的提取。
一种替代方法是使用Selenium库，它是一个自动化测试工具，可以模拟浏览器行为。通过Selenium，您可以打开网页，执行JavaScript代码，获取页面内容，并提取所需的信息。您可以使用Selenium的WebDriver来控制不同的浏览器，如Chrome、Firefox等。
另一种方法是使用正则表达式来匹配和提取页面中的特定模式。正则表达式是一种强大的文本匹配工具，可以根据特定的模式来搜索和提取字符串。您可以使用Python的re模块来使用正则表达式进行匹配和提取。
无论使用哪种方法，都需要了解页面的结构和内容，以便正确地定位和提取所需的信息。
请注意，以上提到的方法仅供参考，具体的实现方式可能因具体情况而异。在实际应用中，您可能需要根据页面的特点和需求进行适当的调整和优化。
如果您需要在腾讯云上进行相关开发和部署，以下是一些腾讯云产品和服务，可以帮助您实现云计算和数据处理的需求：
- 云服务器（CVM）：提供弹性的虚拟服务器实例，可用于搭建和部署应用程序。 产品介绍链接：https://cloud.tencent.com/product/cvm
- 云数据库 MySQL 版（CDB）：提供高性能、可扩展的关系型数据库服务，适用于存储和管理结构化数据。 产品介绍链接：https://cloud.tencent.com/product/cdb_mysql
- 云对象存储（COS）：提供安全、可靠的对象存储服务，适用于存储和管理大规模的非结构化数据。 产品介绍链接：https://cloud.tencent.com/product/cos
- 人工智能平台（AI Lab）：提供丰富的人工智能算法和模型，可用于图像识别、语音识别、自然语言处理等任务。 产品介绍链接：https://cloud.tencent.com/product/ailab
请注意，以上产品仅为示例，腾讯云还提供更多与云计算和数据处理相关的产品和服务，您可以根据具体需求选择适合的产品。
希望以上信息能对您有所帮助！如有更多问题，请随时提问。
相关·内容
1回答
您好，我在python3.4上使用漂亮的汤来解析html，但我似乎找不到正确的代码来正确显示这些html标签中的信息。我已经成功地解析并提取了来自其他站点的信息，但是由于某种原因，当我使用此代码完成显示内容的循环时，空方括号显示为[]，就好像没有信息一样。
web=requests.get('https://www.scutify.com/company.aspx?ticker=AAPL')
Info=web.content
Scutify=BeautifulSoup(Info,'html.parser')
price=Scutify.f
浏览 3提问于2015-07-25得票数 0
1回答
我正在从事一个网络自动化项目。我需要能够拉页，评估数据，并能够与页面交互(例如登录，输入值，并张贴到网站)。作为登录的衍生物，我想我需要一些东西，使我能够在一个凭证下保持登录(例如，存储凭证或cookie)。
我已经使用UrlLib &请求库来提取文件和页面本身。
我正试图为这个任务决定最佳的Python库。
如有任何建议，将不胜感激。
谢谢!
浏览 0提问于2019-03-21得票数 2
回答已采纳
我正在尝试从oreilly媒体网站上提取书名，使用python漂亮的汤。
但是，我看到书名不在页面源html中。
我正在使用这个链接查看书籍：
附件是一个屏幕截图，显示的网页与前两本书与铬开发工具与箭头指向我想要提取的元素。
我查看了页面源代码，但找不到书名--也许它们隐藏在主html中的其他链接中。
我试图打开html中的一些链接，并搜索书名，但什么也找不到。
是否可以使用美丽的汤从网站中提取第一或第二本书的名字？如果没有，还有其他的python包可以做到这一点吗？也许是硒？
或者作为最后的手段.
浏览 10提问于2022-02-27得票数 0
回答已采纳
3回答
我一直在尝试一些网络抓取，我偶然发现了这个标签中的一些有趣的数据：
<script type="application/ld+json">
我已经能够用美丽的汤分离出那个标签
html = urlopen(url)
soup = BeautifulSoup(html, "lxml")
p = soup.find('script', {'type':'application/ld+json'})
print p
但是我还不能处理这些数据，也不能从那个标签中提取任何数据。
如果我尝试使用正则表达式从其中获
浏览 2提问于2017-04-27得票数 9
1回答
我试图使用漂亮的汤解析以下站点：
然后，我试图发送整个网页开始后的单词“主题”作为电子邮件的正文。我最终想要自动发送电子邮件在这个网页上的任何信息。
我可以成功地获得html文本和样式，但我不知道如何提取图像以及页面底部的google表单。这些图片似乎没有href的，所以我真的不知道该怎么做。
如果有漂亮的汤，这有可能吗?还有其他方法来做我想要做的事情吗？
浏览 3提问于2017-04-01得票数 0
回答已采纳
2回答
我正在尝试这个程序( )来工作，但是当我将代码放在PyCharm中时，它会在json、请求和BeautifulSoup导入中下划线，并且它说“没有一个模块名为美观汤.”。然后，我尝试使用"easy_install请求“或"easy_install json”进行安装，但是它吐出了以下内容：
PS C:\Users\Ruzgar> easy_install json
Searching for json
Reading https://pypi.python.org/simple/json/
Couldn't find index page for 'jso
浏览 2提问于2014-05-08得票数 1
2回答
用硒美汤寻找元素
、、、
一般来说，我对网络抓取和数据科学是个新手。根据不同的消息来源，美丽的汤比硒更快的抓取网页。我正在写一些在社交媒体评论中爬行的代码。我使用Selenium自动单击检索旧注释的按钮，并使用以下命令从注释中获取文本
driver.find_element_by_xpath()
我知道feature没有允许我直接输入xpath来查找元素的特性。
在这种情况下，我是否应该摆脱对xpath的依赖，并尝试更轻松地使用可以由漂亮的汤使用的选择器呢？
我的代码现在感觉非常笨重，需要几分钟的时间，尽管我只处理了大约120条评论。
如果之前有人问过这个问题，我很抱歉；我在网站上找不到它。谢谢!
浏览 18提问于2019-07-24得票数 0
回答已采纳
我正试图解析一个页面
当我尝试findAll('b')时，我没有得到任何结果，和'tr‘一样。除了最初的标题标签之外，我找不到任何东西。
此外，当我执行BeautifulSoup=(标记)并打印该汤时，我将得到整个页面，并在输出的末尾加上一个额外的
我在BeautifulSoup 3.2.0中使用python2.6。为什么我的汤没有正确解析页面？
浏览 2提问于2014-10-15得票数 0
回答已采纳
例如，我正在尝试使用Linux中的wget命令从网站下载一个页面，我想要的是包含在该页面的html代码中的信息。
我试过使用R的Rvest和Python的美汤，但它不起作用，所以现在我尝试wget，主要是我在.css和.js中得到的脚本，我不能从中提取有用的信息(据我所知)，所以总而言之，我想从一个动态网站上使用wget命令提取a的信息。
我已经使用了-F，-i和其他一些参数，请记住，我对计算机科学和Linux总体来说是相当新的，所以如果这个问题是微不足道的，请解释一下，谢谢。
此外，如果有必要，我可以发布我到目前为止所做的事情。
浏览 3提问于2018-10-12得票数 1
2回答
我正在尝试抓取网站：
我试着用漂亮的汤拉起投注线，当我检查页面时，我可以看到我想要的结果。问题是，当我把它拉进来的时候，我看不到实际的结果，只是一个'-‘
betting_page = requests.get(f'https://www.sportsbookreview.com/betting-odds/nba-basketball/merged/?date=20131101')
betting_page = BeautifulSoup(betting_page.text, 'html.parser')
for item in betting_page
浏览 26提问于2019-11-12得票数 0
我将此代码用于非JavaScript页面： session = HTMLSession()
url = session.get("https://.......")
spoon = BeautifulSoup(url.text, "html.parser")
preTitle = spoon.find_all('title')
preTitleStr = str(preTitle)
a = preTitleStr.replace('<title>','')
Title = a.replace('
浏览 103提问于2021-09-06得票数 0
<font color="white">
<b>Name:</b> USERNAME [585743] <br>
<b>Money:</b> $MONEY <br>
<b>Location:</b> CITY<br>
<b>Level:</b> 43<br>
<b>Gold:</b> 4706 / 5315<br>
</font>
浏览 3提问于2018-05-07得票数 1
我想从一个使用Python中的“美丽汤”的网站上抓取数据。网站根据用户的选择更改下拉菜单的值。在更改下拉菜单的值时没有api调用。仔细看一下，我注意到有一个javascript函数在内部调用，以获取下拉菜单的值。我的问题是下拉菜单的值不在页面源中。它们是通过调用js函数获得的，但是没有api调用，我不能请求那个值。有人能告诉我如何从python代码中调用javascript函数吗？我在用漂亮汤刮网。
谢谢
浏览 7提问于2014-04-06得票数 1
回答已采纳
3回答
我一直在尝试使用下面网站页面上的美丽汤来收集facebook的评论。
import BeautifulSoup
import urllib2
import re
url = 'http://techcrunch.com/2012/05/15/facebook-lightbox/'
fd = urllib2.urlopen(url)
soup = BeautifulSoup.BeautifulSoup(fd)
fb_comment = soup("div", {"class":"postText"}).find(text=T
浏览 2提问于2013-01-19得票数 3
考虑一下这个源代码:视图-源：
顶部有一个以"window.BC.product =“开头的字典/JSON类型文本
假设我有这个页面的“汤”对象。我将如何在顶部提取文本并将其转换为python字典，以便从中提取特定的数据？
浏览 1提问于2015-04-04得票数 2
回答已采纳
我希望使用python从espn站点中获取一些数据。
我用漂亮的汤从页面中提取内容。
item = soup.findAll('span', attrs={'data-reactid': '136'})[0].text
只会显示列的标题。在该链接内是数据反应链接，这些链接没有显示在urls中。如何浏览数据-反应链接？当您单击防御或攻击链接时，url保持不变吗？
浏览 1提问于2018-11-25得票数 0
回答已采纳
4回答
我一直试图使用的漂亮汤来收集一些数据。但是，当我解析内容时，有些数据根本没有显示出来。这些数据字段在铬检查器中可见，但在“汤”中看不到。问题是，它们似乎不是文本元素。我认为它们是使用外部数据库提供的。我已经附上了下面的截图。还有其他方法可以刮掉这些数据吗？
提前谢谢。
谷歌检查员：
美丽汤解析内容：
浏览 8提问于2021-02-12得票数 2
回答已采纳
1回答
我正在使用python2.7，我正在尝试提取那些喜欢我的facebook页面照片的人的个人ids。我的代码是：
import urllib2
from bs4 import BeautifulSoup
import mechanize
br = mechanize.Browser()
htmltext = br.open("url").read()
soup = BeautifulSoup(htmltext)
search = soup.findAll('div',attrs={'class':'_5j0e fsl fwb fc
浏览 4提问于2016-03-21得票数 0
1回答
我正在使用BeautifulSoup进行python挑战级别-9。url = "“。Bs4.版本 == '4.3.2‘。它的页面源中有两个注释。汤的产量应如下。但是，在应用BeautifulSoup时，缺少第二个注释。
听起来有点奇怪。有什么暗示吗？谢谢!
import requests
from bs4 import BeautifulSoup
url = "http://www.pythonchallenge.com/pc/return/good.html"
page = requests.get(url, auth = ("huge",
浏览 1提问于2014-10-25得票数 0
回答已采纳
1回答
登录重定向后的web抓取
、、、
我需要从一个网页抓取数据“阻止”登录重定向。因此，我使用selenium输入所有必要的登录信息，并导航到数据所在的位置。然而，据我所知，selenium不支持提取标题和其他文本数据，这意味着我将不得不使用另一个web抓取工具，如beautiful soup。但是，这些工具需要一个直接的URL链接，该链接无论如何都会将该工具重定向到登录页面。 有没有办法可以使用selenium来提取数据，或者使另一个工具能够与已经登录的selenium工具交互来提取数据？
浏览 26提问于2020-08-13得票数 0
回答已采纳
1回答
简单地从网页中提取信息的Python脚本(例如，使用漂亮的汤)会被称为包装器(参见https://en.wikipedia.org/wiki/Wrapper_(数据)_(采矿) )吗？
浏览 0提问于2017-03-13得票数 2
我希望提取电子邮件，电话和姓名从脚本标签(而不是在身体)使用美丽汤(Python)下面的代码。我看到美丽的汤可以用来提取。
我试着用下面的代码获取页面--
fileDetails = BeautifulSoup(urllib2.urlopen('http://www.example.com').read())
results = fileDetails.find(email:")
此Ajax请求代码不会再次在页面中重复。我们是否还可以编写try和catch，这样如果它在页面中找不到它，它就不会抛出任何错误。
<script type="text/javas
浏览 1提问于2014-08-04得票数 6
我一直在尝试使用pythons漂亮的汤库从一个爬行的网站中提取一些数据。我发现搜索一个节点并在其上使用.text来获取其内容是可行的，但不知何故会弄乱格式，字符串也不会像在网页上那样被格式化。我发现有一种在浏览器中使用.innerText的方法，它返回一个由一些html文本组成的字符串，就像用户复制粘贴它一样。在python中有没有等价物，或者我真的需要在浏览器中运行它？
浏览 38提问于2020-11-04得票数 0
我使用的是ubuntu14.0LTS和pycharm IDE，如何下载和安装美汤，并将美汤库添加到pycharm中。
我试着使用pip install，它不工作。
浏览 0提问于2014-07-18得票数 2
当我尝试导入漂亮的汤时，我得到了以下错误：
Traceback (most recent call last):
File "my_first_simple_script.py", line 2, in <module>
from bs4 import BeautifulSoup
ModuleNotFoundError: No module named 'bs4'
我尝试通过以下方式导入它:从bs4导入BeautifulSoup
我的python版本是3.6.1，并且漂亮的汤是：'beautifulsoup4==4.6.0‘
我做
浏览 10提问于2017-06-19得票数 0
回答已采纳
2回答
首先，有一个python脚本来获得xpath树和给url的漂亮汤。
# get tree
def get_tree(url):
r = requests.get(url)
tree = html.fromstring(r.content)
return tree
# get soup
def get_soup(url):
r = requests.get(url)
data = r.text
soup = BeautifulSoup(data)
return soup
我们经常需要树和汤来导航源代码页面并提取我们需要的有用信息。但我们可
浏览 4提问于2014-11-16得票数 4
回答已采纳
2回答
我安装了extracting -3.2.0.tar.gz
python setup.py install
从其中卸载它的命令是什么？我注意到有一个特定于linux发行版的包可用，它的名字叫python-beautifulsoup。我想安装系统特定的漂亮汤。
我尝试过的：
python setup.py uninstall
浏览 0提问于2012-01-30得票数 1
回答已采纳
我有这个html数据，需要解析才能从it.But中提取数据，它有太多的标记，而且数据也很难导航到me.From下面的Html数据，我需要创建一个python字典列表，如下所示：
{“学校”：“儿童游戏”}，{“地点”：“newyork”}，{“级别”：“四”}，{“国家”：“美国”}，{“当然”级别：“容易”}
<div class="quick">
<strong>School</strong><br /> Childs play <br /><br />
<strong>Place&
浏览 2提问于2012-04-18得票数 1
回答已采纳
1回答
Answer marked below. It was two problems. I was missing a semicolon in the env var path, and the latest Beautiful Soup is incompatible with my python script. Using an older version allowed it to run.
我试图安装漂亮汤在Windows中使用"Setup.py安装“从一个CMD窗口。
我知道下面的错误..。
Z:\Installers\beautifulsoup4-4.1.0>setup
浏览 2提问于2014-06-20得票数 0
回答已采纳
2回答
我正在创建一个新闻解析器，它可以总结来自不同站点的新闻，并根据新闻内容创建关键字。大多数新闻源将新闻内容包装在article标记中，因此我从站点中提取它以获取内容。
问题是，当使用漂亮的汤时，它将返回文章标记中的原始HTML，其中有时包含图像、链接和标签(如<b> )。我的问题是，有没有一种简单的方法可以像用户看到的那样获取页面的书面内容？这意味着忽略所有不是文本的东西。我所拥有的唯一方法就是遍历文章中的每个标记并检查内部HTML中的文本内容。我还没有这么做的原因是：
标记中可能有多个标记，我需要解析这些标记；
有些标签我需要忽略，如脚本标签，浏览器不显示；
在漂亮的汤
浏览 8提问于2022-09-30得票数 -1
回答已采纳
1回答
使用python中的美丽汤提取网页中数据丰富的节点，有没有方法计算页面中标签的频率，
import requests
from bs4 import BeautifulSoup
url = "http://www.amazon.in"
r = requests.get(url)
html = BeautifulSoup(r.content)
现在我想数一数所获得的html中所有标签的频率。
浏览 0提问于2015-04-21得票数 2
回答已采纳
我有一种来自BeautifulSoup的汤，我不会腌制。当我试图pickle对象时，python解释器会默默地崩溃(这样就不能将其作为异常处理)。为了使用multiprocessing包返回对象，我必须能够pickle对象(该包pickle对象以便在进程之间传递它们)。我如何解决/解决这个问题？不幸的是，我不能发布页面的html (它不是公开的)，我也找不到这个问题的一个可重现的例子。我已经尝试通过循环遍历和酸洗各个组件来隔离问题，产生错误的最小的东西是<class 'BeautifulSoup.NavigableString'>。当我打印对象时，它会打印出u
浏览 0提问于2014-07-04得票数 9
说，为了从使用请求和美丽汤的网站中提取一些信息，我们可以使用BeautifulSoup(request，‘html5lib’)方法，但是它声明它不会在一个在线的IDE上运行。我想知道这是为什么，是否有任何解决办法，如果一个人正在使用一个在线IDE。有不同的HTML解析器吗？
浏览 2提问于2020-04-05得票数 1
1回答
不久之前，我才开始学习python，我希望更多地了解我导入的模块的功能和方法是如何工作的。
我希望python库类似于javascript框架--在这里，我可以进入一个导入的文件，查看构建框架/模块的实际代码。
但是当我在python子目录中搜索时，我发现模块是.lib格式的。
那么，标准库模块是实际的python代码，我可以以某种方式检查它的功能吗？或者它们太深，我无法像这样研究它们？
顺便提一句，对于非标准的图书馆进口，也就是漂亮汤，同样的规则会适用吗？我希望通过查看代码来了解webscraping是如何从底层抓取的。
谢谢
浏览 1提问于2014-07-02得票数 3
回答已采纳
1回答
我尝试提取gbk的字符集，并将其传输到我的服务器，等待存储在数据库中，然后提取显示为gbk，但我得到奇怪的文本代码是在Python中
headers = {'content-type': 'application/json;charset=gbk'}
r = requests.post(url, data=json.dumps(payload), headers=headers)
print(r.text)
我得到的文本类似于：#104#103#S-2013秧§
对此有什么解决方案吗？我是否必须存储并显示它，然后将页面的字
浏览 4提问于2013-10-27得票数 0
我正试图开发一个python软件，通过从这些站点中提取价格：
我用一个简单的youtube教程作为指南，他们使用扩展“漂亮汤”来抓取数据。
他们首先使用这样的代码来提取数据：
import requests
import pandas as pd
url='https://resultados.as.com/resultados/futbol/primera/2021_2022/'
page=requests.get(url)
soup=BeautifulSoup(page.content,'html.parser')
#Equipos
count=0
e
浏览 6提问于2022-08-16得票数 -1
1回答
我想在我的应用程序中实现推送通知，当一些新的数据上传到用户订阅的facebook页面时，我将使用GCM。我想知道如何使用facebook来实现GCM的服务器端。我可以使用facebook服务器或资源本身作为GCM的服务器吗？如果是的话，请帮我做。(这是一款android应用程序)。
浏览 1提问于2014-08-10得票数 0
回答已采纳
我想提取的文本数据，作者从属关系在这个网页上使用美丽汤。
我知道关于使用selenium的工作，只需单击“显示更多”链接，然后再次扫描页面？我不知道这些是什么元素，隐藏着什么？因为它们只在单击按钮后出现在检查器中。
是否有一种方法只使用漂亮的汤来提取这些信息，还是需要selenium或类似的东西来显示HTML代码中的元素？
from bs4 import BeautifulSoup
import requests
url = 'https://www.sciencedirect.com/science/article/abs/pii/S0920379621007596'
s
浏览 3提问于2021-12-23得票数 2
回答已采纳
2回答
此页面包含此span类：
<span class="currentPrice-3131760660"><span content="800.00">800,00 $</span>
我试图自动提取价格(在本例中为800美元)。但是，随着时间的推移，"currentPrice-“之后的数字发生了变化，我的Python脚本也停止了工作。我正在使用这个美丽的汤功能：
soup.find_all('span', {'class' : 'currentPrice-3131760660'
浏览 1提问于2018-10-16得票数 8
回答已采纳
我是Python新手。我只是想从HTML文件中提取一个字符串。我不能让它起作用。每个人都在谈论美汤但对我来说不管用..。
这是我的错误：
ImportError: No module named bs4
我已经安装了“美丽汤4”，但我相信它在错误的文件夹中：
sudo pip install beautifulsoup4
Requirement already satisfied (use --upgrade to upgrade): beautifulsoup4 in /usr/local/lib/python2.7/dist-packages
Cleaning up...
我正在使用Pyt
浏览 2提问于2013-08-22得票数 1
我想使用Python从网站中提取数据。我以前也做过这样的事情，但是第一次我发现从这样的结构中拉了出来。它似乎是一个html页面，其底部是json。我可以使用漂亮汤获得html，但我需要提取包含数据的json。
下面是我的代码示例，它使用json返回html。我最初尝试使用请求，但是脚本只是在没有发生任何事情的情况下运行就出现了问题，所以我在urllib中使用了漂亮的汤。我想这和网站的结构有关吧。
以下是指向该站点的链接：
http = urllib3.PoolManager()
url = "https://www.bizbuysell.com/connecticut-business
浏览 3提问于2021-04-29得票数 0
回答已采纳
我刚刚开始使用python进行网络抓取。我使用了两个库来抓取:请求和漂亮的汤。我打开给定的URL，并在该页面上传递所需数据的日期间隔。当我按submit时，URL不会改变，但是数据在页面上。然后我就可以访问那个页面了。我就是这样访问这个网站的：
r = requests.get("https://....... ")
c = r.content
soup = BeautifulSoup(c, "html.parser")
如果我想获取数据，我使用以下代码从存储数据的网站获取数据：
all = soup.find_all("table", {
浏览 3提问于2017-02-20得票数 1
回答已采纳
我试图使用urllib获取一个html页面，然后使用漂亮汤提取出数据。我想从comments_42.html中得到所有的数字，并打印出它们的和，然后显示数据的数量。这是我的代码，我试图使用regex，但它对我不起作用。
import urllib
from bs4 import BeautifulSoup
url = 'http://python-data.dr-chuck.net/comments_42.html'
html = urllib.urlopen(url).read()
soup = BeautifulSoup(html,"html.parser"
浏览 0提问于2015-12-13得票数 3
回答已采纳
1回答
我现在使用的是Python2.7，安装了Selenium和漂亮的汤4。
我正在创建一个在表格页面中导航的脚本。在表格中，每一行都有一个链接，可以将我带到另一个页面，我可以将该页面作为表单。有没有一种方法可以提取一列(表中只有一列)的值并将其存储为数组？
这样，我就可以遍历数组来导航每个链接。
谢谢!
浏览 1提问于2014-10-02得票数 0
2回答
我正在尝试通过python.I随机浏览Webscraping，我有google搜索结果页面的链接。我使用url提取GOOGLE搜索结果页面中的所有链接。从分析过的谷歌页面，我正在提取所有可能的锚标签的帮助下，美丽汤库。所以现在我有很多链接。其中，我想选择与我所需的模式相匹配的链接。例如，我想选择所有这样的行:这是被解析的众多链接之一。但是我想缩小这种链接的结果
/url?q=http://avadl.uploadt.com/DL4/Film/&sa=U&ved=0ahUKEwiYwOKe1r7hAhWUf30KHcHUBkMQFggUMAA&usg=AOvVaw39cI
浏览 0提问于2019-04-07得票数 3
回答已采纳
我有一个关于如何使用漂亮的汤解析雅虎财经页面的快速问题。
下面是我想要从中提取数据的页面的一个示例。
我可以成功地从BeautifulSoup中提取数据，但我不知道如何在年度数据和季度数据之间切换。因此，我只能提取年度数据。当切换到每季度时，url似乎没有改变。从浏览器检查，它似乎切换了一个表格，我不确定如何处理使用美丽的汤。
我想知道是否有人有什么建议？谢谢!
浏览 9提问于2017-12-07得票数 2
1回答
通常，每当我使用Beautifulsoup提取数据时
soup = BeautifulSoup(driver.page_source, "html5lib")
很简单。工作完成了。
但是我在处理一个有很多数据的网站。它已经加载了，所以我不需要担心加载时间，但我认为真正的杀手是让我的find_all通过我不需要查看的页面源代码。
我知道我可以缩小我正在寻找的数据，一旦我做了汤，导航到类等等。这是可行的，但速度很慢。事实上，即使用page_source创建汤也很慢。
我试过变体
汤= BeautifulSoup(driver.find_element_by_class_name(&
浏览 2提问于2016-04-08得票数 2
回答已采纳
我正在尝试从IMDB抓取电影信息。在大多数情况下，它是有效的，但对于一些电影，标题是不同的HTML检索美丽的汤，然后是火狐显示的源代码。例如，当在IMDB中搜索witch时，我会得到这个页面：
所以我搜索电影，然后用下面这行代码得到电影的URL：
page = urlopen(url)
soup = BeautifulSoup(page, 'html.parser')
movieLink = soup.find('a', text = movieTitle)['href']
imdbLink = 'http://www.imdb.com
浏览 1提问于2017-06-13得票数 2
在win-8上用python安装漂亮的汤时出现问题。我已经尝试从下载最新版本。通过cmd setup.py安装没有错误地安装了它，但是没有在c：\python\35-32\Lib\ bs4 -packages文件夹中创建站点文件夹。我做什么好？我使用的是python3.5。
创建了一个漂亮的Soup4-4.5.1-py3.5.egg文件
浏览 2提问于2016-10-03得票数 2
2回答
是否有一种使网页只能从指定链接访问的简单方法？
我有一个弹出窗口的网页。弹出窗口使用jwplayer脚本调用html页面。我不想让任何人直接进入那一页，而被称为“美丽的伤寒”。
编辑：(注释中的代码)
<ul class="gallery clearfix">
<p class="p-bigger">more about sftc</p>
<li><a href="vids/sc1.html?iframe=true&width=650&height=650" r
浏览 1提问于2013-11-10得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
