Soup.find和findAll在hockey-reference.com上找不到表格元素
在hockey-reference.com上找不到表格元素的情况下，Soup.find和findAll是BeautifulSoup库中用于解析HTML文档的方法。它们用于查找特定的HTML元素或一组元素。
Soup.find方法用于查找满足指定条件的第一个HTML元素。它接受两个参数：标签名称和标签属性。例如，如果要查找一个class为"table"的table元素，可以使用以下代码：
table = soup.find('table', {'class': 'table'})findAll方法用于查找满足指定条件的所有HTML元素，并返回一个列表。它也接受两个参数：标签名称和标签属性。以下是一个示例，查找所有class为"table"的table元素：
tables = soup.findAll('table', {'class': 'table'})在hockey-reference.com上找不到表格元素可能有以下几种原因：
- 网页结构发生变化：网页的HTML结构可能已经发生了变化，导致原来的查找方法无法找到表格元素。可以通过查看网页源代码确认是否存在表格元素，以及元素的标签名称和属性。
- 动态加载：有些网页使用JavaScript进行动态加载内容，这些内容可能无法通过静态的HTML解析库直接获取。可以尝试使用模拟浏览器行为的库，如Selenium，来获取动态加载的内容。
- 访问权限限制：某些网站可能对爬虫进行了限制，导致无法直接获取网页内容。可以尝试模拟浏览器行为，如设置User-Agent头部信息，或者使用代理服务器来绕过访问限制。
综上所述，如果在hockey-reference.com上找不到表格元素，可以先确认网页结构是否发生变化，尝试使用动态加载库获取内容，或者检查是否存在访问限制。
相关·内容
我试图使用requests和BeautifulSoup，特别是国家名称和来自的两个字母的国家代码，在表格中刮取一些元素的文本。
下面是我的代码，我已经逐步回过头来：
import requests
import bs4
res = requests.get('https://country-code.cl/')
res.raise_for_status()
soup = bs4.BeautifulSoup(res.text)
for i in range(3):
row = soup.find(f'#row{i} td')
print(row
浏览 5提问于2022-06-07得票数 1
回答已采纳
嗨，我对Python和Beautiful soup都是新手。我试图仅从表格的特定部分获取文本。但是似乎findAll的结果不是可以再次运行findAll的BeautifulSoup类型。
select = soup.find('table',{'id':"tp_section_1"})
print "got the right table"
tissues = select.findAll('td',{"class":re.compile("tissue[10]")})
print
浏览 0提问于2010-10-15得票数 2
回答已采纳
我在使用.findAll属性时遇到了问题。当我运行下面的代码时，它说对象没有属性findAll。
import requests
from bs4 import BeautifulSoup
import urllib3
urllib3.disable_warnings()
url = 'https://csgostash.com/weapon/Butterfly+Knife'
page = requests.get(url)
soup = BeautifulSoup(page.content, 'html.parser')
results = soup.fi
浏览 3提问于2020-04-08得票数 0
回答已采纳
3回答
慢慢地学习python和漂亮的语言，但却被它难住了。
我正在尝试从以下布局(缩小大小) 中提取第一列和第四列数据
该文件存储在本地，目前我有其他类似问题的代码拼凑而成，无法正常工作
for row in soup.find('table')[0]body.findall('tr'):
first_column = row.findAll('td')[0].contents
third_column = row.findAll('td')[3].contents
print (first_column, third_column)
浏览 0提问于2014-04-04得票数 2
我有一个Html代码，看起来像什么
<input type="hidden" value="" id="productBsId" />
.
.
.
.
<input type="hidden" value="61980" id="productBsId" />
当我尝试sizefund = soup.find('input', {'id': 'productBsId'}).get('value')时
它打印&
浏览 0提问于2017-10-24得票数 0
我正在尝试从wiki页面解析一些表，例如。有四个表具有相同的类名"wikitable“。当我写到：
movieList= soup.find('table',{'class':'wikitable'})
rows = movieList.findAll('tr')
它很好，但当我写到：
movieList= soup.findAll('table',{'class':'wikitable'})
rows = movieList.findAll('tr')
它
浏览 2提问于2015-02-03得票数 1
回答已采纳
我需要使用BeautifulSoup解析一个超文本标记语言表格。该表有两列，其中第二列的数据类型为number。我需要找出Column2中所有数字的总和。我能够提取表数据，但我被困在这一点上。有人能帮帮忙吗。
以下是到目前为止的代码。
import urllib
from BeautifulSoup import *
url = raw_input('Enter URL- ')
html = urllib.urlopen(url).read()
soup = BeautifulSoup(html)
table = soup.find("table")
for
浏览 1提问于2015-11-09得票数 0
我正在处理的代码是从HTML页面中检索一个包含两个字段、URL和标题的列表.
无论如何，URL以/URL....开头，我需要将"“附加到从re.findall返回的每个返回的值中。
到目前为止，代码是：
bsoup=bs(html)
tag=soup.find('div',{'class':'item'})
reg=re.compile('<a href="(.+?)" rel=".+?" title="(.+?)"')
links=re.findall(reg,str
浏览 2提问于2015-12-25得票数 1
回答已采纳
我需要删除围绕着对我很重要的数据的u‘前缀和’后缀。这将被放入一个数据库中，据我所见，它需要这些额外的字符。我怎么才能把它们移走？我在变量上尝试过.replace，但它返回了一个错误。
import urllib
import mechanize
from bs4 import BeautifulSoup
import requests
import re
import MySQLdb
import time
db = MySQLdb.connect(
host=" ",
user=" ",
passwd=" ",
db=
浏览 2提问于2014-06-14得票数 0
回答已采纳
1回答
利用美汤刮网
、、、
我正在尝试使用python3.6从Imdb电影中收集评论。然而，当我打印我的“评论”，只有一个评论弹出，我不知道为什么其余的不会弹出。这种情况不会发生在我的‘审查_标题’中。任何建议或帮助都是非常感谢的，因为我一直在搜索论坛和谷歌，但没有用。
from urllib.request import urlopen
from bs4 import BeautifulSoup
import re
url = urlopen('http://www.imdb.com/title/tt0111161/reviews?ref_=tt_ov_rt').read()
soup = Beau
浏览 1提问于2018-02-22得票数 1
回答已采纳
1回答
我已经从维基百科页面上抓取了一个表格，接下来我将清理数据。我已经将数据转换为Pandas格式，现在我在清理数据时遇到一些问题
下面是我从维基百科页面抓取表格所执行的代码
import requests
import pandas as pd
website_url = requests.get('https://en.wikipedia.org/wiki/List_of_postal_codes_of_Canada:_M').text
from bs4 import BeautifulSoup
soup = BeautifulSoup(website_url,'lxml
浏览 2提问于2019-04-08得票数 0
3回答
colourImgArray = []
sizeList = soup.find('table', {'class' :'table-sku'})
for sizeTD in sizeList.findAll('td', {'class' :'name'}):
for sized in sizeTD.findAll("span"):
浏览 2提问于2014-09-01得票数 2
回答已采纳
2回答
最近，我正在从网页中抓取表格数据，并希望以列表格式country_name、currency1、currency2这样的格式存储在数据库中。我尝试了下面的代码，但它有一点工作，但不是完全。请检查它并指导我，并用它从网页上刮走多个表格。我的代码是：
from bs4 import BeautifulSoup
import requests
url = 'https://www.x-rates.com/table/?from=USD&amount=1'
page = requests.get(url)
soup = BeautifulSoup(page.text, &#
浏览 0提问于2018-10-22得票数 0
回答已采纳
我正在解析来自网页的数据，有时表格有不必要的回车，这给我带来了问题。我想删除回车符，但简单的strip()不起作用。
我有以下代码：
html = """
<table>
<tr>
<td>
Commercial, financial and agricultural</td>
<td>
791
</td>
</tr>
</table>
"""
soup = BeautifulSoup(''.join(html))
table = s
浏览 1提问于2012-05-11得票数 2
回答已采纳
我正在尝试从网站 .获取表格信息。
from bs4 import BeautifulSoup
from urllib.request import urlopen
html = urlopen("http://www.o1vsk.lv/index.php/stundu-izmainas").read()
rows=[]
soup=BeautifulSoup(html,"html.parser")
box = soup.find('div', {'class': 'DRight'})
这个程序获取页面的所有内容，
浏览 4提问于2022-08-10得票数 0
回答已采纳
我对python2.7非常陌生，我有一项任务要读取URL中的表。
我从带有表格的URL中获取数据。现在的问题是，我只需要数据，但我得到的标签也。请帮帮我。提前谢谢你。
from bs4 import BeautifulSoup
import urllib2
response = urllib2.urlopen('https://www.somewebsite.com/')
html = response.read()
soup = BeautifulSoup(html)
tabulka = soup.find("table"
浏览 3提问于2017-06-16得票数 2
回答已采纳
1回答
我想从包含以下HTML的网站中抓取一个页面：
<div class="section">
<div ng-bind="1" class="item even">First item</div>
<div ng-bind="2" class="item odd">Second item</div>
<div ng-bind="3" class="item-alt even">Third item</div&g
浏览 0提问于2022-09-22得票数 0
回答已采纳
1回答
我想解析“团队击球”表。
http://www.baseball-reference.com/teams/NYM/2017.shtml
我可以找到html表：
table = soup.find('div', attrs={'class': 'overthrow table_container'})
table_body = table.find('tbody')
我可以在表中找到数据并将其存储到一个列表中：
table_text=[]
for tr in table_body.findAll('tr'):
浏览 2提问于2017-04-20得票数 1
我用bs4抓取不同的URL，在抓取脚本的过程中，由于AttributeError：'NoneType‘对象没有属性’父‘，脚本就停止了。我想知道是否有一种方法可以跳过这个错误，或者返回一个错误。下面是代码：
url = 'URL'
page = requests.get(url)
soup = BeautifulSoup(page.text, 'html.parser')
tagline = soup.findAll("h2",{"class": "title__xxxxxlarge"}, text=Tr
浏览 2提问于2019-12-18得票数 0
回答已采纳
import bs4 as bs
import pickle
import requests
def find_and_save_CSI_300():
response=requests.get('https://en.wikipedia.org/wiki/CSI_300_Index')
soup = bs.BeautifulSoup(response.text,'lxml')
table = soup.find('tadle',{'class':'wikitable sortable'})
tickers =
浏览 3提问于2022-04-20得票数 1
1回答
我想为pnr检查创建简单的网站。代码工作正常，但它一次只执行一项工作，要么将结果呈现到其他页面，要么发送邮件。当使用线程工作时，它在后端发送邮件，直到页面保持加载。请任何人给我建议。另外，我想在google appengine上运行它，所以我还没有尝试过芹菜。
from django.http import HttpResponse
from bs4 import BeautifulSoup
import re
import requests
from django.shortcuts import render
from functools import partial, wraps
fro
浏览 1提问于2014-07-24得票数 0
我从网页上的一个表格中提取了一些数据，并将其放入列表中。但是，当我到达列表的末尾时，我会得到一个"IndexError: list索引超出范围“的错误，并且我不知道如何修复它。
from bs4 import BeautifulSoup
import urllib2
soup = BeautifulSoup(urllib2.urlopen("https://www.countyofdane.com/election/electiondetail.aspx?id=54").read())
table = soup.find("table", {"
浏览 0提问于2016-12-15得票数 0
回答已采纳
1回答
我想提取有9000页的数据。解压大约1700页后，当我希望它继续时，它停止工作，它从开始开始，在大约1000页后执行。在这段代码中，我必须手动选择区域。如何销毁总页数的数据？显色器(会话)是否有任何时间限制？
import requests
from bs4 import BeautifulSoup
from selenium import webdriver
import time
import csv
url = "https://www.mcg.gov.in/default1.aspx?HTT=B"
driver = webdriver.Chrome(executab
浏览 2提问于2018-10-03得票数 1
2回答
我正试着从这个网站上提取一个表格：
我试图得到“控股”和“市场价值”栏。
我试过这个查询，但没有运气：
from bs4 import BeautifulSoup
import urllib2
soup = BeautifulSoup(urllib2.urlopen('https://personal.vanguard.com/us/FundsAllHoldings?FundId=0970&FundIntExt=INT&tableName=Equity&tableIndex=0').read())
print(soup.prettify())
prin
浏览 4提问于2015-09-02得票数 0
我试图从一个网站中提取一些数据。一旦我检查了使用beuatifulsoup (在下面的代码中使用print(soup) )获取的数据，看起来就不太好了。它不同于我一次检查view-source:URL.我找不到我要找的田地。你能帮我找个解决办法吗？
网址：
基本上，我是想得到这个产品的价格。我在其他网站上使用了相同的代码结构，它正常工作，但它不在wayfair上工作。
我无法找到解决方案的第二件事是代码的最后一行(StyledBox-owpd5f-0 PriceV2 2_StyledPrice-sc-7ia31j-0 lkFBUo pl-Price-V2pl-Price-V2-5000)。而不
浏览 11提问于2021-07-22得票数 0
2回答
我试着从这个网站()的每个项目的标题和描述中抓取列出的齿轮奖励。我已经能够抓取两个项目的信息，但这样做的过程似乎只是复制和粘贴信息会更容易。
我真的很想知道写代码的更符合逻辑的方法。
#The idea is to collect the list of gear of the year from
#backpacker.com magazines website.
import requests
from bs4 import BeautifulSoup
from csv import writer
source = requests.get('https://www.bac
浏览 0提问于2019-04-03得票数 2
我正在使用python2.7和漂亮的汤来读入一个简单的HTML表格。在读取表之后，我尝试访问返回的数据。据我所知，会返回一个python列表对象。但是，当我尝试使用诸如cell=row之类的语句访问数据时，我得到一个"IndexError: list index out of range“错误。
from bs4 import BeautifulSoup
# read in HTML data
html = open("in.html").read()
soup = BeautifulSoup(html,"lxml")
table = soup.fin
浏览 3提问于2021-03-17得票数 0
我正在解析显示项目数据的网站上的网页。这些项目大约有20个字段，这些字段可能会出现，也可能不会出现--比如:价格、数量、上次购买的时间、高、低等。
我目前正在使用一系列命令；大约20行soup.find('div',{'class':SOME_FIELD_OF_INTEREST})来查找每个单独的感兴趣的字段。(有些是用div、span、dd等等编写的，所以很难只执行soup.find_all('div')命令。)
我的问题是:有没有一种优雅的方式来try和except所有的东西，这样代码的查看就可以更紧凑或简洁？现在，一条采样线将如下所示：
t
浏览 4提问于2012-12-09得票数 7
回答已采纳
2回答
我有这个跨度，我想拿到头衔
<span title="Something"></span>
怎样才能把它和美汤搭配起来？
res = soup.find('span')
print res //Was trying to add res.title but result is 'None'
浏览 1提问于2012-10-20得票数 3
回答已采纳
因此，我试图使用BeautifulSoup和urllib从特定的网站中抓取一个表。我的目标是从这个表中的所有数据创建一个列表。我试过使用来自其他网站的表格来使用相同的代码，而且它工作得很好。但是，在尝试使用此网站时，该表返回一个NoneType对象。有人能帮我吗？我试过在网上寻找其他答案，但运气不太好。
下面是代码：
import requests
import urllib
from bs4 import BeautifulSoup
soup = BeautifulSoup(urllib.request.urlopen("http://www.teamrankings.com/nc
浏览 5提问于2015-04-20得票数 6
回答已采纳
我想从html页面中提取所有的<li>标记。可以使用result = soup.find('div', {'class':'column column_620 column_content'})检索所需的内容。这将返回第一类column_620。在此之后，我将得到它的兄弟姐妹，并希望提取<li>标记。但是result没有findAll()方法。如何提取所需的<li>标记条目？
import re
import time
from datetime import datetime
import platform
浏览 4提问于2017-04-03得票数 2
回答已采纳
我试图用下面的代码从中获取产品的详细信息-
def get_soup(url):
soup = None
try:
response = requests.get(url)
if response.status_code == 200:
html = response.content
soup = BeautifulSoup(html, "html.parser")
except Exception as exc:
print("Unable to fecth data due to..", str(exc
浏览 0提问于2018-06-06得票数 0
回答已采纳
1回答
我正试图在拍摄闪烁照片的地方刮起坐标。我试着抓住这个'a‘块：
<a class="static-maps" href="https://www.flickr.com/map/?fLat=13.387866&fLon=77.699174&zl=13&everyone_nearby=1" data-rapid_p="163">
使用以下代码：
url='https://www.flickr.com/photos/hellosaurav/8739282947/in/phot
浏览 1提问于2015-11-18得票数 0
回答已采纳
我一直在使用解析来自几个站点的HTML，将每个站点添加到GAE任务队列中。然而，任务队列似乎重复了两个似乎生成ApplicationError的任务:日志中有5个错误，或者'NoneType‘对象没有属性'findAll'失败，当我在空闲生成的非对象上测试它时，当漂亮的在传递给它的页面中找不到任何东西时，它就没有了。我在下面添加了代码，但是这似乎并不能解决问题：
productTable = soup.find('table')
if productTable == None:
logging.e
浏览 1提问于2011-01-20得票数 1
回答已采纳
1回答
下面是我的python3程序，显示维基百科的12个子类别。它打印12个子类别。现在，我只想在打印中显示前三个子类别。多么?但是在将来开发我的程序时，我将把所有的12个子类别都写在一个文件中。
from bs4 import BeautifulSoup
import requests
url = 'https://en.wikipedia.org/wiki/Category:proprietary software'
content = requests.get(url).content
soup = BeautifulSoup(content,'lxml')
n
浏览 1提问于2016-12-14得票数 0
回答已采纳
我试图通过提取table中的城市和区号来抓取这个。现在，当我尝试抓取这个时，findAll()找不到<td>，这是真的。如何捕获此异常？
下面是我的代码：
from bs4 import BeautifulSoup
浏览 0提问于2013-06-06得票数 2
回答已采纳
我正在写一个reddit机器人，它可以将一些html (特别是表格)转换为markdown。
假设soup是我获取的页面的BeautifulSoup对象，下面是我的代码：
myTable = soup.find('div', id='damage-chart-panel').findAll('tr')
text = list()
for tr in myTable:
text.append(tr.findAll('td'))
for item in text: #a list item in 'text&#
浏览 0提问于2014-04-03得票数 0
我试着抓取一个页面，但我在检查其中是否包含数字时遇到了问题。我想清理字符串，如果它包含数字。在这种情况下，我只想保留数字，它是一个邮编。但是在我清理它之前，我必须检查元素是否有邮政编码。
我用以下代码搜索元素：
soup.find("span",{"class": "locality"}).get_text()
Output: 68549 Ilvesheim, Baden-Württemberg,
我试着用下面的代码检查字符串，但总是显示"False“。
soup.find("span",{"class"
浏览 3提问于2018-03-11得票数 0
我在尝试从a.href标记中获取文本值时遇到了困难。我已经设法隔离了目标值，但在尝试get_text()时总是遇到错误。
import requests
from bs4 import BeautifulSoup
base_url = 'http://finviz.com/screener.ashx?v=152&s=ta_topgainers&o=price&c=0,1,2,3,4,5,6,7,25,63,64,65,66,67'
html = requests.get(base_url)
soup = BeautifulSoup(html.conte
浏览 0提问于2017-02-02得票数 1
回答已采纳
这里是Python新手。Python2.7和漂亮汤3.2.1。
我正试着从一页简单的纸上刮一张桌子。我可以很容易地让它打印，但我不能让它返回到我的视图函数。
以下工作：
@app.route('/process')
def process():
queryURL = 'http://example.com'
br.open(queryURL)
html = br.response().read()
soup = BeautifulSoup(html)
table = soup.find("table")
浏览 4提问于2014-07-11得票数 1
回答已采纳
1回答
我和BeautifulSoup有麻烦了。我想做的是：
对于我所阅读的每个html页面中的每个表单，我都希望得到由"action“指向的URL。
这是我的密码：
def myfunction(path)
from bs4 import BeautifulSoup
#Retrieve htmlFiles from a folder
pages = find_files(path, '.html') #as a list
for page in pages:
stream = open(page, "rw
浏览 1提问于2015-12-07得票数 1
回答已采纳
我正在学习python和漂亮的汤，并在网上看到了这段代码：
from BeautifulSoup import BeautifulSoup, SoupStrainer
import re
html = ['<html><body><p align="center"><b><font size="2">Table 1</font></b><table><tr><td>1. row 1, cell 1</td><td&g
浏览 3提问于2012-09-04得票数 2
回答已采纳
所以我之前问了一个关于从html页面中检索高分的问题，另一个用户给了我以下代码来帮助我。我是python和漂亮汤的新手，所以我正在试着一段一段地学习其他代码。我理解它的大部分，但我不知道这段代码是什么，它的功能是什么：
def parse_string(el):
text = ''.join(el.findAll(text=True))
return text.strip()
下面是完整的代码：
from urllib2 import urlopen
from BeautifulSoup import BeautifulSoup
import
浏览 1提问于2009-06-14得票数 1
回答已采纳
我正在尝试从维基百科获取表格数据，但我一直收到错误
AttributeError: 'NoneType' object has no attribute 'findAll'
这是我的代码。
from bs4 import BeautifulSoup
import urllib
import urllib.request
wiki = "https://en.wikipedia.org/wiki/List_of_current_United_States_Senators"
page = urllib.request.urlopen(wiki
浏览 0提问于2016-12-20得票数 1
我是一个新手，正在建立一个网络刮板，将抓取(并最终出口到csv)所有的英国McDonalds地址，邮编和电话号码。我使用的是聚合器，而不是McDonalds网站。
我借用了一些代码并改变了它们的用途：
from bs4 import BeautifulSoup
from urllib2 import urlopen
BASE_URL = "https://www.localstore.co.uk/stores/75639/mcdonalds-restaurant/"
def get_category_links(section_url):
html = urlop
浏览 1提问于2017-03-07得票数 0
3回答
我试图用find()方法解析一个网站，但它找不到我试图解析的所有元素。3个元素中有两个提取得很好。但是我没有成功地解析“商店位置”。HTML的相关片段是 <span class="fs-selected-store__name u-bold" data-store-id="65defcf2-bc15-490e-a84f-1f13b769cd22">PAK'nSAVE Albany</span> 以下是我的代码 import requests
from bs4 import BeautifulSoup as bs
import r
浏览 24提问于2021-08-05得票数 0
回答已采纳
我正在使用Python中的BeautifulSoup处理一个“递归”项目。我读过一份正式文件和许多问题，但我仍然不明白。
from bs4 import BeautifulSoup
s = "<div>C<p><strong>A</strong>B</p></div>"
soup = BeautifulSoup(s, 'html.parser')
print(soup.find("p", recursive=False))给出None
是不是因为我们找不到<
浏览 2提问于2021-11-08得票数 1
回答已采纳
1回答
我正在尝试解析/抓取来自FTP站点的一些数据。具体来说：
最终，我希望能够有一个Python脚本，将从这个网站下载所有的文件。但首先，我要学习如何使用BeautifulSoup4和urllib2获取所有的下载链接。(因为请求不适用于HTML站点？)
我检查了元素，发现它们存储在一个表中，但是当我调用findAll时，我得到了一个属性错误。
这就是我的代码现在的样子(仍在启动。我想摆弄一下表格数据)：
import urllib2
from bs4 import BeautifulSoup
url ="ftp://ftp.ncbi.nlm.nih.gov/genomes/all/GCA
浏览 15提问于2016-07-30得票数 0
我想刮个人的网站和博客的链接在上。
我到目前为止：
if soup.find('div', attrs={'class': "heading-3 block-title iconed-heading font-w-bold"}) is not None:
webs = soup.find('div', attrs={'class': "heading-3 block-title iconed-heading font-w-bold"})
print(webs.findAll(
浏览 5提问于2020-03-06得票数 0
回答已采纳
1回答
我有一个我已经使用了几年的脚本。站点上的一个特定页面加载并返回soup，但我所有的搜索结果都不返回任何结果。这是过去在这个网站上工作过的旧代码。我没有搜索特定的<div>，而是使用find或findAll将其简化为查找任何表，tr或td。我尝试了打开页面的各种方法，包括lxml -都没有结果。
我感兴趣的是player_basic和player_records div
from BeautifulSoup import BeautifulSoup, NavigableString, Tag
import urllib2
url = "http://www.koreabas
浏览 0提问于2017-04-09得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
