开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

为什么soup.find_all总是返回空字符串，即使在指定的类中存在非常明确的标记？

根据提供的问答内容，soup.find_all总是返回空字符串的原因可能有以下几点：

参数传递问题：在使用soup.find_all时，首先需要确认传递的参数是否正确。该方法的第一个参数是要查找的标签名称或标签列表，可以是字符串、正则表达式、列表等。如果传递的参数与标签名称不匹配，或者没有指定标签名称，就会返回空字符串。需要确保正确传递参数，以确保能够正确定位到目标标签。
页面解析问题：soup.find_all是基于BeautifulSoup库进行页面解析的方法，它会将HTML文档解析为一个树形结构。如果传入的HTML文档有问题，例如标签闭合不正确、嵌套关系混乱等，就会导致解析失败，从而返回空字符串。可以先检查HTML文档是否符合规范，或者尝试使用其他方式进行页面解析。
标记名称问题：soup.find_all方法可以根据标签名称来查找匹配的标签，但要注意区分大小写。如果传递的标签名称与实际页面中的标签名称大小写不匹配，就无法正确定位到目标标签。需要确保标签名称的大小写一致性，以避免返回空字符串。
标记属性问题：除了按照标签名称查找，soup.find_all还可以通过标记的属性进行查找。可以在参数中传递一个字典，指定标记的属性和属性值，从而实现更精确的定位。如果指定的属性或属性值与页面中的标记不匹配，也会导致返回空字符串。需要确保传递的属性和属性值与目标标记的属性一致。

总之，要正确使用soup.find_all方法，需要注意传递正确的参数、确保页面解析正常、注意标签名称和属性的大小写匹配。此外，为了更好地进行页面解析和数据提取，可以使用BeautifulSoup库提供的其他方法和功能。例如，通过调用find方法、select方法、利用CSS选择器等，可以实现更精确的查找和定位。另外，如果需要在云计算环境下进行数据处理和爬虫任务，可以考虑使用腾讯云的Serverless云函数SCF（Serverless Cloud Function）进行部署和运行，详情请参考腾讯云SCF产品介绍：https://cloud.tencent.com/product/scf

页面内容是否对你有帮助？

有帮助

没帮助

相关·内容

Python爬虫库-BeautifulSoup的使用

\n] # 没有id值为'footer'的div标签，所以结果返回为空 soup.find_all('div', id='footer') # [] 获取所有缩略图的 div...指定名字的属性参数值可以包括：字符串、正则表达式、列表、True/False。 True/False 是否存在指定的属性。...reeoo.com 字符串的标签 soup.find_all(attrs={'data-original': re.compile("reeoo.com")}) 搜索 data-original 属性为指定值的标签...当没有搜索到满足条件的标签时，find() 返回 None，而 find_all() 返回一个空的列表。...语义和CSS一致，搜索 article 标签下的 ul 标签中的 li 标签 print soup.select('article ul li') 通过类名查找，两行代码的结果一致，搜索 class

1.8K3 0

外行学 Python 爬虫第三篇内容解析

获取网页中的信息，首先需要指导网页内容的组成格式是什么，没错网页是由 HTML「我们成为超文本标记语言，英语：HyperText Markup Language，简称：HTML」组成的，其次需要解析网页的内容...以上内容摘自维基百科，它将网页的组成做了一个简单且明确的解释，从中我们知道 HTML、CSS、JavaScript 是一个网页的重要组成部分。...从以上 HTML 文档内容中，可以看出索要获取的内容在的小节中，那么需要使用 find 方法从整个 HTML 文档中先把这个小节提取出来，...，若该网页中不存在所需内容将返回一个空字典。...对网页内容的解析实际上就是对 HTML 文档的分割读取，借助于 BeautifuSoup 库，可以非常简单的从复杂的 HTML 文档中获取所需要的内容。

1.2K5 0

Python爬虫库-Beautiful Soup的使用

\n] # 没有id值为'footer'的div标签，所以结果返回为空 soup.find_all('div', id='footer') # [] 获取所有缩略图的 div...指定名字的属性参数值可以包括：字符串、正则表达式、列表、True/False。 True/False 是否存在指定的属性。...reeoo.com 字符串的标签 soup.find_all(attrs={'data-original': re.compile("reeoo.com")}) 搜索 data-original 属性为指定值的标签...当没有搜索到满足条件的标签时，find() 返回 None，而 find_all() 返回一个空的列表。...语义和CSS一致，搜索 article 标签下的 ul 标签中的 li 标签 print soup.select('article ul li') 通过类名查找，两行代码的结果一致，搜索 class 为

1.6K3 0

Python爬虫库-BeautifulSoup的使用

\n] # 没有id值为'footer'的div标签，所以结果返回为空 soup.find_all('div', id='footer') # [] 获取所有缩略图的 div...指定名字的属性参数值可以包括：字符串、正则表达式、列表、True/False。 True/False 是否存在指定的属性。...reeoo.com 字符串的标签 soup.find_all(attrs={'data-original': re.compile("reeoo.com")}) 搜索 data-original 属性为指定值的标签...当没有搜索到满足条件的标签时，find() 返回 None，而 find_all() 返回一个空的列表。...语义和CSS一致，搜索 article 标签下的 ul 标签中的 li 标签 print soup.select('article ul li') 通过类名查找，两行代码的结果一致，搜索 class

2K0 0

如何避免 Java 中的“NullPointerException”

您可以在本文中找到有关异常及其性质的更多详细信息。 6 为什么 NullPointerException 是最常见的异常？开发人员是人类，总是习惯于忘记一些事情。...而且，即使我们忘记使用 Optional 功能，这个想法也会突出显示 .get() ，提醒我们为设计提供空检查。 9 Optional 为什么不那么受欢迎？...它说我们返回一个可能为空的字符串，并且它没有用 @Nullable 注释标记。...让我们创建一个简单的类，其中包含两个字段，其中一个是我们标记为@NonNull 的字段：具有两个字段的简单类 Checker Framework 会接受此代码吗？...不幸的是，我还没有找到在 maven 编译步骤中添加它的方法。因此，如果存在，请在评论中告诉我，我会对其进行测试并将其添加到文章中。

2.9K2 0

10个实用的但偏执的Java编程技术

也许吧，但请看Javadoc：如果这个虚拟路径不表示一个文件夹目录，则此方法返回null。否则将会返回一个字符串数组，每一个字符串表示目录中的文件或文件夹。对，没错。我们可以添加一些校验： ?...3.不要相信“-1” 我知道这是偏执的，但Javadoc中对 String.indexOf()方法明确指出：对象内第一次出现指定字符的位置索引，如果为-1则表示该字符不在字符序列中。...所以你可以将比较常量放置在左侧，这样就不会发生意外赋值的错误了。回到顶部 5.检查Null和Length 无论如何，只要你有一个集合、数组等，请确保它存在，并且不为空。 ?...我不相信你（正确继承我这个父类的所有子类），我也不相信我自己（不小心继承我这个父类的所有子类）。所以对于那些意义明确的方法要严格用final标识。 ? 7.所有变量和参数都是final 就像我说的。...回到顶部 9.总是在Switch语句的Default中抛出异常 Switch语句……它们其中一个可笑的语句我不知道该对它敬畏还是哭泣，但无论如何，既然我们坚持用switch，那我们不妨将它用得完美，看下面的代码

3772 0

10个实用的但偏执的Java编程技术

也许吧，但请看Javadoc：如果这个虚拟路径不表示一个文件夹目录，则此方法返回null。否则将会返回一个字符串数组，每一个字符串表示目录中的文件或文件夹。对，没错。我们可以添加一些校验： ?...3.不要相信“-1” 我知道这是偏执的，但Javadoc中对 String.indexOf()方法明确指出：对象内第一次出现指定字符的位置索引，如果为-1则表示该字符不在字符序列中。...所以你可以将比较常量放置在左侧，这样就不会发生意外赋值的错误了。回到顶部 5.检查Null和Length 无论如何，只要你有一个集合、数组等，请确保它存在，并且不为空。 ?...我不相信你（正确继承我这个父类的所有子类），我也不相信我自己（不小心继承我这个父类的所有子类）。所以对于那些意义明确的方法要严格用final标识。 ? 7.所有变量和参数都是final 就像我说的。...回到顶部 9.总是在Switch语句的Default中抛出异常 Switch语句……它们其中一个可笑的语句我不知道该对它敬畏还是哭泣，但无论如何，既然我们坚持用switch，那我们不妨将它用得完美，看下面的代码

5442 0

干货 | 国外大神总结的10个Java编程技巧！

这是毫无疑问的，把一种表达式转换成另一种更好的表达式，并不会失去什么。只要我们的Options是真实存在的（Java 8中 Optional是对可以为空的对象进行的封装），不是吗？...也许吧，但是看看这个Javadoc： “如果抽象路径名表示的不是一个目录，那么这个方法返回null。否则返回一个字符串数组，其中每个字符串表示当前目录下的一个文件或目录。”...3 不要相信“-1” 我知道这很偏执，Javadoc中关于 String.indexOf() 的早期描述是这样的: “字符在字符序列中第一次出现的位置将作为结果[被返回]，如果字符不存在则返回-1。”...毕竟，我们有非常多关于NULL——价值亿万美金的错误的讨论。为什么不开始讨论 -1呢，某种意义上来说 -1 是 null 在int类型下的另一种形式。 4 避免意外的赋值是的。...5 检查 null和长度不管什么时候你有一个集合、数组或者其他的，确保它存在并且不为空。 ? 你不知道这些数组来自哪儿，也许是早期的JDK API呢？

6231 0

一文带你了解Python爬虫（二）——四种常见基础爬虫方法介绍

还是非常不方便的，而Requests它会比urllib更加方便，可以节约我们大量的工作。...cookies={} #按照字符；进行切割读取，返回列表数据，然后遍历 #split()：切割函数 strip()去除字符串前后空白 for line in f.read().split(';...'): #split将参数设置为1，把字符串切割成两个部分 name,value=line.strip().split('=',1) #为空字典cookies添加内容 cookies...XML 文档中查找信息的语言。...XPath 可用来在 XML 文档中对元素和属性进行遍历 from lxml import etree text=''' <title

1.3K3 1

jsp中的JSTL与EL表达式用法及区别(一)

为什么要用JSTL 我们JSP用于开发信息展现页非常方便;也可以嵌入java代码(scriptlet、表达式和声明)代码用来实现相关逻辑控制。看下面程序。...EL基本格式 EL表达式的格式：用美元符号（$）定界,内容包括在花括号（{}）中; 例如: ${loginInfoBean.suser} 此外，您可以将多个表达式与静态文本组合在一起以通过字符串并置来构造动态属性值...empty 运算符采用单个表达式作为其变量（也即，${empty input}），并返回一个布尔值，该布尔值表示对表达式求值的结果是不是“空”值。...求值结果为 null 的表达式被认为是空，即无元素的集合或数组。如果参数是对长度为零的String 求值所得的结果，则 empty 运算符也将返回 true。...EL文字文字表示固定的值 — 数字、字符、字符串、布尔型或空值。在 EL 表达式中，数字、字符串、布尔值和 null 都可以被指定为文字值。字符串可以用单引号或双引号定界。

1.7K5 0

国外大神总结的 10 个 Java 编程技巧！

这是毫无疑问的，把一种表达式转换成另一种更好的表达式，并不会失去什么。只要我们的Options是真实存在的（Java 8中 Optional是对可以为空的对象进行的封装），不是吗？讨论一下… 2....也许吧，但是看看这个Javadoc： “如果抽象路径名表示的不是一个目录，那么这个方法返回null。否则返回一个字符串数组，其中每个字符串表示当前目录下的一个文件或目录。”...不要相信“-1” 我知道这很偏执，Javadoc中关于 String.indexOf() 的早期描述是这样的: “字符在字符序列中第一次出现的位置将作为结果[被返回]，如果字符不存在则返回-1。”...毕竟，我们有非常多关于NULL——价值亿万美金的错误的讨论。为什么不开始讨论 -1呢，某种意义上来说 -1 是 null 在int类型下的另一种形式。 4. 避免意外的赋值是的。...检查null和长度不管什么时候你有一个集合、数组或者其他的，确保它存在并且不为空。 ? 你不知道这些数组来自哪儿，也许是早期的JDK API呢？ 6.

2.3K2 0

国外大神总结的 10 个 Java 编程技巧！

这是毫无疑问的，把一种表达式转换成另一种更好的表达式，并不会失去什么。只要我们的Options是真实存在的（Java 8中 Optional是对可以为空的对象进行的封装），不是吗？讨论一下… 2....也许吧，但是看看这个Javadoc： “如果抽象路径名表示的不是一个目录，那么这个方法返回null。否则返回一个字符串数组，其中每个字符串表示当前目录下的一个文件或目录。”...不要相信“-1” 我知道这很偏执，Javadoc中关于 String.indexOf() 的早期描述是这样的: “字符在字符序列中第一次出现的位置将作为结果[被返回]，如果字符不存在则返回-1。”...毕竟，我们有非常多关于NULL——价值亿万美金的错误的讨论。为什么不开始讨论 -1呢，某种意义上来说 -1 是 null 在int类型下的另一种形式。 4. 避免意外的赋值是的。...检查null和长度不管什么时候你有一个集合、数组或者其他的，确保它存在并且不为空。 ? 你不知道这些数组来自哪儿，也许是早期的JDK API呢？ 6.

6372 0

【译】尝试使用Nullable Reference Types

这是我们添加一些新属性以允许您在编译器中进行可空分析影响的地方。 T?的问题你想知道：为什么在指定可以用可空引用或值类型替换的泛型类型时“只”允许T？。不幸的是，答案很复杂。通常T?...它们可以在接受输入的任何内容上指定：值参数 in 标记的参数 ref 标记的参数字段属性索引要点：这些属性仅影响使用它们注解的调用者的方法的可空分析。...8: } 第一个方法指定返回的T可以是空值。这意味着此方法的调用方在使用其结果时必须检查是否为空。第二个方法有一个更复杂的签名：[NotNull] ref T[]? 数组。...（bool）表示即使类型允许，参数也不能为空，条件是该方法的bool返回值。...MaybeNullWhen（bool）表示即使类型不允许参数为空，参数也可以为空，条件也是该方法的bool返回值。它们可以在任何参数类型上指定。

3.8K1 0

HTML解析大法|牛逼的Beautiful Soup！

在Python2.7.3之前的版本和Python3中3.2.2之前的版本,必须安装lxml或html5lib, 因为那些Python版本的标准库中内置的HTML解析方法不够稳定. 4.开始动手实践...print(soup.p.string) 输出结果： The Dormouse's story BeautifulSoup用NavigableString类来包装Tag中的字符串，一个NavigableString..., **kwargs) name:查找到所有名字为name的标记，字符串对象会被自动忽略掉。...如果一个指定的名字的参数不是搜索的参数名，这个时候搜索的是指定名字的Tag的属性。搜索指定名字的属性时可以使用的参数值包括字符串、正则表达式、列表、True。...text：通过text参数，我们可以搜索文档中的字符串内容。与name参数的可选值是相同的。

1.4K2 0

网络爬虫 | Beautiful Soup解析数据模块

从HTML文件中提取数据，除了使用XPath，另一种比较常用的解析数据模块。Beautiful Soup模块中查找提取功能非常强大、方便，且提供一些简单的函数来导航、搜索、修改分析树等功能。...在单个节点结构层次非常清晰的情况下，使用这种方式提取节点信息的速度非常快。...text: 指定text参数可以获取节点中的文本，该参数可以指定字符串或者正则表达式对象。...name: 指定节点名称，返回一个可迭代对象，所有符合条件的内容均为对象中的一个元素。...attrs: 通过指定属性进行数据的获取工作，可直接填写字典类型的参数，亦可通过赋值的方式填写参数。 text: 指定text参数可以获取节点中的文本，该参数可以指定字符串或者正则表达式对象。

5775 0

10个实用的但偏执的Java编程技术

欢迎不同的观点… 2.不要相信早期的JDK API 在Java早期，编程是一件非常痛苦的事情。...也许吧，但请看Javadoc：如果这个虚拟路径不表示一个文件夹目录，则此方法返回null。否则将会返回一个字符串数组，每一个字符串表示目录中的文件或文件夹。对，没错。...但Javadoc中对 String.indexOf()方法明确指出：对象内第一次出现指定字符的位置索引，如果为-1则表示该字符不在字符序列中。...5.检查Null和Length 无论如何，只要你有一个集合、数组等，请确保它存在，并且不为空。...9.总是在Switch语句的Default中抛出异常 Switch语句……它们其中一个可笑的语句我不知道该对它敬畏还是哭泣，但无论如何，既然我们坚持用switch，那我们不妨将它用得完美，看下面的代码：

97913 0

BeautifulSoup4用法详解

字符串 最简单的过滤器是字符串.在搜索方法中传入一个字符串参数,Beautiful Soup会查找与字符串完整匹配的内容,下面的例子用于查找文档中所有的标签: soup.find_all('b')...为什么 find_all("p", "title") 返回的是CSS Class为”title”的标签?...] 按CSS搜索按照CSS类名搜索tag的功能非常实用,但标识CSS类名的关键字 class 在Python中是保留字,使用 class 做参数会导致语法错误.从Beautiful Soup...的4.1.1版本开始,可以通过 class_ 参数搜索有指定CSS类名的tag: soup.find_all("a", class_="sister") # [<a class="sister" href....foo 但是 find() 方法并没有找到任何结果,所以它的返回值是 None .需要找出为什么 find() 的返回值是 None .

10K2 1

偏执却管用的10条Java编程技巧

只要我们的Options是真实存在的（Java 8中 Optional是对可以为空的对象进行的封装），不是吗？...也许吧，但是看看这个Javadoc： “如果抽象路径名表示的不是一个目录，那么这个方法返回null。否则返回一个字符串数组，其中每个字符串表示当前目录下的一个文件或目录。”...不要相信“-1” 我知道这很偏执，Javadoc中关于 String.indexOf() 的早期描述是这样的… “字符在字符序列中第一次出现的位置将作为结果[被返回]，如果字符不存在则返回-1。...毕竟，我们有非常多关于NULL——价值亿万美金的错误的讨论。为什么不开始讨论 -1呢，某种意义上来说 -1 是 null 在int类型下的另一种形式。 4.避免意外的赋值是的。...如果你的表达式中有常量，将它放在等式左边。这样当你打算再添加一个 = 时，不容易出错。 5.检查null和长度不管什么时候你有一个集合、数组或者其他的，确保它存在并且不为空。

7597 0

Java 编程要点之 IO 流详解

请注意，这两个CopyBytes和CopyCharacters使用int变量来读取和写入；在 CopyCharacters，int 变量保存在其最后的16位字符值;在 CopyBytes，int 变量保存在其最后的...转换成独立标记该 ScanXan 示例是将所有的输入标记为简单的字符串值。...格式化值的最小宽度;如有必要，该值被填充。默认值是左用空格填充。 Flags(标志)指定附加格式设置选项。在 Format 示例中，+ 标志指定的数量应始终标志格式，以及0标志指定0是填充字符。...如果 Console 对象存在，通过此方法将其返回。如果返回 NULL，则 Console 操作是不允许的，要么是因为操作系统不支持他们或者是因为程序本身是在非交互环境中启动的。...（在本例中，假设 verify 是总是返回true ）重复下列步骤，直到用户输入的密码相同两次：调用 Console.readPassword 两次提示和读一个新的密码。

6232 0

二、爬虫基础库

字符串常被包含在tag内.Beautiful Soup用 NavigableString 类来包装tag中的字符串，通过 unicode() 方法可以直接将 NavigableString 对象转换成Unicode...，.next_sibling 属性获取了该节点的下一个兄弟节点，.previous_sibling 则与之相反，如果节点不存在，则返回 None 在文档树中,使用 .next_sibling 和 .previous_sibling...为什么 find_all("p", "title") 返回的是CSS Class为”title”的标签?...,正则表达式,列表,方法或是 True . 传字符串 最简单的过滤器是字符串.在搜索方法中传入一个字符串参数,Beautiful Soup会查找与字符串完整匹配的内容,下面的例子用于查找文档中所有的...beautifulsoup的css选择器我们在写 CSS 时，标签名不加任何修饰，类名前加点，id名前加 #，在这里我们也可以利用类似的方法来筛选元素，用到的方法是 soup.select()，返回类型是

1.7K9 0

点击加载更多

扫码

添加站长进交流群

领取专属 10元无门槛券

手把手带您无忧上云

扫码加入开发者社群

相关资讯

热门标签

活动推荐

运营活动

活动名称

广告关闭