1回答
好吧，我认为我疯了，因为我在这个问题上反复失败，但我想，也许html发生了一些我不理解的事情。 我一直在尝试从cnn.com上抓取“文章”。我怀疑html中的注入就是我遇到问题的原因。 我从网络安全阅读中了解到，除了“html注入攻击”之外，我对注入一无所知。 我想要这些文章，但我假设我将需要使用类似于上面的其他堆栈溢出问题链接的策略。链接到帮助文件或具体cnn抓取将不胜感激。 或者如果有人知道我如何才能获得
浏览 23提问于2021-01-11得票数 0
回答已采纳
我更喜欢某种类型的Python库，因为我想精通Python，但我对任何建议都持开放态度。
浏览 2提问于2009-05-07得票数 2
--这与 大不相同，因为这个问题甚至不使用请求进行抓取，而是只用于会话和获取页面内容。我对美汤的使用方式也是如此。import asyncioasession = A
浏览 3提问于2019-10-29得票数 1
3回答
用python刮网站
、、、、
如果有一种方法可以在不使用任何第三方库(如beautifulsoup和scrapy )的情况下抓取一个网站，那么就可以使用beautifulsoup。
浏览 1提问于2020-06-09得票数 1
回答已采纳
2回答
我对Python和Web-Scraping非常陌生。我正在尝试访问这个网页上所有表格中的数据，但我不确定为什么我的代码不能工作。也许与JavaScript和python无法读取它有关。
浏览 26提问于2020-07-14得票数 1
1回答
我正在使用美汤来抓取一些html/xhtml网页，如下所示：soup = BeautifulSoup(response.text)
tables_list
浏览 3提问于2017-07-07得票数 1
回答已采纳
我想要使用Python进行web抓取，我需要它，因为我想导入一些数据库，我们如何在Python中做到这一点。我们需要什么样的库？
浏览 2提问于2016-02-11得票数 0
5回答
LinkedIn网络抓取
、、、
是否有人知道适用于LinkedIn站点当前格式的任何web抓取工具或技术，或者如何弯曲API以进行更灵活的分析？最好是基于R或网络，但肯定对其他方法开放。
浏览 0提问于2015-05-13得票数 11
回答已采纳
1回答
所以我遇到了一个问题，当我向网站发送一个请求，然后使用html.fromstring(site.content)，它抓取了一些页面，但是，有些页面只是打印出来，<Element html at 0x7f6359db3368另外，我还不想使用像美汤或Scapy这样的东西。
浏览 1提问于2016-10-20得票数 1
1回答
我正在写一个网页抓取程序，以便从网站上获得我的成绩。我使用Mechanize登录页面并导航到我要抓取的区域。不幸的是，页面使用Javascript对页面进行加密(可能是为了阻止我抓取)。我找到了解密脚本并移植到了Python。它起作用了，我用它从页面中提取加密的字符串，当我转换它时，它变成了HTML中的一个表。那么，为了达到我的观点，有没有什么方法可以把HTML重新注入到页面中，并使用mechanize来使用表格上的链接来获得我的成绩？
谢谢你的帮助！
浏览 3提问于2013-01-14得票数 1
回答已采纳
我试图从whoscored.com抓取足球数据，该网站有一个面向网络的安全封装体，它不让我抓取。最初，我试图提供user_agent，并更改了标题，然后它就起作用了，但这只适用于第一页。由于我需要爬行网站的其他部分，它一直阻止我请求网站。由于阻塞时间一直在增加，它现在变得越来越疲惫。我需要用于研究的数据。anaconda，language python，和library美汤
谢谢。
浏览 3提问于2019-03-29得票数 0
2回答
因此，在网页上有一个按钮，可以在单击后下载csv文件。在过去，我曾使用selenium来完成此任务，但考虑到当前在databricks上运行此脚本的应用程序，我不愿使用web驱动程序。下面是html的样子： <button id="exportReport" class="button">
Export Report</button> == $0 我会链接网页，但它需要登录。有没有什么方法可以通过请求、机械化或
浏览 26提问于2020-08-18得票数 1
回答已采纳
1回答
抓取url不变的分页表
、、、
我正在尝试从下面的网页中抓取表格中的：
它显示了前25个结果，但对于其余的结果，您需要单击next按钮来查看它们。我有一个python脚本，其中我使用请求和漂亮的汤来抓取表格，但只能从HTML中直接抓取前25个结果。我对此完全是新手，经过一些谷歌搜索，我仍然不能想出如何从所有页面中检索所有数据。
浏览 26提问于2021-05-25得票数 1
我现在正在使用漂亮的汤来解析网页，我听说它很有名，也很好，但它似乎不能正常工作。下面是我所做的from bs4 import BeautifulSoup
page = urllib2.urlopen("http://www.cnn.com/2012/10/14/us/skydiver-record-attempt/index.html?我打开网页，把它传给漂亮的汤。
浏览 0提问于2012-10-15得票数 5
回答已采纳
在使用美汤之前，我已经通过一个html请求进行了网络抓取。 但是现在我不想要维基百科的数据，我想要的是用户修改后的数据。用python/c#编写一个脚本，它可以从我当前打开的浏览器中获取数据，使用哪些工具可以从我当前的浏览器中收集数据 理想情况下，这将适用于google chrome 编辑:另一个想法。也许我可以发出一个post请求，以某种方式接收html数据，就像我点击了高性能按钮一样。但是我怎么能做到呢？
浏览 10提问于2020-03-25得票数 0
回答已采纳
我正试着从一个网站上刮一张桌子，但我似乎无法用Python中的Beautifulsoup来解决这个问题。我不确定是不是因为表格格式的原因，但我基本上想把这个表格变成一个CSV。&lat=41.03399&lon=-73.76291&tz=America/New_York&display=table")
soup = BeautifulSoup(page.content, 'html.parser我看过很多Beautifulsoup教程，但是HTML看起来和大多数参考资料不一样。非
浏览 1提问于2017-10-06得票数 0
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
腾讯云开发者
