用漂亮的汤和蟒蛇刮桌子
是一个非常有趣的问答内容，但与云计算领域的专业知识关联不大。我可以为您提供关于云计算的相关知识和答案，但无法直接回答这个具体的问答内容。请提供与云计算相关的问题，我将竭诚为您解答。
相关·内容
1回答
我试着用漂亮的汤和蟒蛇从这个网站上提取出所有的可能性
根据不同的类型，它们被划分在不同的桌子上。
例: div id="betType_1_2“下的第一个表表示”全职“的1X2类型的概率。
我试图搜索所有的class=“赔率”，但它也返回来自其他表的赔率。有没有人知道如何通过其"div“每次只提取一个表，然后只刮一个表?那么我就可以搜索class=的”概率“，并获得我需要的数据。谢谢大家，为我糟糕的英语道歉！
浏览 2提问于2014-12-15得票数 1
回答已采纳
3回答
我正试着从刮掉的数据中删掉几个字。
3 Bedroom, Residential Apartment in Velachery
有许多这样的数据行。我想把“卧室”这个词从绳子上去掉。我用漂亮的汤和蟒蛇来刮网页，这里我用的是
for eachproperty in properties:
print eachproperty.string[2:]
我知道上面的代码会做什么。但我想不出怎么才能把“卧室”移走
浏览 3提问于2013-09-16得票数 1
回答已采纳
3回答
用python刮网站
、、、、
我刚开始吃蟒蛇。我试图在网上刮一个网站，以获取价格和标题从它。我已经看过多个教程和博客，最常见的库是漂亮汤和scrapy。如果有一种方法可以在不使用任何第三方库(如beautifulsoup和scrapy )的情况下抓取一个网站，那么就可以使用beautifulsoup。It can use builtin libraries请推荐我一个博客、文章或教程，这样我就能学到
浏览 1提问于2020-06-09得票数 1
回答已采纳
1回答
我正在使用美丽汤和要求，试图从一个网站的数据刮，并有困难拉数据与特定的CSS选择器。我使用SelectorGadget ()来标识我在这个站点寻找的选择器： .op-bovada.\lv由它返回。然而，这是行不通的，也不能转义反斜杠。我尝试了多种变体，以及在网上搜索，但没有任何运气。我有点像个蟒蛇初学者，所以我有一种预感--我忽略了一些显而易见的东西。
这段代码复制了我遇到的问题。
import requests, bs4
res = requests.get('https://www.oddsshark.com/ncaab/odds')
odds = bs4.Beautifu
浏览 0提问于2018-12-01得票数 0
回答已采纳
我一直在尝试抓取一些HTML并从中提取某些文本。
HTML的标记为空或标记只包含空格。
我怎样才能从我的树上去掉所有这些标签？我用的是漂亮的汤和蟒蛇。
浏览 2提问于2018-03-03得票数 0
我用的是蟒蛇和漂亮的汤。我有一个html页面，如下所示：
<i>Hello<\i>
<a href="www.google.com"> Google <\a>
<i>Bye<\i>
<a href="www.google.com"> Google2 <\a>
<i>Hello<\i>
<a href="www.google.com"> Google3 <\a>
<i>Bye<\i>
浏览 9提问于2017-08-16得票数 1
回答已采纳
2回答
我需要帮助刮视频上传日期的facebook视频页面。 查看此链接作为示例视频：https://www.facebook.com/158451774498354/videos/270140270537510/ 这里是2019年4月20日上传的日期。我想用漂亮的汤和蟒蛇来访问它。我尝试了各种方法，但我无法访问此特定区域。如果有人能为我提供一个同样的功能，那将是非常有帮助的。 def find_date(url):
page = requests.get(url)
soup = bs4.BeautifulSoup(page.text,"lxml")
l =
浏览 41提问于2020-09-30得票数 0
我正试着在上刮桌子
默认情况下，该表显示5个条目。我使用干刮和BeautifulSoup如下所示：
import dryscrape
from bs4 import BeautifulSoup
myurl = 'http://apps2.eere.energy.gov/wind/windexchange/economics_tools.asp'
session = dryscrape.Session()
session.visit(myurl)
response = session.body()
soup = BeautifulSoup(response,'lxml&
浏览 2提问于2017-02-18得票数 1
回答已采纳
我已经用过很多次刮刮汤和漂亮的汤，但是找到和服解决方案要容易得多，也更快。唯一的问题是，有时作业确实需要一些调整，这是不可能的(例如，使用独特的模式爬行)。
有没有其他的解决方案可以结合易用性和可选的复杂性？主要是我想定义一个页面抓取模板使用WYSIWYG接口，然后以编程方式编写爬虫。
浏览 0提问于2014-10-06得票数 0
我希望从获得恶意软件哈希，这个注释并保存到文本文件或database.After，每5分钟刷新一次，并自动向文本文件或数据库添加新哈希。我试过用漂亮的汤和请求库，但这个评论没有标签(a，div等)。类，因为注释部分在javascript上工作。
我怎样才能从评论中刮掉这个散列呢？
谢谢你的帮助。
浏览 3提问于2019-11-20得票数 0
回答已采纳
2回答
美汤只刮半张桌子
、、
我正在努力学习如何使用美丽汤和我有一个问题，当刮桌子从维基百科。
from bs4 import BeautifulSoup
import urllib2
wiki = 'https://en.wikipedia.org/wiki/List_of_S%26P_500_companies'
page = urllib2.urlopen(wiki)
soup = BeautifulSoup(page, 'lxml')
print soup
看起来我无法获得完整的维基百科表，但是我得到的最后一个条目是Omnicon Group，在源代码中获得/tr之前它就停
浏览 6提问于2016-02-20得票数 3
回答已采纳
我试图从这个网站上搜集数据：
一开始，熊猫把我弄出了大门，我可以刮桌子，但我却在挣扎着下垂的菜单。我想选择总分框旁边的选项，这些选项是PUB、CIT等。当我检查元素时，它看起来可能是Javascript，而对这些选项进行交互的常用方法不起作用。我已经尝试过贝蒂法尔汤和最近的硒，以选择下降下降的手。这适用于默认的表数据“”
import time
import pandas as pd
from selenium import webdriver
from selenium.webdriver.support.ui import Select
driver = webdriver.Chrome
浏览 3提问于2022-01-27得票数 0
回答已采纳
for h3 in soup.find_all('a'):
print((str(h3.text)),file=open("demo.txt", "a"))
上面是我刮网站的代码行。我用漂亮的汤和硒来刮这个网站。它说的第一行“一个”标签汤找到了所有。然后打印这些标记的文本，并在文件demo.txt中打印它。
由于某种原因，我不得不加上"a“，作为全文的附件，以便打印出来。用"w“只打印一行。我正在寻找一种关闭demo.txt文件的方法，以便它能够不断地附加到同一个文件中。
这也将有助于学习如何从文本文件中删除某些行。例如
浏览 0提问于2019-11-09得票数 0
回答已采纳
1回答
我对python和bs4很陌生。几个小时以来，我一直在用漂亮的汤和熊猫在几个网页上刮桌子。当我刮2页时，它起作用了，但是当我试图刮掉所有的13个网页时，我遇到了麻烦。当我将range函数从2改为13时，代码不会生成DF或CSV文件。我做错什么了？
dfs=[]
for page in range(13):
http = "http://websitexample/Records?year=2020&page={}".format(page+1)
url = requests.get(http)
soup = BeautifulSoup(url
浏览 0提问于2020-10-14得票数 1
回答已采纳
我需要刮一下这个网站：
我要查到岸价0000320193。
当我做soup.prettify时，它只是说它需要使用javascript。另外，我不想打开网页浏览器，因为它需要自动化
我需要使用python漂亮的汤和请求库。
浏览 2提问于2020-07-19得票数 2
回答已采纳
我正在用美丽的汤和硒刮，它工作得很好，直到突然间一些特殊的字符不再正确地显示出来。下面是一个屏幕截图，它现在是如何显示的：
我正在使用：
版96.0.4664.110 (官方版本)用于Linux，(64-bit))Chromedriver for Chrome 96 ( )
知道怎么解决吗？我已经清除了铬的缓存。
浏览 4提问于2022-01-02得票数 1
回答已采纳
1回答
我正在寻找最好和最有效的解决方案，如何刮除以下网站：
Indeed.comLinkedIn 谷歌地图谷歌搜索
我现在使用的是八达通抓取工具，但我对这个工具不太满意。他们提供的云抓取经常失败，所以我总是不得不在本地刮刮，这不是很有效。我需要一个工具/程序/服务，可以刮这些网站的大规模和基于云的。
有什么工具可以推荐吗？我听说了很多关于刮擦，漂亮的汤和其他工具，你需要Python的知识。我会花时间学习这些工具，但我不太确定什么是最有效的方法。
我很高兴这里有人能给我一些建议:)
PS:我是招聘人员，需要我的候选人的资料。我想刮尽可能多的工作上市平台，以收集所有的公司谁正在招聘。
浏览 1提问于2022-06-10得票数 0
2回答
我如何使用漂亮的汤和来刮一个网站。例如，我有一个网站- ，我希望我的脚本返回该产品的所有规格(单击规格)-英特尔、台式机、……、2.4 the、1066 the、……，3年为限。
在使用selectorgadget之后，我得到了字符串- .desc
我该如何使用它？
谢谢:)
浏览 1提问于2009-02-26得票数 3
回答已采纳
有一个网站，每月建立一个pdf报告。我想监测它每一个小时，并使新的pdf电子邮件到我的电子邮件，每当新的pdf被上传。我想用蟒蛇做它。此外，我熟悉美丽的汤和刮痕，但我不知道如何检查新的pdf文件，只抓取新的pdf文件。
浏览 4提问于2019-12-08得票数 0
回答已采纳
我正试着在家得宝上刮这个产品页面，看看它的价格。但是，我注意到，我试图从其中提取的div类的旁边有一个“flex”元素。有人能解释一下我是怎么刮的吗？在这种情况下，美丽汤和lxml还有效吗？
from bs4 import BeautifulSoup
import requests
ua = {"User-Agent":"Mozilla/5.0"}
url = ('https://www.homedepot.com/p/POWERTEC-12-in-80-Grit-PSA-Aluminum-Oxide-Sanding-Disc-Self-Stick-
浏览 7提问于2022-01-31得票数 0
1回答
我在蟒蛇里用刮刀写了一个刮刀。它包含100 start_urls。
一旦满足条件，我希望终止刮取过程。(终止对特定div的刮擦)。终止的意思是它应该停止刮掉所有的urls。
有没有可能
浏览 3提问于2014-05-27得票数 5
回答已采纳
我想用蟒蛇和硒从url下面获得氨基酸序列，但没有成功。
我试过你的美味汤和硒。
from selenium import webdriver
driver = webdriver.Chrome()
driver.get('http://flybase.org/download/sequence/FBgn0003719/FBpp')
iframe = driver.find_element_by_class_name('scroller')
notification_element = driver.find_element_by_class_name(&
浏览 2提问于2019-07-08得票数 4
2回答
顾名思义，我正试着用美福汤和硒擦拭一张桌子。我知道我很可能不需要这两个库，但是我想尝试一下，如果使用Selenium的aware选择器会有帮助，不幸的是，它们没有帮助。
该网站可在以下网址找到：
我想要做的是在底部的“交易”下面刮一下桌子
这是一个截图
一旦我能够抓取表，我将收集表行中的td数据。
例如，我希望“29/Dec/2021”列在“出版日期”之下。不幸的是，我没能走到这一步，因为我抓不到桌子。
这是我的代码：
from bs4 import BeautifulSoup
import requests
from selenium import webdriver
url
浏览 4提问于2022-01-13得票数 -1
回答已采纳
我有一个查询，因为我一直在刮一个网站"“，因为我无法从表中给定的链接中抓取电子邮件id。虽然需要从给定表格中的链接中刮取姓名、电子邮件和董事。请任何人，解决我的问题，因为我是一个新手，使用python与美丽的汤和要求的网页刮。
谢谢你，迪克沙
#Scraping the website
#Import a liabry to query a website
import requests
#Specify the URL
companies_list = "https://www.zaubacorp.com/company-list"
link = requests.
浏览 2提问于2020-05-03得票数 0
回答已采纳
1回答
我想从一个网站的数据，但我遇到了一个小问题，我没有最小的想法如何解决。(我的第一个刮擦工具，使用漂亮的汤和请求)我需要右"07xx xxx xxx“的电话号码。
当我第一次打开页面并请求它时，我得到以下信息：
问题是，我需要电话号码，但它不会显示，直到我按下"Arata telefon“，有什么办法，我可以把这个信息？
下面是页面本身：
浏览 3提问于2016-06-11得票数 1
回答已采纳
1回答
使用网页触发刮伤外壳
、、、、
我对刮伤和蟒蛇很陌生。我已经编写了一个蜘蛛，它从命令行提取start_urls并开始抓取。在此之前，一切都很好。
现在，我想提交start_urls从一个网页(设计使用烧瓶).After点击一个按钮，它应该触发刮刮外壳，并开始刮网站。
浏览 2提问于2015-08-11得票数 2
回答已采纳
2回答
我想刮一张像这样的桌子，我想刮一下赌注者和赔率。问题是我不知道那是什么类型的桌子，也不知道如何刮它。
这些线程可能可以帮助我(或)，但如果有人能指出正确的方向，或者更好地在这里给出指示，我会很感激。
那么，这个概率表是什么样的一种表，它能用R刮吗?如果是的话，怎么做？
编辑:我应该说得更清楚。我已经用R刮了一段时间的数据，很可能不需要基本的帮助。经过进一步检查，该表确实是Javascript，这就是问题所在，我需要帮助。
浏览 4提问于2014-06-20得票数 3
回答已采纳
我试图通过python在上搜索家乐福网站的数据。我曾经喝过一杯精美绝伦的汤和硒，但似乎什么都没有用。我得到的错误是你没有权限访问。有没有办法刮这个网站？代码附在下面，需要帮助！
from requests_html import HTMLSession
session = HTMLSession()
headers = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.77 Safari
浏览 2提问于2021-03-11得票数 0
回答已采纳
1回答
我很难用蟒蛇刮桌子。例句是天气历史网站上的大表，每小时都有所有的数字。
url= "https://www.wunderground.com/history/daily/us/va/arlington-county/KDCA/date/2019-1-25"
page = requests.get(url)
soup = BeautifulSoup(page.text, "html.parser")
my_table = soup.find("table", class_ = "mat-table cdk-table mat-sort ng
浏览 4提问于2022-01-05得票数 1
回答已采纳
2回答
我在试着从谷歌奖学金档案里刮点东西。我需要我指定的特殊规格的配置文件。我在Python中使用了优美的汤和硒。例如，我需要一所大学的教授从事我指定的一些学科的工作。你的主意是什么？
我的方式非常慢，需要访问每个配置文件页，以检查我的特殊规格。如果你知道的话，请给我一个更快的方法。
如果有一个快速和更好的方法来做这项工作，请说出来。
浏览 7提问于2020-05-04得票数 0
回答已采纳
我是Python的新手，我正在尝试制作web抓取程序来补充我在最近解决的另一个问题中提到的问题(谢谢！)我想让程序抓取一个表中的值。在底部，我有一个剪贴画，上面标有我想要刮的值的圆圈。 ? 指向被抓取的站点的链接： https://www.barchart.com/stocks/quotes/$SPX/technical-analysis 这是我目前拥有的web抓取部分代码的一部分。我用的是精美的汤和点菜。它当前在空闲时返回"None“。我们非常感谢大家在这方面的帮助。非常感谢! import bs4
import requests
res = requests.get(
浏览 5提问于2020-10-04得票数 0
2回答
我正在浏览一个网站使用干刮在python和我需要上传一个文件到这个网站。但是只有一种方法，那就是点击一个按钮，浏览我的文件并选择我想要的文件。我怎么能用蟒蛇做这件事呢？如果有人也能帮我用干刮，我会很感激，但我会接受所有的答案。
下面是示例图像：
浏览 4提问于2017-06-22得票数 1
回答已采纳
2回答
我试图用python编写一个小的web刮刀，我想我遇到了一个编码问题。我在试着刮 (特别是页面上的表格)--一行可能看起来像这样-
<tr>
<td style="width:64.9%;height:11px;">
<p><strong>the great escape 2017 local early bird tickets, selling fast</strong></p>
</td>
<
浏览 1提问于2016-09-30得票数 2
回答已采纳
3回答
我想使用硒或风车内的谷歌应用程序引擎，以便刮一个JS充满的网站。我知道风车是用python和javascript编写的。
这个是可能的吗？如果是，如何插入库？
如果没有，你能解释一下原因并提供替代方案吗？
谢谢。
更新
我又搜索了一下，发现scrapy是纯粹的蟒蛇。
这样行得通吗？它能处理javascript吗？
浏览 4提问于2011-05-09得票数 1
回答已采纳
我正在从一个有游艇列表的网站上抓取。我想得到每艘游艇的具体数据点。我用的是漂亮的汤和硒。
当我使用：
for i in soup.find_all('li',{'class':'col-xs-12 col-sm-6 col-xl-4 padding10'}):
print(i)
以下是返回的内容(每艘游艇都有一艘，所以我在这里展示的只是其中之一)：
<li class="col-xs-12 col-sm-6 col-xl-4 padding10" data-bareboat_icon="flaticon-p
浏览 1提问于2021-09-27得票数 0
回答已采纳
1回答
我目前正试图建立一个MMA博客/统计网站，并这样做，我是刮UFC网站的每一个运动员的信息。我用的是美汤和Python。
到目前为止，我已经设法刮了一个运动员的名字，然而，当我循环，它只重复第一个运动员的名字，而不是显示下一个运动员等等。
from bs4 import BeautifulSoup
import requests
source = requests.get('https://www.ufc.com/athletes/all').text
soup = BeautifulSoup(source, 'lxml')
for fighter in
浏览 3提问于2020-08-02得票数 0
回答已采纳
我在试着抓取一个Flipkart评论页面 https://www.flipkart.com/reviews/b9ec5c5c-3814-40ef-8f73-84f253ee09ce 我用的是蟒蛇，美丽的汤和硒。下面是代码 options = webdriver.ChromeOptions()
options.add_argument('--ignore-certificate-errors')
driver = webdriver.Chrome(executable_path='D:\ESS\Intern-Shubham\chromedriver.exe',o
浏览 7提问于2021-01-22得票数 1
回答已采纳
2回答
我尝试刮这个链接，但我没有成功，我没有任何错误，我的价值观正在走向空白。
我用的是蟒蛇的刮擦和飞溅。怎么了？有人帮我吗？
这是我的蜘蛛密码：
# -*- coding: utf-8 -*-
import scrapy
from scrapy_splash import SplashRequest
from boom.items import BoomItem
from scrapy.selector import HtmlXPathSelector
class OrumcekSpider(scrapy.Spider):
name = 'oru
浏览 7提问于2017-08-24得票数 0
回答已采纳
1回答
我对蟒蛇和刮痕很陌生。我曾希望我能把这两者结合起来，去刮一些赌博网站。这就是一个例子；
如果我只是查看该页面的源代码html，则主概率表不在html中。这让我很困惑。试过在上面用刮痕，但也有同样的问题。
在那个页面上发生了什么事，没有人能看到表中的数据？那么怎样才是最简单的方法呢？
谢谢!
浏览 5提问于2020-03-02得票数 0
我读过刮痕是一个网络爬行工具和美丽的汤是一个图书馆的刮痕。但我的朋友说，这两者是不同的，我们可以完成相同的任务，在美丽的汤，这是通过刮擦。我朋友的观点是真的吗？我也怀疑美丽的汤是刮刮的一部分，还是另一种？请告诉我
浏览 1提问于2015-02-25得票数 2
回答已采纳
1回答
我只想用维基百科的医学数据进行分析。我用蟒蛇刮东西。我使用这个库在查询中按单词进行搜索：
import wikipedia
import requests
import pprint
from bs4 import BeautifulSoup
wikipedia.set_lang("en")
query = raw_input()
WikiPage = wikipedia.page(title = query,auto_suggest = True)
cat = WikiPage.categories
for i in cat:
print i
得到分类。
但是，我的
浏览 2提问于2015-11-10得票数 6
2回答
我试着从这个网站上刮表：
我正在使用，我希望将日期作为列。(例如2020-06-30等)我用代码做了这样的事情：
source = urllib.request.urlopen('https://stockrow.com/VRTX/financials/income/quarterly').read()
soup = bs.BeautifulSoup(source,'lxml')
table = soup.find_all('table')
但是，我不能拿到桌子。我对刮擦有点陌生，所以我看了其他的堆栈溢出页面，但没能解决这个问题。你能帮帮我吗？那
浏览 5提问于2020-09-17得票数 0
回答已采纳
1回答
我正在尝试从网站上刮取的网页结果：
我喝了一杯香甜的汤。机械汤和机械到目前为止还不能刮的搜索结果。
import re
from mechanize import Browser,urlopen
browser = Browser()
browser.set_handle_robots(False)
browser.addheaders = [('User-agent', 'Mozilla/5.0 (X11; U; Linux i686; en-US; rv:1.9.0.1) Gecko/2008071615 Fedora/3.0.1-1.fc9 Firefox/3.0
浏览 5提问于2021-03-31得票数 0
回答已采纳
我正在使用漂亮的汤和机械化的网络刮银行网站。
import re
import mechanize
br = mechanize.Browser()
br.set_handle_robots(False)
br.set_handle_equiv(False)
response = br.open("https://m.netbanking.hdfcbank.com/netbanking/")
br.select_form(nr=0)
br.form['fldLoginUserId'] = "131325"
br.submit()
我需要在
浏览 7提问于2017-12-12得票数 0
回答已采纳
2回答
我已经搜索过互联网，但由于登录过程无法从中抓取，如果任何人能够为该网站提供特定代码，这将是有帮助的。我也试着在蟒蛇身上刮擦。
浏览 4提问于2016-12-22得票数 0
回答已采纳
当涉及到用漂亮的汤和蟒蛇抓取网络时，我还是个初学者。在yt-videos的帮助下，我成功地实现了我的目标，即在汽车销售端提取许多汽车列表的汽车名称。但是，我处于最后一步，不知道如何访问汽车名称：
这是我的代码(我只是遵循了youtube的例子)：
page_soup = soup(page_html, "html.parser")
containers = page_soup.findAll("div",{"class":"ads__unit__content"})
contain = containers[0]
containe
浏览 0提问于2020-04-24得票数 0
我试图通过网站使用pandas.read_html()函数从各种html表中抓取英文足球数据。
示例：
import pandas as pd
url = r'http://www.transfermarkt.co.uk/en/premier-league/gegentorminuten/wettbewerb_GB1.html'
df = pd.read_html(url)
但是，这段代码会生成一个"ValueError:无效URL"错误。
然后，我尝试使用urllib2.urlopen()函数解析同一个网站。这一次，我得到了一个"HTTPError:
浏览 0提问于2013-09-22得票数 4
回答已采纳
1回答
如何用树状点文件制作表格？？
例如:这一行来自点文件：
0 [label="TV <= -0.239\nmse = 25.8\nsamples = 160\nvalue = 14.218"] ;
1 [label="TV <= -1.422\nmse = 7.824\nsamples = 66\nvalue = 10.015"] ;
0 -> 1 [labeldistance=2.5, labelangle=45, headlabel="True"] ;
2 [label="radio <= 0.549\nm
浏览 1提问于2022-03-11得票数 0
回答已采纳
1回答
我有一张桌子
Id | Name | Num
----------------
#1 | a | 3
#1 | b | 4
#2 | a | 1
#2 | e | 2
想把它重组成
| a | b | e
---------------
#1 | 3 | 4 |
#2 | 1 | | 2
我可以用熊猫库在蟒蛇上做，但是当数据集很大的时候，它会非常慢。我想知道它是否可以用SQL来完成。
浏览 2提问于2017-03-15得票数 0
回答已采纳
1回答
如何去除字符间的特殊字符和空格？
、、、、
我在“刮刮+蟒蛇”工作。我试过从jobid中提取工作数据，任何一个都可以指导我提取。
我必须单独提取这个内容“总监-财务-计划-分析”。
还需要删除特殊字符太DirectorFinancialPlanningAnalysis。
我的预期输出应该是: DirectorFinancialPlanningAnalysis
我的蜘蛛密码是：
hxs = Selector(response)
item = response.request.meta['item']
item ['JobDetailUrl'] = response.url
item ['Inte
浏览 3提问于2015-01-14得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
