Python脚本-无法使用beautifulSoup绕过登录页面
在云计算领域，Python脚本是一种广泛应用于开发和自动化任务的编程语言。对于无法使用beautifulSoup绕过登录页面的问题，可以采取以下解决方案：
- 研究登录页面：首先，需要仔细分析登录页面的HTML结构、表单字段和提交方式。可以通过查看网页源代码或使用开发者工具来获取这些信息。
- 模拟登录过程：使用Python的requests库模拟用户登录过程。需要构造登录请求，包括指定登录页面的URL、请求方法（一般是POST）、表单字段（用户名、密码等）以及相应的值。
- 处理登录验证：如果登录页面采用了验证码、动态令牌或其他验证方式，需要在Python脚本中处理这些验证步骤。可以使用第三方库如pytesseract进行验证码识别，或者使用selenium库模拟用户操作。
- 保持会话状态：在模拟登录后，为了保持登录状态，需要在后续请求中保持会话。可以使用requests库的session对象来管理会话状态，确保每个请求都处于已登录状态。
- 解析页面内容：一旦成功绕过登录页面并登录成功，可以使用beautifulSoup或其他HTML解析库来提取所需的页面内容。根据具体需求，可以通过解析HTML标签、CSS选择器或XPath等方法提取目标数据。
需要注意的是，使用Python脚本绕过登录页面可能涉及到网站的法律和道德问题，建议在遵守相关规定和尊重网站所有者的情况下进行操作。另外，此方法并不适用于所有网站，因为一些网站可能采取了更复杂的登录验证机制。
腾讯云提供了多种云计算相关产品和服务，例如虚拟机、容器服务、无服务器函数计算、云数据库等，可以根据具体的应用场景选择适合的产品。详细的产品介绍和相关链接可以参考腾讯云的官方文档：https://cloud.tencent.com/document/product
请注意，以上答案仅供参考，具体解决方案需要根据实际情况和需求进行调整。
相关·内容
我想知道是否有任何方法可以用Python从受限制的网页中抓取html。
我已经能够在一个网页上执行登录，但我想在登录后抓取另一个页面，但网址显示该页面的模式为：main_url/Restricted/Index.aspx
除了不受限制的部分之外，我无法获得整个页面的HTML。如何获取受限制网页的完整HTML？到目前为止，我的代码如下：
from lxml import html
from bs4 import BeautifulSoup as bs
from urllib.request import urlopen
from requests import Session
payload
浏览 0提问于2019-10-02得票数 1
2回答
我正在使用BeautifulSoup4和Python为公司项目抓取局域网数据。由于网站有一个登录界面，我没有被授权访问数据。登录界面是一个弹出，不允许我访问页面源或检查页面元素而不登录。我所犯的错误是-
访问错误:未经授权访问此文档需要用户ID
(变黑部分是敏感信息)。它根本没有关于html标签的信息，因此我不能通过python自动登录。
我已经尝试过requests_ntlm、selenium、python请求，甚至ParseHub，但是它没有工作。我已经被困在这个阶段一个月了！如有任何帮助，我将不胜感激。
下面是我的初始代码：
import requests
from requests_
浏览 5提问于2017-10-28得票数 2
回答已采纳
我试图登录到这个页面以从它中刮取信息，但我无法传递表单，这与我在python3.8中使用BeautifulSoup、Request和urllib登录的任何其他表单不一样。
我不知道该发布什么，或者把有效负载放在哪里，或者从字面上说是任何事情，因为我知道我在Java脚本方面有0的经验。
浏览 14提问于2020-08-01得票数 0
回答已采纳
1回答
我想使用python脚本登录到Ideone.com，然后使用python脚本从我自己的帐户中提取内容。这是我用来登录网站的代码：
import requests
import urllib
from bs4 import BeautifulSoup
url='http://ideone.com/account/login/'
body = {'username':'USERNAME', 'password':'PASSWORD'}
s = requests.Session()
loginPage = s.get
浏览 1提问于2014-08-20得票数 5
我的大学使用CAS作为登录工具，访问教授发布家庭作业和作业的地方。我正在尝试构建一个python脚本，它可以捕获所有的到期日期，并在每个到期日期之前给我发送一个提醒。但是，我无法使用python请求模块通过CAS登录过程。有没有什么方法可以不用在浏览器中打开登录页面就可以登录到CAS？我可以将我的用户名和密码作为参数进行传递吗？
我试图获得的登录屏幕是这个
我尝试使用的requests模块可以在这里找到：
非常感谢！
浏览 4提问于2012-10-08得票数 0
回答已采纳
1回答
我试图制作一个网络刮刀从网站Colloquy.com获得一些信息，我有一个帐户。我有困难，让我的刮刀，但登录到网站。我在BeautifulSoup和Request中使用Python2.7。
我尝试了几种不同的代码，包括将授权密钥添加到登录信息中。然而，无论我尝试了什么，我总是得到“未登录版本”的网站时，我得到的HTML。
我怀疑这与网站使用Javascript进行登录有关(它使用弹出框而不是单独的登录页面)。然而，我对Javascript还不太了解，无法正确地处理这个问题，我也没有找到任何能说明这个问题的指南。
因此，希望有人能告诉我，我的代码/进程出了什么问题，或者我可以在哪里找到如何使
浏览 3提问于2016-05-27得票数 0
回答已采纳
这是网址"“
登录详细信息: usrname :life@life 69.com pwd : shiva@123
在打开具有上述凭据的页面时，我们可以获得以下信息:联系人详细信息0770228XXXX。
但是，如果在url末尾添加?srn = true将提供以下信息()
联系方式07702287887
我使用的代码如下：
import requests
from bs4 import BeautifulSoup
s = requests.session()
login_data = dict(email='life@tech69.com', password='
浏览 1提问于2017-09-14得票数 0
回答已采纳
2回答
因此，我正在制作一个脚本，它从一个页面获取信息，您可以使用BeautifulSoup从该页面查看和检索数据，但要从主页获取数据，您需要登录。如何登录并从它发送给我的页面中检索数据，以便在BeautifulSoup中进行解析？
浏览 1提问于2015-05-09得票数 2
我试图通过python请求登录到一个网页。我需要一个g-recaptcha-响应在我的有效载荷，以便能够登录(我认为是这样)。我使用一个名为AntiCaptchaOfficial的服务来解决这个问题，但是当发送带有有效负载的请求时，它的主页会出现错误："Captcha错误。请重新加载该页面。“
我的代码：
import requests
from bs4 import BeautifulSoup
URL = 'https://qxbroker.com/en/sign-in/'
with requests.Session() as session:
u
浏览 9提问于2022-03-30得票数 0
2回答
无法解析登录的“数据”
、、、、
我试图用python登录到我的大学网站，我想要欢迎页面的源代码，也就是我的仪表板，但是当我运行它时，我得到的源代码与登录page..is相同，因为我无法在登录表单上发布我的信息。这是密码。
import requests
from bs4 import BeautifulSoup
from lxml import html
import collections
url = 'http://erp.college_name.edu/'
opening = requests.get(url)
r = requests.session()
stuff= coll
浏览 1提问于2017-03-16得票数 1
回答已采纳
我正在使用urllib和BeautifulSoup来抓取twitter数据。但是，当我试图抓取其他人的数据时，例如，它需要登录。
如何用Python脚本实现自动登录？或者，如何使用Python模拟登录过程？
浏览 0提问于2013-06-25得票数 0
1回答
我正在努力学习如何使用Python的web特性，并认为我应该通过编写脚本登录到我所在的大学的网页上来练习。最初我使用urllib2编写了代码，但用户alecxe善意地向我提供了使用requests/BeautifulSoup的代码(请参阅：)
我正在尝试登录到页面。该页面为学生和教师提供了一个登录表单(显然，我试图以学生身份登录)。要登录，应该提供一个“人物”，这基本上相当于一个社会保险号码，所以我不想张贴我的有效号码。不过，我可以透露它应该有10位长。
向我提供的代码(对最后打印语句的一个小改动)如下：
import requests
from bs4 import BeautifulSou
浏览 2提问于2016-02-09得票数 2
回答已采纳
1回答
‘我想为需要登录的网站执行网络抓取。我尝试了两种不同的编码方法。我仍然无法执行登录。‘#使用BeautifulSoup在Python中开发代码： #第一种方法从bs4导入BeautifulSoup导入http.cookiejar导入urllib.request导入urllib.parse cj = http.cookiejar.CookieJar()
opener = urllib.request.build_opener(urllib.request.HTTPCookieProcessor(cj))
urllib.request.install_opener(opener)
auth
浏览 8提问于2019-05-14得票数 0
我试图使用BeautifulSoup刮我的银行网站，以自动下载的pdf是从购买过程中产生的整个月。我能够登录并到达按钮所在的页面，但是，按钮不仅仅是一个链接，我认为它可能是一个API调用，但是当我单击该按钮时，我无法在网络下面的检查器中看到任何内容。有任何方法可以使用BeautifulSoup获取这个文档吗？还是我要用硒之类的东西？
这是我用来访问网页的代码，
import requests
from datetime import datetime
from urllib.parse import urlparse
import urllib
import dropbox
import cs
浏览 5提问于2021-03-03得票数 0
回答已采纳
我检查了，但它只有一个答案，这有点超出了我的考虑(刚刚开始使用Python)。我正在使用Python 3。
我正在尝试从中抓取数据，但是如果您有一个BP帐户，这个页面就会非常不同/更有用。我需要我的程序登录我之前，我有BeautifulSoup得到的数据给我。
到目前为止我已经
from bs4 import BeautifulSoup
import urllib.request
import requests
username = 'myUsername'
password = 'myPassword'
from requests import sess
浏览 1提问于2015-07-26得票数 1
回答已采纳
我试图在下面提到的URL上使用python请求进行网络抓取，但无法实现。
网址：
非工作守则：
import requests
from bs4 import BeautifulSoup
s = requests.session()
s.headers.update(headers)
r = s.get("https://support.oracle.com/rs?type=doc&id=1439822.1", auth=('user@email.com', 'mypass'), allow_redirects=True)
so
浏览 2提问于2019-07-25得票数 0
回答已采纳
1回答
我从事一个学术项目，该项目需要使用由Requests和BeautifulSoup库提供支持的Python脚本来抓取互联网上的各种新闻文章。最近，我的任务是从“华尔街日报”上抓取文章，并给了我一个订阅登录来使用。然而，在过去的任务中，我从来不需要在浏览实际文章之前登录网站。我遵循了通过请求和POST登录的基本逻辑，但看起来WSJ的登录并不遵循该协议-我仍然收到“未订阅”的文章页面。此外，previous question asked here似乎表明它正在使用Python2.0(其他我没有经验的东西)，但似乎通过shell脚本提供了一个解决方案-如果可能的话，我正在寻找OAuth /Reque
浏览 17提问于2019-10-18得票数 0
回答已采纳
第一篇帖子，所以请温柔一点。我正在尝试用Python进行网络搜索。
我的目标是制作一个脚本来访问下面的页面：
"WWWzaraDOTcom/uk/en/sale/woman/dresses/view-all-c731533.html“
我希望脚本返回a.name.item，在“data”中的数据，其中span类分别是"sale“和"crossOut对角线”。
我想在其他网站上及时使用这个脚本。
下面的代码可以访问Zara，在RE/BS中打开页面并进行操作--但在谷歌大量搜索BeautifulSoup和span标签之后，我无法提取任何价格。
Regex稍微伤害了我的大脑，
浏览 6提问于2015-12-27得票数 2
我一直试图制作一个Python脚本来登录到某个网站，浏览菜单，填写表单并将它生成的文件保存到文件夹中。
我一直在使用Selenium来使网站完全加载，这样我就可以找到登录的元素，但我并不成功，可能是因为该网站在完全加载之前做了大量的JavaScript内容，但我无法让它完全加载并显示我想要的数据。
我尝试了Robobrowser、Selenium、Request和BeautifulSoup来完成它。
import requests
from bs4 import BeautifulSoup
from selenium import webdriver
url = "https://d
浏览 0提问于2019-04-16得票数 2
回答已采纳
<input type="text" class="inputtext" name="email" id="email" value="" tabindex="1">是电子邮箱
<input type="password" class="inputtext" name="pass" id="pass" tabindex="2">是密码框
<input value="Connexion
浏览 2提问于2015-07-18得票数 1
回答已采纳
1回答
我正试图在HTML页面中解析一个令牌，以便在Hackthebox登录页面上创建一个autologin，但是脚本返回了一个错误，我现在不知道为什么。要登录到这个页面，我需要"_token“值.
我试图解析的登录页面：
<div class="col-xs-12 col-md-6 col-md-offset-3 col-lg-4 col-lg-offset-4">
<form id="loginForm" role="form" method="POST" action=&#
浏览 0提问于2019-07-29得票数 0
回答已采纳
1回答
我正在用机械化的python制作自动登录脚本。
之前我使用机械化没有问题，但在这个网站上的www.gmarket.co.kr我不能做到。
每当我尝试登录时，总是返回登录页面，即使使用正确的gmarket id，通过，我无法登录，我看到一些可疑的消息
"<script language=javascript>top.location.reload();</script>"
我认为这与我的问题有关，但不知道如何处理。以下是用于登录测试的示例id和通过
id: tgi177 pass: tk1047
如果有人能帮我的忙，提前谢谢
代码：
# -*- codin
浏览 0提问于2009-11-19得票数 2
回答已采纳
我正在学习python请求和BeautifulSoup。我已经成功地编写了一个脚本，它可以登录到一个站点上，并删除一个表。下面是代码：
soup = BeautifulSoup(req.content, "lxml")
table = soup.find_all('table', attrs={'class': 'griglia_tab', 'id':'data_table'})[2]
print(table.text)
当我运行脚本时，我得到了所需的输出，但是在这些值之间有很多空行。我如何删除它们
浏览 2提问于2017-10-18得票数 1
回答已采纳
1回答
首先，我不是python专家。我正在学习python，以便从这个特定的游戏网站上抓取数据。我正在尝试从一个需要登录的网站上抓取数据。你不会看到数据，除非你登录到这个网站。(我附上了一个页面截图，你将看到以上网站，一旦你登录)我试图运行以下代码：
import requests
from bs4 import BeautifulSoup
page = requests.get('<website url>')
soup = BeautifulSoup(page.content, 'html.parser')
print(soup)
在这里，我
浏览 0提问于2020-05-29得票数 0
我正在使用 + 来废弃一个站点。问题是在本地，它是工作的，但在heroku服务器上，它不工作。
看起来，当我通过heroku服务器启动脚本时，JS或cookie是不启用的。这就是为什么在当地的云刮板可以绕过云层而不是赫洛库。
我的代码：
import requests
import cloudscraper
from bs4 import BeautifulSoup
session = requests.session()
scraper = cloudscraper.create_scraper(browser='chrome', sess=session)
c
浏览 7提问于2022-02-10得票数 -1
我使用beautifulsoup和requests运行了一个python程序来抓取嵌入的视频URL，但是要下载这些视频，我需要绕过一个广告弹出窗口，javascript重新加载，直到m3u8文件开始出现在网络流量中；
因此，我需要模拟单击以到达javascript重新加载(如果有比selenium更好的方法，尝试减少脚本依赖)，然后当m3u8文件出现时，我需要获得它们的url。
浏览 6提问于2019-12-07得票数 0
5回答
我有一个登录页面，它向Python脚本发送请求以验证用户。如果它没有经过身份验证，它会将您重定向到登录页面。如果是重定向到HTML表单。问题是您可以通过编写URL来访问HTML表单。如何确保用户在不使用模块的情况下使用Python脚本从登录表单中获得信息，因为我无法在服务器上安装任何东西。我希望它严格使用Python，我不能使用PHP。有可能吗？我能用其他方法来完成这个任务吗？
浏览 8提问于2016-01-29得票数 0
回答已采纳
2回答
大家好，我最近一直在玩Python2.7和HTML3.2，我已经让我的代码在BeautifulSoup上工作，它向Facebook发出一个POST请求登录，并将其下载到页面上，然后将其保存到我的计算机上。我试着用Twitter这样做，但似乎不起作用*.下面是我的代码：
import urllib, urllib2
from BeautifulSoup import BeautifulSoup
#I've replaced my actual username and password for obvious reasons
form = urllib.urlencode({'
浏览 1提问于2011-03-12得票数 0
2回答
我尝试从一个网页上刮掉的一些信息，在一个页面上它工作得很好，但是在另一个网页上它不起作用，因为我只得到一个零返回值。
此代码/网页运行良好：
# https://realpython.com/beautiful-soup-web-scraper-python/
import requests
from bs4 import BeautifulSoup
URL = "https://www.monster.at/jobs/suche/?q=Software-Devel&where=Graz"
page = requests.get(URL)
soup = Beautif
浏览 4提问于2020-04-13得票数 1
回答已采纳
我想使用python抓取以下网站，并需要将已抓取的数据导出到CSV文件中：
该网站包括154页的相关搜索。我需要调用每个页面，并希望刮取数据，但我的脚本无法连续调用下一个页面。它只刮一页数据。
在这里，我给值i<153，因此，这个脚本只运行154页，并给了我10个数据。我需要从第一页到第154页的数据
如何在运行脚本后从所有页面抓取全部数据，以及如何将数据导出为CSV文件？？
我的脚本如下
import csv
import requests
from bs4 import BeautifulSoup
i = 0
while i < 153:
url =
浏览 2提问于2016-07-24得票数 0
我正在登录我的www.goodreads.com帐户，以便从我的个人资料中删除图书列表。
然而，当我转到goodreads页面时，即使我登录了，我的scraper也只能获得主页。它无法登录到我的帐户。如何将其重定向到我的帐户？
编辑：
from bs4 import BeautifulSoup
import urllib2
response=urllib2.urlopen('http://www.goodreads.com')
soup = BeautifulSoup(response.read())
[x.extract() for x in soup.find_all(&
浏览 0提问于2014-08-17得票数 0
1回答
我正在尝试通过请求模块登录。我尝试过GET和POST方法，但我总是得到以下响应。
误差您的浏览器没有启用cookie。如果没有cookie支持，此登录页面将无法运行。
这是我正在使用的脚本。任何帮助都将不胜感激。
import requests
from bs4 import BeautifulSoup
S = requests.session()
headers = {
'Content-Type': 'application/xhtml+xml',
'Access-Control-Allow-Origin': '*&
浏览 4提问于2020-01-14得票数 0
回答已采纳
我试着从youtube页面中提取所有的元关键字。但BuatifulSoup只能提取前几个关键字，而不是所有关键字。为此，我编写了以下Python脚本： import requests
from bs4 import BeautifulSoup
url = "https://www.youtube.com/watch?v=2lAe1cqCOXo"
response = requests.get(url)
soup = BeautifulSoup(response.text, 'lxml')
keywords = soup.find("meta
浏览 9提问于2020-01-27得票数 0
回答已采纳
我正在尝试制作一个python脚本，它读取crunchyroll的页面，并给出副标题的ssid。
例如:-
转到源代码并查找ssid，我想在这个元素的ssid之后提取数字
<a href="/i-cant-understand-what-my-husband-is-saying/episode-1-wriggling-memories-678035?ssid=154757" title="English (US)">English (US)</a>
我想提取"154757"，但我的脚本似乎无法工作
这是我现在的剧本：
浏览 0提问于2015-06-28得票数 0
回答已采纳
1回答
我试图自动化社会登录(FB，Gmail，OneDrive，LinkedIn)。我用Python编写了使用Selenium编写的脚本，如下所示
driver = webdriver.Chrome()
driver.get('<social_url_site>')
driver.find_element_by_id('username').send_keys('user_name')
driver.find_element_by_id('password').send_keys('pa
浏览 1提问于2020-09-08得票数 2
回答已采纳
3回答
因此，我使用带有rfid扫描仪的Raspberry Pi 2，并用python编写了一个脚本，用于登录和注销我们的考勤系统，连接到我们的postgresql数据库，并返回一些数据，比如他们有多少加班时间，以及他们的操作是登录还是注销。
该数据意味着显示在仅用作显示所述数据的图形界面的非常基本的网页上(即甚至不在服务器或任何东西上)。
我的问题是，我不知道如何动态地显示我的python脚本在网页上返回的数据，而不必刷新它。我希望它只是淡入信息，在那里保持几秒钟，然后让它再次淡出(在这一点上，系统再次变得可用，让其他人登录或注销)。
目前我使用BeautifulSoup4来编辑Html文件，使用C
浏览 1提问于2016-05-20得票数 0
1回答
我正在使用what.cd的BeautifulSoup和Python开发一个屏幕抓取器。我在工作的时候偶然发现了脚本，并决定看看它，因为它看起来和我正在做的很相似。但是，每次我运行该脚本时，我都会收到一条消息，指出我的凭据是错误的，尽管它们并没有错。
据我所知，我收到这条消息是因为当脚本尝试登录what.cd时，what.cd应该返回一个cookie，其中包含让我稍后在脚本中请求页面的信息。因此，脚本失败的地方是：
cj = cookielib.CookieJar()
opener = urllib2.build_opener(urllib2.HTTPCookieProcessor(cj))
l
浏览 0提问于2011-10-11得票数 1
回答已采纳
1回答
我正在尝试为sbrodds.com编写一个抓取引擎。不幸的是，我需要登录才能获得正确的数据。我研究了机械化和selenium，但遗憾的是，我在python和web抓取方面做得很差，并且不了解如何使用它们。
以下是登录框的Chrome inspect elements页面的屏幕截图：
有人可以提供建议，我应该使用什么技术来执行登录到这个网站内部的Python代码？最终的目标是将登录页面的数据加载到BeautifulSoup中。
浏览 3提问于2015-12-10得票数 1
我想扫描一些网站，并想得到所有的java脚本文件的名称和内容。我尝试了用BeautifulSoup的python请求，但无法获得脚本的细节和contents.am i遗漏了什么？
我已经尝试了很多方法来寻找，但我觉得自己在黑暗中绊倒了。这是我正在尝试的代码
import requests
from bs4 import BeautifulSoup
r = requests.get("http://www.marunadanmalayali.com/")
soup = BeautifulSoup(r.content)
浏览 2提问于2016-02-29得票数 4
回答已采纳
我正在用Python编写一个脚本，使用模块'requests‘和'BeautifulSoup’来抓取以下页面链接中的足球比赛结果：
这项任务包括两个步骤(以阿森纳对布莱顿的第一场比赛为例)：
提取并导航到元素中的href "“：
div数据.模板.呈现数据.href.
导航或到"Stats"-tab并提取元素中的信息：
tbody class = "matchCentreStatsContainer".
我已经试过了
page = requests.get("https://www.premierleague.com/match
浏览 6提问于2021-10-04得票数 0
我有一个路由器，我想登录到它并使用Python脚本检索信息。我是Python的新手，但我想用它来学习和探索更多。以下是我到目前为止所写的：
from requests.auth import HTTPBasicAuth
import requests
from bs4 import BeautifulSoup
response = requests.get('http://192.168.1.1/Settings.html/', auth=HTTPBasicAuth('Username', 'Password'))
html = respons
浏览 2提问于2016-05-12得票数 1
回答已采纳
11回答
我有一个脚本，获取几个网页，并分析信息。
(在上可以看到一个例子)
我在上面运行了cProfile，正如我所设想的，urlopen占用了很多时间。有什么方法可以更快地抓取页面吗？还是一种一次取几页的方法？我将做任何最简单的事情，因为我对python和web开发很陌生。
谢谢！)
更新:我有一个名为fetchURLs()的函数，我用它来制作我需要的URLs数组，所以像urls = fetchURLS().The URLS这样的东西都是来自亚马逊和eBay API的XML文件(这让我弄不明白为什么加载这么长时间，也许我的why主机很慢？)
我需要做的是加载每个URL，读取每个页面，并将数据发送到脚
浏览 8提问于2010-08-16得票数 29
回答已采纳
我使用python3.4.3，并试图使用请求登录到OKCupid。
我的代码返回的页面是初始登录页，而不是用户成功登录后会看到的页面。我尝试过查看这里和其他教程上的几个答案，其中大多数提示我检查developer选项卡并使用方法"POST“查看请求，但我没有看到任何这样的请求。
相反，我看到了"GET“请求，我不确定请求是如何处理这些请求的。我尝试过许多不同的方法，但都没有奏效。下面是我有的更简单的代码：
import requests
from bs4 import BeautifulSoup
user='USERNAME'
pw='PASSWORD
浏览 1提问于2015-04-27得票数 1
回答已采纳
如果我想刮一个需要首先使用密码登录的网站，我如何开始使用beautifulsoup4库使用python来抓取它呢？以下是我所做的网站，不需要登录。
from bs4 import BeautifulSoup
import urllib2
url = urllib2.urlopen("http://www.python.org")
content = url.read()
soup = BeautifulSoup(content)
如何更改代码以适应登录？假设我想刮的网站是一个论坛，需要登录。一个例子是
浏览 12提问于2014-04-16得票数 93
回答已采纳
1回答
我已经创建了一个python脚本使用机械和BeautifulSoup，以登录到网站和硬编码的凭证和网址在脚本中。它工作得很好。
我现在的需求是使用wxpython或任何其他工具构建一个独立的桌面GUI应用程序，用户可以在这些应用程序上输入URL和凭据，然后调用python脚本。
我开始学习wxpython，但不太确定如何继续。
谁能向我简要介绍这一要求的原型，并指导我在构建图形用户界面。
GUI需要。3个输入文本框1个调用python脚本的提交按钮
谢谢
浏览 3提问于2017-07-26得票数 0
嗨，我希望有人能帮助我，
我正在尝试创建一个脚本，用于登录网站并从HTML中提取一个值。我已经安装了BeautifulSoup，并尝试使用curl，但我似乎无法登录该网站。网站上的超文本标记语言使用j_username“和j_password
谢谢
浏览 0提问于2013-04-30得票数 1
如何抓取一个使用Python (BeautifulSoap，Requests)登录的BankID网站？ 我想用BankID登录，然后用python创建一个网站。如何登录到使用BankID登录的网站？ 常规方法不起作用： from bs4 import BeautifulSoup
import requests
source = requests.get('https://example.com').text
soup = BeautifulSoup(source, 'lxml')
print(soup)
浏览 20提问于2020-10-04得票数 0
回答已采纳
2回答
我是用python进行web抓取的新手，所以我不知道我这样做是否正确。
我正在使用一个调用BeautifulSoup的脚本来解析谷歌搜索的前10个页面中的URL。使用stackoverflow.com进行测试，开箱即用即可正常工作。我在另一个网站上测试了几次，试图看看这个脚本是否真的能处理更高的google页面请求，然后它就在我身上运行了503'd。我切换到另一个URL来测试，并为一些低页面的请求工作，然后也是503'd。现在我传递给它的每个URL都是503'ing。有什么建议吗？
import sys # Used to add the BeautifulSoup f
浏览 1提问于2011-07-09得票数 0
1回答
使用python登录网站
、、、
我正在尝试使用登录这个Python.Here是我的代码。
from urllib2 import urlopen
from bs4 import BeautifulSoup
import requests
import sys
URL= 'http://coe2.annauniv.edu/result/index.php'
soup = BeautifulSoup(urlopen(URL))
for hit in soup.findAll(attrs={'class' : '
浏览 5提问于2015-07-05得票数 2
回答已采纳
1回答
意外重命名文件中的字段
、、、、
我使用Python 4/lxml解析xml格式的RSS提要(特别是)。我发现，在从接收页面数据的请求到从文本读取页面数据的BS4转换过程中，链接字段的名称正在被更改。具体来说，res.text包含...</saleends><link>https://foo.itch.io/bar</link><description>...，但将其读入is 4/lxml并打印结果为...</saleends><link/>https://foo.itch.io/bar<description>...，BS4无法正确解析该..
浏览 2提问于2020-11-03得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
