我需要唯一地标识和存储一些URL。问题是有时它们包含"..“比如http://somedomain.com/foo/bar/../../some/url，如果我没记错的话，它基本上就是http://somedomain.com/some/url。
有没有一个Python函数或者一种巧妙的方法来解析这个URL？
浏览 4提问于2010-12-01得票数 10
回答已采纳
def parseList(self, response): dr.get(response.url) print dr.page_source
该网页已经由scrapy下载(包括在response.body中)，dr.get(response.url)将再次下载
浏览 5提问于2014-07-29得票数 2
回答已采纳
2回答
我正在使用Python的单元测试、Selenium和PhantomJS创建自动化测试。我会让他们和Jenkins一起运行。因此，可以将urls列表添加到Jenkins。我发现pytest可以进行从命令行获取urls的测试，如所示。
但是，我使用的是unittest框架。这样做的主要原因是，我将测试500个网页上的菜单、页眉和页脚。那么，如何从命令行获取urls并将其放入self.driver.get('urls_from_command_line')
浏览 0提问于2017-06-23得票数 0
我正在使用python包请求向服务器发出get请求。我的目标是复制某些已知的http请求，并将它们合并到我的python脚本中。原始查询字符串包含一个键值对'version=0%2E12‘，我知道它是url编码的等价物'version=0.12’。下面是我复制http请求的一个例子。, params)
浏览 1提问于2012-12-01得票数 0
回答已采纳
我正在使用SeleniumWebDriver进行网络抓取航班价格的工作。我希望我的代码能够搜索多次旅行的机票价格。到目前为止，我的代码只适用于1个目的地。我在网上找到的大多数答案都涉及对多个目的地的特定URL使用for循环，这不适用于我的情况，因为URL取决于我选择的不同目的地。
浏览 2提问于2020-03-24得票数 0
我试着用PLY解析python语言的函数定义。我遇到了与缩进相关的问题。例如，对于For语句，我希望能够知道块何时结束。我在这里读到了python语法：，这部分的语法是：suite:simple_stmt | NEWLINE INDENT stmt+ D
浏览 3提问于2013-11-05得票数 6
2回答
使用‘瓶’库，我必须创建我自己的API基于这个网站的，所以我必须为每个作者获得数据。由于这个原因，我使用以下链接格式：‘姓氏的第一个字母’/‘lastnamefirstname’.你能帮我得到XML格式来解析它并得到我需要的信息吗？
浏览 0提问于2019-04-25得票数 1
回答已采纳
我有一个python脚本，它最初接受单个URL作为脚本的参数，但现在我希望更新代码以接受CSV文件作为参数python3 script.py -x -y www.example.com问题是，现在我不再只有一个URL，而是一个包含10,000个URL的CSV文件。如何在终端中使用命令解析CSV文件中的URL？
浏览 1提问于2017-09-20得票数 1
1回答
我正在使用Python3 3的html.parser解析HTML网站，以搜索所有包含的JavaScript文件。为此，我循环遍历所有脚本标记并检索src属性的内容。
挑战是如何构建正确的URL。src属性可能包含像这样的完全限定的URL，但也可能包含一个相对路径。在这些情况下，我必须手动设置方案(http或https)和域/网络位置。因
浏览 6提问于2016-12-08得票数 1
回答已采纳
1回答
我正在django中开发一个带有许多子域的应用程序。例如，www.mysite.com、mx.mysite.com、es.mysite.com、nz.mysite.com所有这些模式都必须重定向到相同的django折叠，并使用国家语言呈现html页面。有任何方法来捕获views.py中的子域吗？我想在views.py里看到这样的东西：def hompage(request):
subdomain = #HERE IS WHERE
浏览 1提问于2017-10-11得票数 0
回答已采纳
现在我有一行python代码：这个搜索关键字是否在url中，但是它不能正确解析包含#的url。我尝试解析的一个示例链接是
但是，解析会排除hashtag及其后面的所有内容：
浏览 15提问于2021-03-01得票数 0
我想在Python3中使用xml.etree.ElementTree来解析一个XHTML文档，该文档包含 实体，所以我不能使用默认的解析器设置。我想做一些类似的事情： body = url.read() root = etree.f
浏览 1提问于2013-03-03得票数 1
回答已采纳
1回答
您能在AWS Glue中使用Python的请求库吗？由于Glue只支持纯python模块，所以可以与Glue一起使用请求库吗？
浏览 2提问于2019-02-26得票数 3
回答已采纳
1回答
因此，我设法将页面源代码作为字符串获得，但我的问题是，现在我需要解析它，例如。查找一个单词的每个实例，并将接下来的几行保存在数组中。我的课文看上去像这样 <table id="ctl00_lp_ctl01_lst" class="searchResultList"我不知道为什么这对我来说如此琐碎，因为我用其他语言做了几个解析项目。我已经在网上
浏览 4提问于2014-07-20得票数 1
回答已采纳
2回答
我的web应用程序使用PDF.js在浏览器中加载PDF。它从REST中获取PDF。每个OutlineItem都有一个包含我相关链接的动作字典。这是通过创建如下所示的iframe实现的：
<iframe src="/path/t
浏览 0提问于2019-07-02得票数 0
回答已采纳
2回答
我是Python的新手，所以很抱歉这是一个新手问题。我想知道这个论坛上有没有人有使用python3进行网络抓取的好选择。谢谢，威尔
浏览 1提问于2011-08-11得票数 5
1回答
我正在使用suds库连接到wsdlurl = 'http://localhost:0000/webservices/WebService?wsdl'WSDL包含来xml代码： <wsdl:part element="typeswsdl:part>
浏览 2提问于2016-03-23得票数 1
回答已采纳
我目前正在尝试使用Urllib3，以创建一个请求，以便从位于以下位置的BBC网站获取RSS/XML热门新闻数据：我已经创建了我相信的请求，但是当返回的对象将它传递回我的HTML/Javascript我通过window.onload方法传递的对象是: upon_success({{ AllNews }})
并给出错误'Uncaught : Unexpected &‘ &
浏览 11提问于2017-02-20得票数 1
我开始用Python编程，并且已经读了几篇文章，他们说我应该使用HTML解析器从文本中获取URL，而不是re。另外，如果我没有读错，var = page.read()，var是以字符串的形式存储的吗？
我如何告诉它给我两个“标签”之间的文本？URL
浏览 0提问于2013-03-25得票数 2
我认为我的代码是干净和简单的，但我得到了这个错误：.google.com我不知道为什么实际上我尝试了太多的事情fuzing_website_response = requests.get(f'http://{i}.{take_input}/')fuzing_website_response = requ
浏览 0提问于2019-10-18得票数 2
云服务器
ICP备案
对象存储
云点播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号