根据我对wget手册的了解，下面的方法应该是可行的： wget -r -l1 -np -nd -A.* -R "index.html*" http://s3.amazonaws.com/gp.gms/blat/ 但是，我没有在没有明显自动生成的index.html文件的情况下获得blat文件夹中的所有文件，而是在这个文件和我尝试过的几十个变体中得到了404not found错误。我可以很容易地下载这4
浏览 30提问于2019-03-31得票数 0
1回答
我正在尝试使用wget下载许多文件(约30,000)，所有文件都在以下网页中：然而，在我点击Fits之后，实际的数据在一个子链接下，然后在这个子链接下显示一些文件。例如，第一个文件的sublink如下所示：
http://galex.stsci.edu/gr6
浏览 0提问于2018-02-19得票数 0
我想下载的所有段落。它有很多页。例如，那么如何使用wget或linux中的其他工具来下载它们呢？目前，我使用以下参数，但它不起作用。wget --递归--无source.yeeyan.org --页面必需--html-扩展--转换链接--限制文件名=窗口--域yeeyan.org --无父wget
浏览 3提问于2012-05-25得票数 5
1回答
下面是我使用wget的方法：此重定向到。当我像上面那样运行wget时，它遵循重定向，但随后只下载该页面-而不是递归地下载所有页面。我已经尝试过--max-redirects=1和--domains=www.btlregion.ru，但它不起作用。
如果我直接在上调用wget，递归下载就
浏览 0提问于2013-11-17得票数 9
回答已采纳
1回答
我正在尝试从Apache服务器下载一个数据集。我使用以下命令递归地使用wget下载文件，只下载扩展名为.vts的文件：但是，wget似乎在下载的文件开始时添加了行：
ETag: 514256db-7df6c3567d200“接受-范围:字节内容-长度: 1098002907变:接受-编码连接:关闭<V
浏览 7提问于2021-12-06得票数 0
我试图使用wget从一个网站从数据库下载文件。提供者现在只提供对以前的ftp服务器的web访问，我可以很容易地使用wget下载任何我想要的文件。我很难理解如何使用wget进行此操作；我试图使用命令从级别3的各个目录中递归下载这些文件。wget -nd -nc -nH -r -np -A .tar.gz &quo
浏览 0提问于2023-01-16得票数 0
1回答
问题背景
我试图备份/镜像所有的，并且有数以千计的符号/硬链接到其他文件夹和服务器。我试过使用wget
浏览 2提问于2017-03-04得票数 0
回答已采纳
我想做的是在站点(主机)上递归到5的深度，然后当我跳转到另一个主机时，递归限制为2页。我似乎在手册中找不到任何这样的选择，我只是运气不好吗？
浏览 7提问于2014-05-06得票数 2
回答已采纳
我正在尝试递归下载http://ccachicago.org，并得到一个文件，即根index.html。我已经看过用wget递归下载，并开始使用推荐的-e robots=off，但它的行为仍然相同。
如何使用wget或其他工具下载站点的副本？
浏览 0提问于2014-01-27得票数 5
回答已采纳
2回答
下面的wget命令有问题：
wget -nd -r -l 10 http://web.archive.org/web/20110726051510/http://feedparser.org/docs/它应该递归地下载原始web上的所有链接文档，但是它只下载两个文件(index.html和robots.txt)。如何实现这网页的递归下载？
浏览 0提问于2011-11-25得票数 35
回答已采纳
2回答
我正试着用wget建立一个网站。我希望进行递归下载，并将其存储在一个文件夹中，但避免使用查询文件；Home?query --在本例中是Home。为此，我尝试了一种模式的--reject，但我无法使它工作。这是wget：--page-requisites \--no-host-directories \--convert-links注意:为了避免<em
浏览 0提问于2013-05-21得票数 2
回答已采纳
我正在尝试使用wget递归下载一个网站：它只下载某些文件，而保留其他文件。经过仔细检查，我发现它不会下载返回304 Not Modified的
浏览 0提问于2020-09-19得票数 2
回答已采纳
1回答
我想使用wget递归下载一个网页。递归地说，我指的是它可能指向的所有其他文件也应该下载。原因是我希望能够在离线的情况下合理地看到它的内容。我需要下载的网页也链接到同一网站上的其他网页，我希望我也可以下载它们。
用wget可以做到这一点吗？有什么旗子吗？
浏览 0提问于2013-07-22得票数 5
回答已采纳
1回答
可以使用wget从特定的TLD递归下载文件吗？
具体来说，我正在尝试下载的全文。法规的实际文本存储在多个域的多个文件中-所以我想从开始递归下载，但只跟踪.gov和.us域的链接。
浏览 2提问于2012-05-09得票数 3
回答已采纳
2回答
我有一个脚本，它使用python和wget下载一个网站，然后对文件执行一些任务。我使用os.system("wget -m -w 2 -P " directory)行调用wget，递归下载域中的每个页面。这可以很好地工作，但现在有必要监控wget在下载文件时出现的错误(想象一下试图访问页面时出现的404错误)。
这不是获得退出代码的问题，而是查看wget
浏览 0提问于2014-12-05得票数 0
1回答
我想下载一个谷歌网站的所有网页的HTML，只能通过登录到谷歌访问。谷歌没有为新的谷歌网站()提供API。让事情变得更复杂的是，我的谷歌登录要求使用。我尝试在火狐中进行身份验证，通过火狐扩展保存我的cookie，然后使用wget： --load-cookies=cookies.txt \
--no-host-directories我还尝试了在火狐内部通过，它可以生成一个wget命令，等同于火狐对下载所做的事情。我的想法是将<
浏览 5提问于2020-05-29得票数 0
2回答
我的意思是，当浏览器加载一个页面时，它也会下载所有相关的内容...有人能告诉我如何使用curl来做这件事吗？我不介意它甚至将二进制数据转储到终端上...我正在尝试对我的服务器进行基准测试(保持它最初的简单性，以测试bug……可能在这之后，我会使用像ab)这样的专用工具。
浏览 0提问于2010-02-04得票数 1
回答已采纳
云服务器
ICP备案
云直播
实时音视频
即时通信 IM
腾讯云开发者
