1回答
我有一个Linux程序，它将相当大的文件(400MB到10 to )复制到远程NFS服务器。我目前正在使用同步I/O调用将数据复制到NFS挂载。所有这些调用都发生在线程池中的单独线程中。所以我并没有真正阻塞主线程的操作。
我听说过很多关于使用Linux AIO来完成这些任务的事情。但我真的看不出它对大文件有什么好处。
与在线程中运行同步IO相比，使用AIO有哪些优点/缺点？在网络上有没有这类场景的统计比较？
浏览 0提问于2014-02-02得票数 2
我试图使用putty.During将一个大文件传输到远程服务器，传输该文件(因为该文件很大，需要一些时间来传输)，权限设置为某些默认只读(rw-r-)。
我需要在文件传输过程中设置文件的权限(即文件正在传输时)。我怎么能在油灰里做这件事？请大家提点建议。
我刚开始使用linux命令，请您提供一些我可以遵循的语法。
浏览 0提问于2021-09-24得票数 0
我需要在跨越大地域的不可靠的网络连接之间传输大文件(在10+千兆字节范围内)。远程用户需要将这些文件下载到本地计算机。保存文件的服务器正在运行Linux，客户端是Windows和Linux。我想为文件传输提供某种形式的简历支持。
因为用户在Linux服务器上有一个SSH帐户，所以他们也有SFTP访问权。是否有可能从SFTP传输中获得可靠的简历支持，以便我的远程用户能够在连接断开时找到他们停止的位置？我听说客户端和服务器都需要支持简历功能，但还没有找到关于该主题的可靠信息。
浏览 0提问于2012-12-14得票数 1
所以我在我的远程文件服务器(处于另一种状态)上做了一个递归scp，它在我的远程web目录上创建了一个无限的链接循环。
http://www.linuxquestions.org/questions/linux-general-1/recursive-scp-w-o-following-links-658857/说我可以尝试创建一个巨大的tar文件。但是，这有一个问题--我在办公室的Linux机器上运行递归scp，并将所有文件复制到我的外部硬盘驱动器中，这是FAT32格式的(因为我需要一些同时为UNIX和Windows所读的文件)。FAT32不支持大文件大小。所以我得尝试一些不同的东西。
还有一
浏览 0提问于2012-12-09得票数 6
客户端具有读取多个视频图像的大文件(高达1 GB)的系统。访问是通过“指向”较大文件的索引文件进行的。这在LAN上工作得很好。如果这些文件保存在远程服务器上，是否有人对如何通过internet访问这些文件有任何建议？关键的限制是，在访问文件中的单个图像之前，我们无法提供下载整个文件所需的时间。
浏览 1提问于2009-07-06得票数 2
1回答
我想要scp从远程服务器到我的本地计算机，一个包含大约115 k json文件的大文件夹。
假设我用的是这样的东西：
scp username@remote:/remote_path/*.json /local_path/
然而，当我尝试这样做的时候，我得到了这样的回应：
argument list too long
那我怎么才能传送文件呢？
浏览 0提问于2019-10-25得票数 10
回答已采纳
我必须在PHP中实现一个简单的文件下载客户端，能够下载大文件以及恢复它们。
有没有办法可以用PHP下载大文件(>700MB)，而我的PHP内存限制仍然是128M？我猜这和写文件指针有关。有关于使用哪个文件处理函数的线索吗？有太多了。我猜是fopen，flock，(fwrite，fgets，fread)，fclose。或者我应该使用cURL？
如何恢复已损坏的下载？脚本执行超时、用户停止脚本、远程服务器超时等？
浏览 0提问于2010-12-13得票数 0
回答已采纳
我的linux上有一个文件。我想通过"Windows共享“来共享它(IPMI只能理解一种远程大文件挂载的方式)。如何在科学linux的"Windows共享“上共享我的文件？
浏览 0提问于2015-08-07得票数 1
我试图将大约50 Gb的文件从Redhat Linux变体传输到我的Debian 8.1，但没有成功。
我想找到其他方式，而不是外部HDD移动数据。这两台机器都有USB3连接和HDMI，但没有其他任何连接。我不允许安装BTsync来快速传输彼此之间的文件。
如何在两个不同变体的Linux盒之间轻松地大量传输大文件？
浏览 0提问于2015-07-12得票数 1
回答已采纳
如何更改允许列出/传输的最大文件数...在suse linux上？客户端和服务器都是suse linux机器。
浏览 5提问于2011-04-20得票数 0
回答已采纳
我想通过bash脚本(而不是分开的命令)通过sftp/ftp将一个大文件(1.3G)从远程服务器传输到我的服务器。
例如:我的服务器IP为10.10.10.1，远程服务器为10.10.10.2，我使用sftp /123456(用户+ pass)连接到远程服务器。
想了解更多信息，请告诉我。
浏览 0提问于2019-04-11得票数 0
1回答
我试图在SSH从本地Windows机器访问的远程linux机器上运行python脚本。该脚本包含一个循环，对于目录中的所有文件，它将转到本地窗口上的某个目录，并运行基于命令行的程序。我不是根用户，在linux机器上安装任何东西都会相当困难。
我得到的基本错误是远程linux机器无法在我的窗口中找到C:目录。我计划对某个目录中的所有文件运行一个循环。
我的Windows是64位，linux机器是64位Ubuntu。有什么建议吗？
浏览 0提问于2015-02-26得票数 0
我正在尝试使用FTP将文件从远程服务器传输到本地计算机。我是ssh的远程服务器，并希望连接到我的本地机器。远程服务器运行在Linux操作系统上，而我的本地机器运行在Windows操作系统上。我知道如何将文件从本地计算机传输到远程服务器，但对于如何从远程服务器向本地计算机传输文件感到困惑。我该怎么做？
浏览 0提问于2018-09-25得票数 -1
回答已采纳
从两天以来，我一直在努力做以下工作：
我有一台windows机器，我们叫它A，还有一台叫做B的Linux机器。
在A和B之间有一个防火墙，我想从windows机器A远程连接到我的Linux机器(远程端口转发到B)，一旦完成，我想动态地将从Linux机器B到Windows机器A的连接转发。
我一直在Windows机器A上做以下操作：
plink.exe -v -ssh -C -T -N -R 3310:127.0.0.1:22 root@LinuxMachine -pw MyPassword
在Linux机器B上：
ssh -v -N -D 127.0.0.1:8080 -p 3310 root
浏览 0提问于2018-06-13得票数 0
我正在寻找一个linux命令，以便远程将文件集从一个文件夹移动到另一个文件夹。
我尝试了smbclient，但是当我使用它来移动文件时，我必须执行两个步骤：
首先将远程CIFS文件从folder1复制到linux框。-使用mget
然后使用mput将这些文件复制到远程CIFS上的folder2中。
由于上面的过程，当我有大文件时，它变得太费时了。如何在不通过本地机器移动文件的情况下正确地完成此操作？
浏览 0提问于2016-07-06得票数 3
2回答
我有一个目录，其中包含我的代码和非常大的文件(例如，数据文件和大型深度学习模型)。忽略这些大文件，我已经将代码上传到GitHub存储库。 现在，我还设置了一个远程服务器(AWS EC2)，我已经在其中克隆了该存储库。但是，因为我想要处理数据和这些大文件，所以设置一个好的工作流的最佳方法是什么？我是否应该将这些文件上传到我的服务器上，然后设置一个.gitignore --有没有更聪明的方法呢？ 对于这个菜鸟问题，很抱歉，谢谢！
浏览 20提问于2020-10-09得票数 2
我想将文件从远程linux (centos)服务器上的一个目录移动到同一服务器上的另一个目录。我正在使用python27。有人告诉我，“移动”实际上是远程文件系统上的复制/删除过程，似乎是这样的，因为(大)文件需要很长时间才能移动。有没有快速移动这些大文件的方法？
浏览 1提问于2015-04-15得票数 0
1回答
我只是在学习，我有这些想法，但我对它们不太确定。对我的发现有什么错误的想法吗？请简单地说明一下。
HTTP：
用于查看web服务器之间的网站。
到另一个web服务器的web服务器文件
用于传输小文件(以文本形式)
以前在WWW上有访问权限
FTP
用于在本地机器和web服务器之间访问和传输文件。
到web服务器的本地文件
用于传输大文件(以任何形式)
用于远程服务器中的访问
浏览 0提问于2018-04-05得票数 1
4回答
我在与生产数据库不同的远程服务器上有一个测试数据库。每隔一段时间，我就会尝试通过将我的生产数据库的副本上传到我的测试数据库来进行测试。不幸的是，备份文件现在只有一半大小，我在通过FTP或SSH传输它时遇到了问题。有没有一种简单的方法可以在服务器之间使用mysql恢复命令？另外，有没有其他方法可以移动我没有考虑过的大文件？半场演唱会看起来并不是那么大，我想人们经常遇到这个问题。
谢谢!
浏览 1提问于2009-08-24得票数 0
是否可以这样做：
我在Windows系统上，远程登录Unix/Linux。然后我想从telnet模式下载文件并下载到Windows系统。任何Unix/Linux命令都可以这样做吗？如rcp或ftp。该怎么做呢？是否需要在两个系统上都进行任何配置？
我尝试在Unix/Linux端编写shell脚本。从本地Windows远程登录Unix/linux系统，登录Unix/linux系统，在Unix/linux端运行脚本。一些文件将被自动传输或下载到我的windows系统。
假设权限不是问题
浏览 33提问于2011-02-20得票数 1
回答已采纳
我想创建一个JSP网页，其中包含一个按钮上的点击，我想复制一个文件从远程linux机器到我的本地目录(在windows中)的JSP页面托管。我有那台机器的UserID和密码，我可以在putty中使用SSH命令连接到远程服务器。
我使用的是Eclipse Indigo和Tomcat Server。
浏览 5提问于2013-02-15得票数 0
回答已采纳
如何使用jsch sftp将文件夹从Windows递归复制到远程linux服务器？
我已经尝试过使用sftpchannel.put(src，dest)，但它只传输文件。我还尝试迭代文件列表以查找目录，并运行递归循环，但由于需要额外的异常处理，这使得代码变得更加复杂。他们有没有其他方法来做这件事？
他们有没有办法使用Java代码在windows和linux机器之间使用rsync之类的东西？
浏览 1提问于2016-09-22得票数 1
1回答
Linux Kernel版本3.2及更进一步具有称为交叉内存连接的功能。
这是它的链接。在这方面我得不到太多的帮助。
在语法中，我们需要要写入或读取的远程内存的地址。我的问题是，如果我使用fork()，我如何获得这个远程内存的地址。
假设我使用交叉内存连接将一些东西从父进程发送到子进程。如何从子进程向父进程发送远程内存地址？
浏览 2提问于2013-06-26得票数 2
回答已采纳
我编写了一个PowerShell脚本，它使用位传输协议将大文件从源计算机传输到目标机器。当我手动运行PowerShell脚本登录到目标远程计算机(需要复制文件的地方)时，这些文件将被复制，而不会出现任何问题。
但是，当我创建了一个计划好的任务，它每天在特定的时间运行PowerShell脚本。它正在抛出以下错误
由于用户尚未登录到网络，因此未执行请求的操作。指定的服务不存在。(HRESULT例外: 0x800704DD)
只有当我登录到正在复制文件的目标机器时，脚本才能工作。如果我在计划的任务时间从机器上注销，那么我就得到了错误。即使我从机器上注销，也请建议需要做些什么才能使计划的任务运
浏览 0提问于2018-01-12得票数 2
我是否可以使用FortiClient VPN访问来保护我的FTP客户端传输？是否可以将FTP路由到使用VPN？这样做有意义吗?如果可能的话，安全吗？我之所以问这个问题，是因为我想使用Windows远程连接(视频远程连接，它太不方便了)来保护我对远程Linux服务器w/o的访问。
链接到软件- https://forticlient.com/，https://winscp.net/eng/download.php。
谢谢大家！
浏览 0提问于2018-06-26得票数 1
回答已采纳
1回答
出于速度方面的原因，我让netcat从一台计算机向一台远程计算机发送一个大的、单一的.tgz归档文件。在我的观察中，对于这种传输，netcat比rsync更快。传输是以如下方式设置的。
在接收机器上，首先运行以下命令：
time nc -vl 33333 > archive.tgz
在发送方机器上，第二次运行以下命令：
time nc -N $SERVERIP 33333 < archive.tgz
在接收机器上，可以通过测量正在接收的文件的(已知)大小来解释进度：
ls -al --block-size=M
现在假设传输以某种方式中断了。假设发送方计算机断电或互联网连接中断。假设
浏览 12提问于2020-05-26得票数 0
2回答
我正在写大文件，大小在70 -700 70之间。有没有人有经验，如果内存映射文件将比常规的块编写更有效？代码将在c++中运行，并在Linux2.6上运行
浏览 2提问于2012-05-08得票数 1
1回答
我需要下载一个大文件(1GB)。我还可以访问多台运行Linux的计算机，但每台计算机都被管理策略限制为50 is /S的下载速度。
如何在多台计算机上分发下载此文件，并在下载完所有段后将它们合并，以便更快地接收该文件？
浏览 0提问于2014-08-31得票数 39
回答已采纳
2回答
我有这样的架构：
WebSite ASP.NET <-> DataBase服务<->
DAtabase正在收集非常大的文件。
用户通过WCF服务在aspx页面中请求一个大文件。服务调用数据库，并获取大文件。
现在，我的实体(datacontract)具有以下字段：
string Data1
string Data2
string Data3
byte[] FileBigger
如何通过WCF服务将大文件发送到网站？做这件事的最佳实践是什么？
浏览 1提问于2010-08-21得票数 2
4回答
文件之间的比较
、、
我已经编写了一些代码，可以将大文件块复制到远程机器。现在，我想通过逐字节比较这两个文件来确定我是否真的将所有位复制到了正确的位置。有没有windows版的工具可以让我这么做？我猜Linux已经内置了这样一个工具，不是吗？
非常感谢，保罗
浏览 0提问于2009-08-24得票数 0
我正在寻找一种方法将本地xampp中的某些数据库移动到远程MySql服务器，运行在Linux (Centos 7)中。
有什么想法或建议来做这个迁移吗？
浏览 0提问于2019-05-29得票数 0
我需要在C#中从一台远程服务器下载大文件(20GB+)到另一台远程服务器。我们已经为其他文件操作建立了ssh连接。我们需要以二进制模式从ssh会话启动ftp下载(这是以特定格式传递文件的远程服务器要求)。问题-如何在ssh会话中发送ftp命令以建立与凭证的连接，并将模式设置为'bin'？基本上等同于使用ssh：
FtpWebRequest request =(FtpWebRequest)WebRequest.Create(
@"ftp://xxx.xxx.xxx.xxx/someDirectory/someFile");
request.Cre
浏览 3提问于2012-08-01得票数 0
2回答
我有一个非常大的文件，我正在使用linux "split“命令将其拆分成较小的部分。稍后，我使用linux "cat“命令将所有部分重新组合在一起。
不过，在此期间，我很好奇...
如果我在拆分之前在大文件上获得了MD5指纹，然后在拆分命令产生的所有独立文件部分上获得MD5指纹，是否有办法获取独立指纹并以某种方式推断出它们各部分的总和或平均值(或您喜欢的所有部分)等于单个大文件的指纹？
通过(非常)松散的例子...
bigoldfile.txt MD5 = 737da789
smallfile1.txt MD5 = 23489a89
smallfile2.txt MD5 = 1
浏览 4提问于2011-04-06得票数 1
回答已采纳
2回答
我正在为一个学校项目写一个简单的FTP服务器。项目差不多完成了，我唯一的问题就是通过套接字将文件发送到客户端。我不能向套接字写入超过200kb的数据，小文件下载成功。谁能告诉我通过Linux套接字发送大文件的正确方式是什么？
提前谢谢。
PS我使用C和32位linux，服务器工作在端口模式，一直使用低级打开，写入，读取和其他功能，如sendfile，send，sendto。
浏览 1提问于2011-12-30得票数 5
2回答
linux中远程桌面的(最好的)解决方案是什么？理想情况下，我希望能够登录到远程X (KDE)会话，而无需登录到本地机器。也许我可以将一个远程X会话转发到另一个虚拟终端会话，这样我就可以用Ctrl + alt + n在本地和远程之间来回切换。
这将通过VPN在互联网上进行，所以数据光解决方案最好=]。
浏览 0提问于2010-12-14得票数 6
1回答
我有一个将最新生成的HDFS文件复制到linux远程服务器的用例。我不想将中间件存储在本地文件系统中，然后对远程服务器执行scp。 我知道这一点，但我想避免这种情况(原因很明显--在本地文件系统中存储大量文件的开销) hadoop fs -copyToLocal <src> <dest>
and then scp toMyLinuxFileSystem 是否有直接将hdfs文件复制到远程linux服务器的命令？
浏览 56提问于2019-06-25得票数 1
我一直在看讨论SSH隧道的帖子，这听起来类似于我想要完成的事情。但是，我们使用Java编程，并且在防火墙后面有一个远程SOAP服务器。服务器在Linux下运行，但网络的其余部分可能是Linux或Windows，或者其他任何东西。
浏览 0提问于2010-09-06得票数 0
回答已采纳
5回答
我使用smbclient每晚将一组大文件(80 GB)从Linux系统传输到Windows共享。最近，不管出于什么原因，我一直处于I/O超时状态：
cli_push returned NT_STATUS_IO_TIMEOUT
这将导致活动文件传输中止并从Windows共享中删除。
这可能是由于未解决的Samba bug 8498 (或者可能不是)。Windows系统不在我的控制之下，所以我无法安装SSH服务器(使用SCP或SFTP)，我不想依赖Microsoft的NFS实现。
还有另一种简单的标准选择可以让我定期地通过网络将80 GB的数据从Linux传输到Windows (网络是GB以太网，
浏览 0提问于2012-02-17得票数 12
回答已采纳
2回答
我想使用系统访问从远程访问中提取我的linux生产服务器的详细信息。我对此有一些疑问：
是否有必要在linux生产服务器和linux开发server.If中同时拥有相同的内核，那么如何添加对它的支持呢？，生产服务器中的最低要求是什么？是否需要使用调试器编译生产服务器的内核?如何使特定组中的用户能够运行stap脚本？
浏览 2提问于2011-06-06得票数 2
2回答
我需要编辑远程文件。现在，我正在通过SSH登录机器。我可以执行命令并得到响应等。
我在修改远程文件时遇到困难。
Source Machine : Windows
Destination : Linux
是不是像这样，将文件放到Windows机器上并进行编辑，然后再将文件传输到Linux？或者其他更好的方式？
import SSHLibrary
s = SSHLibrary.SSHLibrary()
s.open_connection("10.10.10.10",username, password)
#s.write("sudo vi file_name_along_w
浏览 1提问于2017-11-13得票数 0
3回答
我正在开发一个程序来访问远程主机上的文件。基本上，我要做的是使用有效的凭据登录远程Windows/Linux主机，检查特定文件夹中存在哪些文件，读取这些文件。在Linux中有没有可以用来实现上述目的的库？
谢谢。
附加信息:我使用的是C。远程主机不需要运行任何非默认服务(比如ftp)。因此，只要协议能够支持大多数default-config-hosts，就应该没问题。
再次感谢。
浏览 0提问于2010-02-25得票数 1
请帮助我如何将JProfiler从windows机器连接到运行在linux服务器上的远程Virgo Jetty Server。
下面是我要遵循的步骤
从“选择集成向导”中选择Eclipse处女座(下一个)
然后在Linux平台上选择远程计算机的选项(下一个)。
然后我选择JVM供应商版本等(下一个)
从JProfiler GUI(下一步)选择选项等待或连接
提供远程主机名:端口(下一个)
我被困在指定远程安装目录。
这里我们没有在linux环境中安装JProfiler，但是我们已经在那里运行了服务器，我看到了这样的选项:如果没有安装JProfiler，您可以创建
浏览 0提问于2013-12-04得票数 1
1回答
我意外地为远程计算机(运行linux的集群)上的一个巨大文件夹启动了一个删除进程，我通过命令"Connect to server“导航文件夹/通过Nautilus访问文件。在这台机器上我没有垃圾。我已经停止了删除进程后，1或2秒(红色按钮在窗口与进度栏)，显然所有的文件仍然在那里。如何检查文件是否已损坏/部分删除？
浏览 0提问于2017-05-14得票数 0
我们知道，如果我们在linux或mac中下载一个大文件，文件的最后修改时间将保持不变。这在S3中是一样的吗？对象最后一次修改了time will keep changed during uploading，或者它只是一个简单的时间戳to record the start of upload operation
浏览 1提问于2021-04-13得票数 0
我正在尝试将一个大文件发送到我的API之一，该API托管为"Azure Webapp for containers“Linux服务。 然而，我在传输数据时超时了。所以，我想把它增加到10分钟。 有什么方法可以做到这一点吗？ PS:使用Flask为API提供服务
浏览 13提问于2019-05-10得票数 0
回答已采纳
我们正在使用实例，我们需要在不使用Linux计算机的情况下填充时区。
因此，这个问题的答案概述了如何使用Linux：来完成这一任务。这篇文章演示了如何在Windows上使用MySQL来实现这一点，如果您可以访问Windows文件：。
但是，这两种方法都不适合我们的情况；我们需要使用Windows计算机远程填充时区，而不需要访问远程文件系统。我认为我们真正需要的是的输出，只是我们没有运行这个命令的Linux计算机。MySQL的对我们没有好处，因为我们无法访问远程文件系统。
因此，我们可以使用Windows计算机远程填充实例的时区吗？
浏览 1提问于2014-11-24得票数 0
回答已采纳
2回答
我使用了和等Java在远程机器上执行命令。我探索了像和这样的Java Expect API。但是我找不到一种方法将输出从机器逐行传输到我的java进程。假设我正在对远程计算机中的一个大文件执行grep，我想逐行将巨大的输出流式传输到我的进程，而不是等待整个命令完成。有可能吗？如果是，该怎么做呢？
浏览 5提问于2016-10-30得票数 2
我正在尝试运行一个shell脚本来在远程linux机器上执行二进制文件。二进制和shell脚本都在我的本地窗口机器上。是否可以通过命令行工具(如PLINK )从windows直接将二进制文件运行到远程计算机？
我不想将二进制和脚本放到我希望它们运行的所有远程linux盒中，而是要运行shell脚本，它将由实习生调用二进制文件，并通过本地机器直接执行所需的函数。
浏览 4提问于2016-07-27得票数 0
回答已采纳
2回答
我需要同时从服务器向多个客户端传输/多播一个大文件，大小约为40G，并且这只会执行一次。在Linux中有没有好的协议可以做到这一点呢？我试着使用UFTP，但它不起作用。
浏览 3提问于2014-04-26得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
