1回答
我有一个应用程序(运行在EC2实例上)，它解析到达S3桶中的新日志文件。我在这个桶上设置了S3通知，以便在put请求上将消息放在SQS队列中。目的是将新到达的日志文件从S3传输到EC2实例。我对解决办法有以下问题/意见，并希望就此提供一些反馈意见：
我们可以使用Camel路由从SQS读取消息，然后从JSON消息中提
浏览 3提问于2015-01-14得票数 4
我需要从S3存储桶中读取一些文件。结构是这样的。S3 Bucket 传入 +xls -file1.xls -file2.xls -file3.xls +doc -file1当一个特定的excel文件被放到传入的/xls文件夹(比如file1.xls)中时，我需要拾取所有的文件，进行一些处理，然后把它们放到一
浏览 44提问于2020-03-24得票数 0
我正在测试一条从AWS S3存储桶的sales文件夹访问文件的路由。我面临的问题是，一旦从文件夹中读取了所有文件，Camel就会删除该文件夹。我知道在S3中没有文件夹的概念。文件名以文件夹名作为前缀。
在读取和删除所有文件后，如何防止<em
浏览 1提问于2017-12-05得票数 2
csv文件位于S3桶中，我使用camel aws来使用csv文件。但是，当csv文件被加载到本地时？字符被伪装成第一列。在加载到本地后?如何从s3中读取csv文件，使用aws-s3从s3桶(如“Exchanges3
浏览 3提问于2019-11-13得票数 0
我是Apache camel-aws的初学者。我正在编写一个程序，使用apache camel将文件从一个亚马逊网络服务s3存储桶传输到另一个存储桶。现在，我想记录从s3中选取的文件/对象名。${file:name}适用于camel FTP组件，希望了解其在aws中的等价物。
from("aws-s3:&#x
浏览 10提问于2018-01-25得票数 0
回答已采纳
我正在尝试使用camel路由，在两个s3桶之间复制一个文件，根据文档，这应该是相当直接的，但该路由似乎是无声地失败了。我正在使用的java DSL如下所示。
from(&q
浏览 2提问于2019-01-28得票数 1
我使用Camel S3组件来读取上传到特定S3桶中的对象。成功地读取了对象。现在，这些是权限。知道我做错什么了吗？:ListBucket",
"s3:DeleteObje
浏览 1提问于2020-02-15得票数 0
回答已采纳
我正在使用Hadoop来处理Google Books ngram，这些ngram在亚马逊S3中存储为Hadoop序列文件。S3包含从Hadoop读取数据的功能(使用Hadoop存储桶作为虚拟的“文件系统”)，只需在文件名上指定s3://或s3n://协议即可。
不幸的是，它需要您设置您的AWS访问权限和密钥
浏览 0提问于2012-06-21得票数 4
我需要编写代码(python)将S3文件从一个S3存储桶复制到另一个存储桶。源存储桶在不同的AWS帐户中，我们使用IAM用户凭据从该存储桶中读取。代码运行在与目标存储桶相同的帐户中，因此它具有IAM角色的写访问权限。我能想到的一种方法是创建与源帐户的
浏览 6提问于2019-07-09得票数 0
回答已采纳
我使用了下面的Camel route，它试图从S3存储桶中读取文件列表： from("direct:my-route").
.from("aws-s3://my.bucket?看起来Camel-S3组件的默认行为是使用调度程序运行，但是这会导致相同的文件一次又一次地被处理。我尝试使用startScheduler=f
浏览 23提问于2020-01-09得票数 0
1回答
读取CDK中的桶对象
、、、、
在terraform中，在部署时从s3桶读取对象时，我可以使用数据源CDK中是否有类似的概念？我看到了将资产上传到s3以及导入现有桶的各种方法，但没有从存储桶中获取对象。我需要从存储桶中读取一个会影响进一步部署的配置文件</
浏览 2提问于2022-05-25得票数 1
回答已采纳
3回答
我有一些格式非常特殊的数据(例如，由NI系统生成的tdms文件)，我将它们存储在S3存储桶中。通常，如果数据存储在我的本地计算机中，为了用python读取这些数据，我会使用npTDMS包。但是，当tdms文件存储在S3存储桶中时，应该如何读取这些文件呢？一种解决方案是将数据下
浏览 22提问于2019-12-21得票数 0
回答已采纳
我是apache框架的新手，我使用的是2.15.1版本。我的用例是轮询aws s3桶并从其中下载新创建的文件，为此，我将如下所示 .routeId("awsFileCopyRoute")
.log(LoggingLevel.INFO, "awsFi
浏览 4提问于2016-06-27得票数 2
我与基于MemoryIdempotentRepository的幂等用户一起使用Camel AWS-S3，并尝试使用Camel AWS-S3版本3.14.2读取AWS/S3桶中的所有文件。其目的是将检索到的文件保存在桶中，因此，deleteAfterRead设置为false。在调试我的代码时，我看到连续的轮询总是只检索一个文件，这个文件总
浏览 3提问于2022-03-25得票数 0
1回答
我有一些非常机密的数据，我想存储在s3存储桶中。我希望制定策略(存储桶或iam )，使任何人(即使是管理员)都无法从aws控制台读取该存储桶中的文件内容。但是我将在我的主机上运行一个程序，该程序需要从s3存储桶中放入和获取数据。此外，我将使用s3的服务器端加密，但我不能<em
浏览 34提问于2019-03-08得票数 0
我的S3存储桶上有大量的文件，并添加了一个存储桶策略来使它们全部公开。现在，当我浏览根目录时，它会列出整个目录(或前1000个项目)。如何防止目录浏览？
浏览 3提问于2012-03-05得票数 48
1回答
我正在从s3存储桶中读取大量文件。 在读取这些文件之后，我想对数据帧执行过滤操作。 但在执行过滤操作时，会再次从s3存储桶下载数据。如何避免数据帧重新加载？但是，数据还是从s3存储桶中以某种方式再次被拉了出来。StorageLevel.MEMORY_AND_DISK_SER_2)
df =
浏览 6提问于2019-09-05得票数 0
有没有办法读取不在您的亚马逊网络服务账户中的S3存储桶，并且您不能承担访问它的角色-特别是在电子病历中。.model.AmazonS3Exception: Access Denied (Service: Amazon S3; Status Code: 403
我只有一个IAM用户访问Id和密钥可以从存储桶中读取，我的创建EMR EC2实例的实例配置文件没有
浏览 1提问于2020-05-05得票数 0
我想为我的Drupal 8站点使用备份和迁移。有没有一种方法可以使用Flysystem进行备份？我应该安装S3FS吗？我确实安装并启用了S3FS，但并不只看到备份文件的配置。
浏览 0提问于2019-10-27得票数 -1
我们有没有办法通过Kafka Connect S3接收器连接器来标记写在S3存储桶中的对象。我正在从Kafka读取消息，并使用S3接收器连接器在S3存储桶中写入avro文件。当文件被写入S3存储桶时，我需要标记这些文件。
浏览 1提问于2019-07-24得票数 1
云服务器
ICP备案
腾讯会议
云直播
对象存储
腾讯云开发者
