来自S3存储桶的pg_bulkload
是一个用于将数据批量加载到PostgreSQL数据库中的工具。它可以从Amazon S3存储桶中读取数据，并将其高效地导入到PostgreSQL数据库中。
pg_bulkload的主要优势包括：
- 高效性：pg_bulkload使用并行加载技术，可以快速地将大量数据加载到数据库中，提高数据导入的速度。
- 可扩展性：它支持并行加载和分布式加载，可以在多个节点上同时加载数据，以满足大规模数据导入的需求。
- 灵活性：pg_bulkload支持多种数据格式，包括文本文件、CSV文件、二进制文件等，可以根据实际需求选择合适的数据格式进行加载。
- 安全性：它提供了数据校验和错误处理机制，可以确保数据的完整性和一致性，并提供详细的错误日志和报告。
应用场景：
- 数据迁移：当需要将大量数据从其他数据源迁移到PostgreSQL数据库时，可以使用pg_bulkload进行高效的数据加载。
- 数据导入：当需要将大量数据批量导入到PostgreSQL数据库中时，可以使用pg_bulkload来提高导入速度。
- 数据备份和恢复：pg_bulkload可以用于将备份数据快速恢复到PostgreSQL数据库中。
腾讯云相关产品推荐： 腾讯云提供了一系列与云计算相关的产品和服务，以下是一些推荐的产品和产品介绍链接地址：
- 对象存储（COS）：腾讯云的对象存储服务，类似于Amazon S3，可以用于存储和管理大规模的非结构化数据。详情请参考：https://cloud.tencent.com/product/cos
- 云数据库 PostgreSQL：腾讯云的托管式PostgreSQL数据库服务，提供高可用、高性能的数据库服务。详情请参考：https://cloud.tencent.com/product/postgresql
- 云服务器（CVM）：腾讯云的弹性云服务器，提供可扩展的计算资源，适用于各种应用场景。详情请参考：https://cloud.tencent.com/product/cvm
- 云安全中心：腾讯云的安全管理和威胁检测服务，可以帮助用户保护云上资源的安全。详情请参考：https://cloud.tencent.com/product/ssc
请注意，以上推荐的产品和链接仅供参考，具体选择还需根据实际需求进行评估和决策。
相关·内容
1回答
我们将部署所需的RPMS存储在S3存储桶中，我们在存储桶上托管yum存储库，以便更容易更新RPMs。 目前，我们的存储桶可以通过S3端点(s3.amazonaws.com)公开访问，并向全世界开放访问，因为我们目前不能从私有S3存储库中下载yum包。 我们需要加强Repo存储桶的安全性，以支持通过s3.amazonaws.com端点对S3进行基于身份验证的访问。对此有什么建议吗？谢谢！ `{
"Version": "2012-10-17",
"Statement": [
{
"Si
浏览 12提问于2020-06-16得票数 3
回答已采纳
2回答
我有几个按日期分区的雅典娜数据库和表。我想将底层的S3存储桶移动到不同的存储类中，这取决于这些表的查询频率。我正在考虑在这些表的底层存储桶上启用S3存储类分析。我想知道在使用亚马逊S3分析查看底层S3存储桶的数据访问模式时，是否会显示对这些表/分区的雅典娜查询。例如，如果我查询一个雅典娜表10次，并查看底层S3存储桶的分析，它会显示我查看了10次S3存储桶吗？ 谢谢
浏览 33提问于2020-07-17得票数 0
回答已采纳
我正在尝试让我的AWS列出我已经存储在我的S3存储桶中的对象。我已经成功地使用下面的代码从我的S3存储桶中提取了一些链接。
aws s3api list-objects --bucket my-bucket --query Contents[].[Key] --output text
问题是我的命令提示符中的输出没有列出整个S3存储桶清单列表。是否可以修改此代码，以使CLI上的输出列出完整的清单？如果不是，有没有办法修改代码以针对S3存储桶中的特定文件名？例如，我的存储桶中的所有文件名都是日期，所以我会尝试从" my - bucket“存储桶中标题为3_15_20 Videos的文件中
浏览 2提问于2020-03-16得票数 0
1回答
我想通过我们的反向代理(Nginx)代理一个亚马逊S3存储桶。
为了更高的安全性，除了运行代理的HTTPS主机之外，我想禁止对存储桶的读访问。
有没有办法为这个任务配置亚马逊S3？
请提供配置。
我考虑过在S3存储桶名称中添加密码，但这不是一个解决方案，因为我们还需要签名上传到存储桶中，因此存储桶名称将公开可用。
浏览 1提问于2018-05-22得票数 0
1回答
我尝试使用boto3将来自供应商的S3存储桶中的文件传输到我的S3存储桶中。我正在使用sts服务来承担访问供应商s3存储桶的角色。我可以连接到供应商存储桶并获得该存储桶的列表。当复制到我的存储桶时，我遇到了CopyObject operation: Access Denied错误。这是我的脚本
session = boto3.session.Session(profile_name="s3_transfer")
sts_client = session.client("sts", verify=False)
assumed_role_object = sts_c
浏览 153提问于2019-05-30得票数 3
回答已采纳
我有3个帐户，我将称为帐户AA，BB和CC。
AA对BB中的s3存储桶执行putObject，CC有一个在BB中创建对象时触发的lambda
当我从帐号BB在s3存储桶中创建一个对象时，lambda可以正常工作。我可以通过控制台或s3应用编程接口完成此操作。
当对象从帐户AA放入其中时，我可以读取lambda中的事件，但在尝试执行s3:GetObject时会得到Access Denied
有一次，我在BB中有了lambda，它能够对AA创建的对象执行s3:GetObject。只有当我将lambda移到CC时，我才开始遇到AA创建的对象的问题。
这是我的s3存储桶策略
{
"Ve
浏览 0提问于2019-07-23得票数 1
1回答
删除桶以重新配置其属性之后，存储桶继续显示为“not”，我假设它已被删除，但由于该桶已经存在，所以无法创建同名的桶。
删除下列步骤：
contentDeleted 删除了指向S3桶的所有依赖项，S3桶中的所有内容都已删除
这是一个bug还是一个常见的问题？
注意:要查看它是否正在缓存，请在存储桶被删除后等待几个小时。
浏览 11提问于2021-09-19得票数 0
回答已采纳
我使用s3存储桶来存储我的数据。我每天都会将数据推送到这个存储桶中。我想知道是否有功能，我可以比较不同的文件在我的存储桶在两个日期。我没有，有没有办法让我通过aws cli或sdk构建一个
我之所以要检查这一点，是因为我有一个s3存储桶，而我的客户端不断地将数据推送到这个存储桶中。我想看看自从我上次加载它们以来，它们推送了多少数据。aws中是否有支持此查询的模式？或者我必须在s3存储桶中创建任何规则来分析它？
浏览 0提问于2019-07-23得票数 2
如果我从我的亚马逊S3帐户中删除一个存储桶，该名称是否可以在其他地方使用？我在我的S3帐户中设置了一个名为"WXY234“的存储桶，但现在我希望将该存储桶名称放在另一个帐户中。如果我把它从我的账户上删除，这个名字会不会被公开，这样我就可以在其他地方使用它了？如果是这样，发布的名称需要多长时间才能可用？
浏览 1提问于2016-05-08得票数 18
1回答
嗨，我正在寻找最好的方式重定向/路由所有的s3桶链接到一个域或链接域到s3桶。
我正在从专用主机迁移到aws，并使用s3桶存储文件。
示例： -->指向
但是我有很多这样的应用程序和混合应用程序，它们指向域/文件，所以不确定是否有一种方法可以在aws控制台或php脚本中实现路由？
谢谢
浏览 5提问于2017-02-08得票数 0
1回答
尝试在没有公共访问权限的s3存储桶中承载提交表单index.hmtl文件
{
"Version": "2008-10-17",
"Id": "permissionTohttps",
"Statement": [
{
"Sid": "AddPerm",
浏览 37提问于2018-06-01得票数 0
当创建胶水作业时，它有一个选项来选择自定义脚本“存储脚本的s3路径”，但它不允许选择保存在其他区域s3存储桶中的python脚本，它只允许从我们创建胶水作业的相同区域选择存储桶和对象。这是AWS Glue的限制吗？
浏览 8提问于2021-05-03得票数 0
我有一个包含大约80个对象的s3桶，我可以从Cloudwatch度量中确认这一点。没有前缀/文件夹。所有对象都位于桶的根路径中。
当我执行aws s3 ls bucket时，它只显示当前月份的对象，而不是显示所有月份的对象，而不是前一个月的对象。即使在AWS S3控制台中，情况也是一样的。我甚至试过aws s3 ls bucket --recursive
在控制台中，我看到“查看24中的1”，但是没有可以导航的按钮来查看旧的对象。
为什么会这样呢？我怎么能看到我桶里所有的东西？
我的s3桶存储类是标准的。
浏览 0提问于2019-06-18得票数 0
回答已采纳
我有一个Spark作业，它将其结果写入到s3存储桶中，问题是当输出存储桶名称看起来像这样S3A://存储桶名称/我得到一个错误
Caused by: com.amazonaws.services.s3.model.AmazonS3Exception: Status Code: 404, AWS Service: Amazon S3, AWS Request ID: xxx, AWS Error Code: NoSuchKey, AWS Error Message: null, S3 Extended Request ID: xxx
但是，当我在输出存储桶中添加子文件夹(s3a:// bucke
浏览 1提问于2017-08-09得票数 0
2回答
我已经创建了四个S3存储桶，每个存储桶都有一个简单的index.html文件，每个存储桶都有唯一的内容。
我已经创建了一个CloudFront发行版，并为其分配了四个源，每个源对应四个存储桶。
每个源都有一个源访问标识，并且OAI已在其相关存储桶的策略中使用，例如：
{
"Version": "2012-10-17",
"Statement": [
{
"Effect": "Allow",
"Principal": {
浏览 9提问于2021-09-25得票数 1
当我最初设置Cloudfront时，我首先创建了Cloudfront发行版。这非常令人困惑，因为当时，我对S3管理控制台一无所知。您可以在S3 MC中创建存储桶。在创建分发时，Cloudfront请求这些存储桶中的一个。
对于建立一个全新的S3帐户的人来说，正确的顺序是什么:先是S3存储桶，然后是Cloudfront分发，反之亦然？
在创建分发时，是否只需要“源域名”？我已经包含了上半部分分布设置表单的屏幕截图。
浏览 1提问于2013-04-03得票数 0
回答已采纳
我在AWS的.net文档中看到的连接模型是:连接到根站点级别-->转到您选择的存储桶。
作为到S3的初始连接的一部分，我发现没有任何选项来定义您希望登录的存储桶。对于只能访问特定存储桶而不能访问根级别的用户，这会导致问题。
对我来说，这应该在编程上得到支持是有意义的，但是CreateAmazonS3Client方法不允许配置登陆桶。使用.net SDK访问特定S3存储桶的用户真的需要拥有根级别权限吗？
浏览 4提问于2015-06-13得票数 1
我们有一个java应用程序，它将请求重定向到s3桶html文件，如，
String htmlURL = "https://s3_bucket.s3.amazonaws.com/118/vtour/tour.html";
resp.sendRedirect(url);
servlet应用程序部署在tomcat服务器上，所有这些网络配置都通过nginx代理pass维护。nginx在不同的机器上运行。Nginx配置为：
location /JavaServletApp {
proxy_pass http://ip_address_o
浏览 3提问于2019-12-18得票数 0
从我的研究来看，似乎S3存储桶通常是从同一个AWS帐户下载的，而API密钥来自同一个帐户。
我已经获得了一个新的亚马逊网络服务帐户的访问权限，这个帐户包含一个我需要每天下载的S3存储桶。问题是我的API密钥与另一个AWS帐户关联。有没有办法将新的S3存储桶导入到我现有的亚马逊网络服务账户中，或者尝试在已经拥有我需要的S3存储桶的亚马逊网络服务账户上创建一个新的API会更简单？
我使用的是python和boto3。谢谢!
浏览 6提问于2017-07-12得票数 0
我们有一个网站托管，使用s3存储桶存储不同的文件(例如策略存储库)。我们希望在不破坏我们网站中这些对象的链接的情况下，在S3存储桶下重新组织适当文件夹中的文件。在S3中有没有实现这一点的方法？
浏览 0提问于2018-05-01得票数 1
1回答
我们大约有250个客户在使用我们现有的本地FTP服务来上传和下载大型图形文件。我想将此服务转移到AWS。我希望在设置安全性的同时将成本保持在最低水平，以维护客户隐私。我想使用S3？客户将使用S3客户端而不是FTP客户端。该解决方案需要具有可扩展性。
我是使用单个S3存储桶还是为每个客户使用一个存储桶，并使用只允许该客户访问的存储桶策略？
我应该使用请求者付费吗？请求者支付的费用是什么？
浏览 4提问于2016-01-27得票数 0
2回答
有没有简单的方法可以查看特定存储桶的有效访问权限？更具体地说，对存储桶的访问权限是通过身份策略授予的，有170多个IAM角色和用户以及1000+策略(并不是所有策略都附加到IAM角色或用户)。我需要查看谁拥有特定存储桶上的s3:GetObject、s3:PutObject和s3:DeleteObject权限。有没有什么工具可以给我这样的报告？我可以编写一个脚本，遍历所有角色和附加到它们的策略，提取包含特定存储桶的语句，然后我可以交叉引用允许和拒绝，但我相信有一些更聪明的方法可以做到这一点。
浏览 2提问于2020-09-17得票数 1
这是一个与此类似的问题：不同之处在于，我想用python代码来做这件事，并且我不能改变源存储桶(它归第三方所有)中的s3存储桶策略。我确实有这两个桶的证书。
如何在python代码中运行这两个存储桶之间的同步命令？
浏览 0提问于2019-08-13得票数 0
2回答
我正在S3桶上执行Athena查询。我们叫它athena-bucket吧。今天，我需要将这个桶限制在VPC Enpoint之上。因此，我尝试了这个S3桶策略：
{
"Version": "2012-10-17",
"Statement": [
{
"Sid": "VPCe and SourceIP",
"Effect": "Deny",
"NotPrincipal": {
浏览 0提问于2019-05-20得票数 1
回答已采纳
我正在设置一个到S3的Kinesis Firehose传递流，我注意到你可以设置一个自定义的KMS密钥来加密S3上的文件。
但是，如果S3存储桶已启用KMS加密，则无论如何都会对文件进行加密。当然，不同之处在于，将使用默认的亚马逊网络服务管理器S3 KMS密钥，而不是提供给Firehose的客户管理的自定义KMS密钥。
相对于依赖默认的S3 KMS密钥，通常使用自定义KMS密钥对S3上的Firehose数据进行加密的原因是什么？如果您也是S3存储桶的所有者并控制其设置，那么这样做有什么意义吗?或者，当您不能控制目标存储桶的设置时，启用加密也是主要用途吗？
或者，与S3提供的用于加密静态数据的K
浏览 19提问于2018-12-13得票数 4
回答已采纳
我正在尝试制定一个S3存储桶策略，只允许来自CloudFront的GetObject，但能够直接PutObject到存储桶。
尝试了几种组合，但都不起作用。这是我尝试的最新尝试。
With, Block All Public Access: ALL OFF.
Bucket Policy:
{
"Version": "2012-10-17",
"Id": "Policy1604429581591",
"Statement": [
{
浏览 3提问于2020-11-17得票数 0
我使用以下代码来检查是否存在存储桶：
def check_bucket_existed(bucket_name, public_auth_endpoint):
endpoint = 'https://' + public_auth_endpoint
s3 = boto3.resource('s3', endpoint_url=endpoint)
try:
s3.meta.client.head_bucket(Bucket=bucket_name)
exists = True
except bot
浏览 2提问于2017-02-22得票数 0
1回答
有没有一种方法可以从不同的账户导入密钥(让我们称之为ACC : customer key)，在其中我可以加密某些数据，例如，secrets或甚至连我(ACC )都无法访问的特定s3存储桶？密钥管理器中的密钥或特定的S3存储桶驻留在ACC中。
浏览 21提问于2021-07-04得票数 1
4回答
我有一个ID为11111的亚马逊网络服务帐户，即使访问该对象的角色具有完全s3访问权限，我也要拒绝该存储桶所属的同一帐户访问s3存储桶的某些部分。
我的理解是，在s3存储桶策略上设置拒绝规则应该做到这一点，因此我尝试了下面的s3策略
{ "Version": "2012-10-17", "Statement": [ { "Sid": "", "Effect": "Deny", &#
浏览 0提问于2017-12-05得票数 3
什么是(或应该是) S3桶策略与指定管理员的用户策略之间的关系？
例如，假设我新创建了一个桶：
$ aws --profile admin --endpoint-url http://localhost:4572 s3 mb s3://foo
make_bucket: foo
我希望用户bucket_admin能够管理桶(不一定是唯一的)。要做到这一点，我应该创建/应用一个类似于：的桶策略吗？
{
"Version": "2012-10-17",
"Statement": [
{
"Effect": &
浏览 2提问于2020-05-05得票数 2
回答已采纳
2回答
我在帐户A中有一个批处理作业，在帐户B中有一个存储桶。当我的作业请求s3:GetBucketLocation时，它返回Access Denied。
我已经在我的批处理作业(帐户A)上设置了这样的权限：
{
"Version": "2012-10-17",
"Statement": [
{
"Effect": "Allow",
"Action": [
"s3:GetObject
浏览 0提问于2019-04-09得票数 2
我正在使用无服务器的python编写lambda函数。当在s3桶中创建文件时，将触发lambda函数。lambda函数转换文件，然后将其放入另一个桶中。源s3桶在另一个堆栈中定义，目标桶在lambda函数的堆栈中定义。我一直试图找到一个例子，看看如何在环境变量中指定源桶，以及如何在lambda函数的事件下指定源桶？
service: Service
provider:
name: aws
runtime: python2.7
stage: ${opt:stage, 'dev'}
region: us-east-1
role: LambdaRole
func
浏览 0提问于2018-04-25得票数 1
回答已采纳
1回答
作为一个公司的项目，我正在创建一个供他们使用的内部them应用程序。我知道如何创建网站，但我如何让它可以在内部访问，比如"internalExample.com"？目前，我计划将网站存储在亚马逊网络服务的S3存储桶中，但将S3存储桶的端点设置为url名称是非常不专业的。
谢谢!
浏览 1提问于2017-12-14得票数 0
我有一个客户端，我希望能够上传文件，但不能在我的S3桶周围自由导航。我已经创建了一个IAM用户帐户，并应用了以下策略：
{
"Version": "2012-10-17",
"Statement": [
{
"Sid": "Stmt1416387009000",
"Effect": "Allow",
"Action": [
"
浏览 4提问于2014-11-19得票数 2
我有一个亚马逊网络服务的S3存储桶，其中有许多图像被分到不同的文件夹中。我需要使用javascript在我的网站上列出所有这些图像，并能够直接从我的网站将新图像上传到S3存储桶中。在javascript中做这件事最好的方法是什么？
浏览 0提问于2016-04-15得票数 0
我刚刚开始学习亚马逊网络服务正试图通过S3控制台上的'Get Started‘按钮创建一个S3存储桶。在命名存储桶，选择区域，并且在“配置选项”和“设置权限”页面上没有做任何更改后，当我去创建存储桶时，我得到一个错误，说‘访问被拒绝’。
我该如何着手解决这个问题？
浏览 50提问于2019-12-04得票数 0
1回答
我的AWS函数的依赖项大于允许的限制，所以我将它们上传到一个s3桶中。我已经了解了如何使用s3桶作为Lambda函数的事件，但是我需要结合单独的事件使用这些包。s3桶只包含python模块(numpy、nltk等)--而不是Lambda函数中使用的事件数据。
我该怎么做？
浏览 1提问于2020-07-14得票数 1
回答已采纳
1回答
我编写了一个脚本来计算s3桶中的对象数量和每个桶的总大小。当我针对几个测试桶运行它时，代码会工作，但是当我包含所有生产存储桶时，代码就会超时。成千上万的物体。
import boto3
s3 = boto3.resource('s3')
bucket_list = []
bucket_size = {}
bucket_list = s3.buckets.all()
skip_list = ('some-test-bucket')
for bu in bucket_list:
if bu.name not in skip_list:
浏览 1提问于2019-07-24得票数 0
回答已采纳
我使用存储库-S3插件进行快照和使用ElasticSearch7.5.1进行恢复。
我创建了快照策略并拍摄了特定索引的快照，确认它们存在于我的S3桶中。由于某些原因，我必须手动删除所有节点的数据()，所以我运行了
对于集群中的所有节点，/var/lib/elasticsearch/nodes/0/都是rm -r。
现在，当我再次转到kibana中的快照和还原选项卡时，没有显示我的旧快照数据，而且即使索引存在于我的S3桶中，也无法恢复它们。我需要恢复索引，并需要帮助。
浏览 3提问于2020-02-12得票数 3
1回答
我正在学习React Native，我以前玩过亚马逊网络服务S3，我在我的存储桶中设置了一些图像，我想从我的代码中获取，这些图像被设置为私有。
我想使用React Native方式调用S3 API，就像我在Angular2项目中所做的那样。我在网上查看，只发现有用于上传图片到S3的第三方插件。
我如何能够在react原生var s3 = new AWS.S3();中创建一个新的S3对象并调用像s3.listBuckets(function(err, data) { if (err) console.log(err, err.stack); // an error occurred el
浏览 0提问于2017-04-04得票数 3
1回答
我已经创建了以下IAM策略：
{
"Version": "2012-10-17",
"Statement": [
{
"Effect": "Allow",
"Action": "s3:ListAllMyBuckets",
"Resource": "arn:aws:s3:::*"
},
{
"Effect": "Allow",
&#
浏览 5提问于2015-12-03得票数 1
我想允许不同地域的私有网络对S3存储桶进行s3:GetObject访问。
如果S3存储桶和VPC在同一区域，我知道我们可以使用VPC端点。但是当我们想要允许从不同的区域访问时，我们有什么选择呢？
选项1：
为地域内所有可用区的所有子网创建NAT网关，并在S3存储桶策略中允许NAT网关的弹性IP访问。
但是这种方式需要许多NAT网关(例如:美国-东部-1区域为6个)
其他选择？
浏览 0提问于2017-11-24得票数 0
在我的无服务器YAML文件中，我定义了一个带有多个S3事件的lambda函数，这些事件来自已经存在的不同存储桶，如下所示
functions:
my-lambda:
handler: ...
name: my-lambda
description: 'Fetcher'
environment:
env_host: aws
events:
- s3:
bucket: bucket1
existing: true
- s3:
bucket: b
浏览 0提问于2021-03-11得票数 0
3回答
我对源S3存储桶具有只读访问权限。我无法更改此源帐户和存储桶上的权限或任何类似内容。我不拥有这个帐户。
我希望将源存储桶中的所有文件同步到我的目标存储桶。我拥有包含目标存储桶的帐户。
对于我不拥有的源存储桶和我拥有的目标存储桶，我有不同的凭据集。
有没有办法使用AWS CLI通过两组凭证在存储桶之间进行同步？
aws s3 sync s3://source-bucket/ --profile source-profile s3://destination-bucket --profile default
如果没有，我如何在自己拥有的目标存储桶上设置权限，以便可以与CLI同步？
浏览 2提问于2016-08-08得票数 8
我们有一个将文件写入亚马逊S3存储桶的应用程序。我无法将文件下载或复制到不同的存储桶。我收到access denied错误。文件的所有者是其他人，但是存储桶归我们所有。该人员无法访问，并且不在组织中。如何访问文件并更改访问权限或更改文件的所有者？ 我尝试将对象从源存储桶复制到目标存储桶，但Error 403。 存储桶策略如下： {
"Version": "2012-10-17",
"Id": "abcd",
"Statement": [
{
"
浏览 14提问于2019-09-19得票数 0
1回答
我正在试图找出我的S3桶是否可以公开写入。
这是ACL：
以下是桶策略：
{
"Version": "2008-10-17",
"Statement": [
{
"Sid": "AllowPublicRead",
"Effect": "Allow",
"Principal": {
"AWS": "*"
},
"Act
浏览 2提问于2017-06-08得票数 2
回答已采纳
1回答
我想对s3存储桶进行每日备份。我想知道有没有人知道什么是最佳实践？
我在考虑在s3存储桶更新时使用lambda函数将内容从一个s3存储桶复制到另一个存储桶。但这并不能减轻s3故障的影响。如何使用lamda将内容从一个s3存储桶复制到另一个亚马逊服务(如Glacier )？这里备份s3存储桶的最佳实践是什么？
注意:我想做一个备份，而不是存档(内容在存档后被删除)
浏览 1提问于2016-08-03得票数 0
我有一个目前的S3和胶水基础设施如下。 部署在VPC S3存储桶中的S3端点具有仅允许来自端点的流量的存储桶策略。粘合有权访问所述存储桶的IAM角色。 当我运行一个AWS Glue Crawler作业时，我得到了一个错误“用户没有访问IAM存储桶的权限”，我试图提供S3用户ID访问S3存储桶。我在S3存储桶策略中添加了IAM角色和IAM ID。但错误仍在继续。 当我删除存储桶策略时，即使IAM用户ID对存储桶没有访问权限，爬虫作业也是成功的。 根据亚马逊网络服务文档，亚马逊网络服务胶水使用S3端点。如果是这样，为什么我会得到这个错误？
浏览 28提问于2020-03-25得票数 0
1回答
我正在使用‘S3’在一个程序中创建standard-prefix-{variable}桶。在尝试创建IAM策略时，用户可以更新、创建、删除帐户中的存储桶，但前提是桶名包含“标准前缀”。呃，我不想修改帐户中的其他桶。我正在寻找许多方法来限制对存储桶中资源的访问，给出特定的桶名，但当桶名发生更改时，无法限制访问。
类似的东西(似乎不起作用)：
"Resource": "arn:aws:s3:::standard-prefix-*"
来自的例子
基于用户名的动态名称是我发现的最接近的名称。但是，对于桶名的变量部分，我需要一个通配符：
{
"Version&
浏览 5提问于2015-06-01得票数 4
回答已采纳
如果我将大mp4文件存储在S3桶中，获取端点URL并在我的网站上播放该视频，我需要为此付费吗？那么，AWS只收取从S3存储桶上传和下载的费用，还是也收取使用端点URL进行内容流的费用？
浏览 10提问于2020-05-13得票数 2
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
