腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
GCP
数据
过程
上
的
外部
配置
单元
表
未从
GCP
存储
桶
中
读取
数据
、
、
我在
GCP
存储
桶
中有以下格式
的
数据
: gs://bucket/my_table/data_date=2021-03-26/000gs://bucket/my_table
浏览 15
提问于2021-04-06
得票数 3
回答已采纳
1
回答
将文件从亚马逊S3持续发送到
GCP
实例并返回
的
系统架构
、
、
我没有必要
的
支持包来直接向谷歌咨询。因此,我提出这个问题的人谁有知识和一颗善良
的
心。 我计划将我
的
一些服务器需求从AWS迁移到
GCP
。为了实现这一点,我想获得一些关于
GCP
产品套件
的
指导。这一部分
中
的
一些信息可能不相关,但我将把它留在这里,以梳理出情况和需求。我计划将文件从亚马逊S3
存储
桶
持续发送到
GCP
gpu实例,因为这些文件会被上传到我
的
s3
存储
桶<
浏览 9
提问于2018-02-06
得票数 0
1
回答
当
GCP
中
的
桶
有请求者付费时,将
数据
从
GCP
复制到Azure
存储
、
、
我试图将
数据
从
GCP
复制到Azure
存储
,但是
GCP
中
的
存储
桶
有一个请求者付费,我尝试了使用AzCopy和Azure
数据
工厂进行传输,在Azure
配置
的
末尾,我可以看到
GCP
中
的
存储
桶
,但是当命中
桶
时,我得到了400个错误
的
请求,这是因为
GCP
中</
浏览 3
提问于2022-06-24
得票数 0
回答已采纳
1
回答
GCP
composer从
桶
中
读取
sql并将其推送到bigquery
表
、
我们使用
GCP
(气流管理)作为管弦乐工具,使用BigQuery作为DB。我需要从另一个
表
(位于bigquery
中
的
两个
表
)将
数据
推入
表
中
,但是方法应该被重新插入。因此,我编写了一个使用marge更新或插入
的
sql脚本。 marge脚本位于
GCP
编写器
桶
中
,如何从
存储
桶
读取
sql脚本?
读取
sq
浏览 10
提问于2022-03-17
得票数 0
回答已采纳
1
回答
在雪花上从舞台外数柱子
、
、
、
我正在使用雪花片来创建一个
数据
仓库。我用脚本让
数据
更新。行;没问题。但是,我无法从工作台或
gcp
桶
中计数列,以比较和查看是否正确地加载了所有
数据
。 你能帮忙吗!如果您对我如何从舞台或
GCP
浏览 3
提问于2022-10-31
得票数 0
1
回答
gcp
云功能是否有访问
gcp
存储
桶
的
成本?
、
、
想找出一些
gcp
的
存储
成本。 我在
GCP
云函数
中
运行了几个应用程序,其中一些应用程序
存储
,而其他应用程序则从同一区域
的
gcp
存储
桶
中提取
数据
。我想知道在云功能
中
是否存在任何相关
的
成本,比如提取或访问
存储
在
gcp
存储
桶
中
的
数据
?这是否会被归类
浏览 6
提问于2022-10-12
得票数 1
回答已采纳
1
回答
对某些
表
使用s3:sse,对某些
配置
单元
表
不使用s3:sse。
、
我想编写一个spark应用程序,在其中我可以从多个hive
表
中
读取
数据
,并向多个hive
表
中
写入
数据
。然而,这里有一个奇怪
的
地方。 所有
配置
单元
表
都是
外部
配置
单元
表
,
数据
驻留在S3
上
。一些s3
存储
桶
在写入时需要s3:sse加密,而另一些
存储
浏览 2
提问于2017-04-06
得票数 0
1
回答
如何跟踪Google Cloud公共
数据
集中
的
更改?
、
、
、
谷歌云服务在其云
存储
服务中提供了大量public datasets。我想要跟踪其中一些公共
数据
集
的
更新/添加。即当新文件被添加到公共
数据
桶
中
时创建某种类型
的
网络挂钩。我读到了google pubsub notifications,创建pubsub主题
的
可能性,可以在
存储
桶
上
推送更改通知。然而,我不能确定这样
的
主题是否已经存在于我可以订阅
的
公共
数据
浏览 17
提问于2020-09-30
得票数 0
回答已采纳
1
回答
Snowflake -无法将临时区域中
的
JSON拆分文件复制到
表
中
、
因为Snowflake不允许大小超过1 1GB
的
文件,所以我不得不使用7zip将它们分割成更小
的
文件。I ended up with 4 files like the ones below 你可以在所附图片中看到
的
带有图案
的
Files were uploaded to the Staging area。我正在尝试使用以下命令将临时区域中
的
那些文件复制到另一个
表
中
copy into yelp_user from @staging/yelp_academic_d
浏览 21
提问于2021-04-25
得票数 1
回答已采纳
1
回答
如何从按年份/月/日分区
的
桶
中加载
数据
到bigquery
我们有一个
数据
存储
在
gcp
桶
中
,格式如下- gs:/gcptest/Year=2020/Month=06/day=18/test1.parquet和day=18文件夹下
的
这么多文件。我希望在bigquery
中
创建一个
表
,其中
的
列存在于文件
中
,并按文件路径
上
的
年份、月份和日期进行分区。这样,当我将
数据
加载到
表
浏览 3
提问于2020-06-18
得票数 1
回答已采纳
2
回答
GCP
云扳手,是无服务器
的
吗?
、
我可以发现
GCP
并不是无服务器
的
。但我在
GCP
云扳手上找不到同样
的
东西。
GCP
云扳手是无服务器
的
?
浏览 17
提问于2022-03-09
得票数 0
回答已采纳
1
回答
创建
外部
分区
表
GCP
存储
桶
、
、
我们希望在
存储
镶木地板
数据
的
GCP
存储
桶
上
创建
外部
表
。 目前,我们
的
存储
桶
具有此结构Buckets/ MY BUCKET / DATA /2020/07/11/。--此位置将包含parquet文件 我们如何创建
外部
表格顶部,我们可以根据year/month/date格式对表格进行分区。
浏览 11
提问于2020-07-21
得票数 1
2
回答
gcp
实例在单个网络接口中可以使用
的
最大带宽是多少?
、
、
我使用n个进程将
数据
上传到Google云
存储
桶
中
,输出
数据
速率为16 16Gbps。 使用不同
的
桶
进行上传和下载。实例和
桶<
浏览 2
提问于2019-12-02
得票数 5
1
回答
GCP
负载均衡映射更新导致宕机
、
、
我正在
GCP
上
更改Global HTTP Cloud Load Balancer映射
的
原点,在我看到应用更新
的
通知后,大约有1分钟
的
时间,响应是Google服务
的
502。
GCP
负载均衡器日志显示了这些502,并指示statusDetail为"failed_to_pick_backend“。大多数条目显示
的
backendServiceName为空,这对于
存储
桶
后端是预期
的
,但最后几个502显
浏览 37
提问于2021-07-27
得票数 0
4
回答
码头容积阻力
的
最佳解决方案
、
、
、
、
我想设置正确
的
方式来持久化码头卷。目前,我们所有的坞卷都是本地
的
,所以如果服务器故障,我们
的
数据
就会丢失。 最好
的
特性是供应商之间
的
无缝过渡,如果其中一个崩溃,卷快照,低节点数,没有单一
的
故障点,等等。值得注意
的
是,我们在Hetzner租赁了服务器(所以也许是某种
存
浏览 0
提问于2018-09-26
得票数 3
1
回答
和多个项目
、
是否有可能在不公开注册
表
的
情况下从多个GCR项目中从同一个
GCP
中提取图像? 我想这样做,所以我不需要多次上传相同
的
图像到多个注册
表
,以便它可以用于不同
的
项目。
浏览 0
提问于2019-03-15
得票数 3
回答已采纳
1
回答
每个微服务一个带子文件夹
的
云
存储
桶
或一个云
存储
桶
、
、
、
我目前正在为我
的
使用每个微服务方法一个
桶
。这意味着我拥有的每个服务都有一个云
存储
桶
,其中包含一个用于云运行服务
的
default.tfstate文件。我有多个
GCP
项目环境,其中包括开发、分期或生产。在我
的
三个
GCP
项目环境
中
,每个云运行服务都有其自身
的
变化。这个服务有三个
GCP
云
存储
桶
,我必须以某种方式命名它们,以避免与其他
存储
桶</em
浏览 2
提问于2022-02-17
得票数 0
4
回答
如何将文件从互联网上直接下载到Google
桶
我想直接从互联网上下载一个超过20 to
的
文件到谷歌云
桶
中
。就像在本地命令行中所做
的
那样,如下所示:我拒绝将文件下载到自己
的
计算机,然后使用以下方法将文件复制到
桶
中
:目前,我正在尝试(就在这个时候)使用datalab下载文件,然后将文件从那里复制到<
浏览 1
提问于2019-07-24
得票数 5
回答已采纳
1
回答
如何创建从
GCP
虚拟机实例到
GCP
存储
桶
的
zip或tar
、
、
我正在尝试从
GCP
上
的
/var/www实例创建一个压缩
的
备份文件,并将其保存到
GCP
存储
桶
中
。我更喜欢使用SSH,但被告知使用gcloud shell控制台使用以下命令:使用此命令可以工作,但您首先需要创建
存储
桶
,它会复制每个文件与其复制每个文
浏览 0
提问于2020-07-14
得票数 0
1
回答
如何跟踪GCS网络出口
、
我们收到了一封来自Google
的
电子邮件,通知我们,我们将开始从我们
的
(这是我们
的
App默认
存储
桶
)
的
网络出口收费。我们每月发送几千GiB,使用他们
的
要花很多钱。我们一直在努力减少出口,但我找不出如何跟踪我们
的
使用情况。除了我们在9月份收到
的
一封电子邮件告诉我们我们
的
使用情况外,我找不到任何关于GCS使用情况
的
报告或指标,只有在那里
存储
了多少
数据
。我发现
的
浏览 9
提问于2016-11-01
得票数 6
点击加载更多
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
云直播
活动推荐
运营活动
广告
关闭
领券