腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
直接用
外部
表暂存
S3
文件
我试图找到一种直接查询csv、
json
和avro
文件
的方法,而不必先分阶段处理这些
文件
。
外部
表Another工具 FiveTran,它允许我更正任何自动检测
文件
的->表检测。 是否有另一种方法可以直接将
文件
读取到
雪花
,而无需暂存该
文件
?
浏览 6
提问于2020-01-06
得票数 0
回答已采纳
1
回答
从
S3
桶中获取
文件
名
、
、
我想从
雪花
中的
S3
桶中获得
文件
名的列表吗?有什么办法吗?
浏览 5
提问于2022-03-10
得票数 1
3
回答
雪花
:
如何
在
外部
S3
stage
上
创建
json
文件
视图
、
我正在尝试
创建
一个
json
文件
的
视图
,这是放置
在
雪花
的
外部
S3
阶段。
Json
文件
结构为: { 'key1':val1,'key2':val2 },{ 'key1':val1,'key2':val2 }我想用上面的structure.How查询
json
文件
可以吗?注意:我可以使用扁平化函数- {"
浏览 37
提问于2019-11-29
得票数 1
回答已采纳
3
回答
使用阶段区域失败。原因:[拒绝访问(状态代码: 403;错误代码: AccessDenied)]
、
我是新的
雪花
,我创造了一个
外部
舞台和一个给我的
s3
桶url。我的任务是将
json
文件
从
s3
复制到
雪花
表。当我运行copy命令时,我会遇到一个错误。我的命令如下: type = '
json
'; create or replace
stage
investor_
stage
file_fo
浏览 11
提问于2022-01-14
得票数 3
回答已采纳
1
回答
雪花
-保持表与
s3
外部
阶段同步的最佳实践
、
、
我们想把我们的源表从
s3
外部
阶段摄取到
雪花
中。为此,我们必须考虑到达
s3
桶中的新
文件
、现有
文件
中的更新以及
在
某些情况下行删除。到目前为止,我们正在评估三种方法: 表的完整删除和复制(简单但较少的performant)copy命令,它将捕获新的和更新的
文件
,然后执行合并查询,根据特定的用例去重复甚至删除行(可以解决,但我们需要维护更复杂的合并和删除逻辑)在
外部
s3
阶段之上使用
外部
表,并在
外部<
浏览 10
提问于2022-05-18
得票数 1
3
回答
如何
解决加载
json
数据时出现的错误“字段分隔符”、“
在
期望记录分隔符‘\n’时找到的”
我正在尝试“复制”命令,将数据从
s3
加载到
雪花
中。下面是我
创建
舞台和从舞台加载
文件
到
雪花
所遵循的步骤{ "Desigantion":"Product Manager",} create or replace
stage</
浏览 7
提问于2022-01-15
得票数 3
回答已采纳
1
回答
有没有一种方法可以
创建
雪花
外部
平台,从
s3
访问点读取数据?
、
、
我想在
雪花
中
创建
一个
外部
阶段,它将使用
S3
访问点来访问存储
在
S3
桶中的
文件
。:ListBucket", }]
在
雪花
中,我
创建
了与sql的存储集成: type = external_
st
浏览 12
提问于2022-05-13
得票数 0
1
回答
雪花
S3
级/
外部
表和
S3
版本控制副本
、
、
我想使用AWS
S3
作为
外部
存储,并使用
雪花
外部
表来查询数据。为了不丢失/覆盖任何数据,我
在
versioning桶
上
启用了
S3
。当存在多个版本的
文件
时,它们将在
雪花
中显示为副本,我可以找到一个选项,将它们隐藏在
外部
阶段/
外部
表中。LIST @my_
stage
; -- shows duplicate files SELECT $1, $2, $3 FROM @m
浏览 2
提问于2021-02-14
得票数 0
回答已采纳
1
回答
在
S3
中复制数据时
雪花
403错误“[访问拒绝(状态代码: 403;错误代码:AccessDenied)]
、
、
下面是
雪花
面的概述:政策: "Version": "2012-10-17", {检索
外部
id和
雪花
用户:Creatre信托政策: "Version&
浏览 5
提问于2022-02-23
得票数 0
1
回答
对于
雪花
外部
级,加密选项的用途是什么?
、
、
、
简而言之::
在
我们的场景中,我们有一个将加密设置为SSE的
S3
桶(OUR_S3_BUCKET),
创建
了一个传入目录并上传了一个covid_data.csv
文件
。
S3
://OUR_S3_BUCKET/i
浏览 3
提问于2020-07-27
得票数 2
1
回答
雪花
中从
外部
阶段动态
创建
表
、
、
、
1)使用python连接器执行Pythonto
雪花
数据连接;2)设置指向
S3
桶的
外部
级,要求基于每个CSV
创建
一个动态表。 我
在
s3
桶中有10个CSV,然后动态地
创建
10个不同的表,引用
外部
阶段。Sql_query=从@db.schema.external_
stage
复制到db.schema.table (
在
已经
在
雪花
中
创建
表结构的场景中)
浏览 5
提问于2022-04-24
得票数 0
1
回答
雪花
外台分割-粒状路径
、
专家们,
stage
@SFSTG = /appname/lob/ 我
浏览 0
提问于2020-07-24
得票数 0
1
回答
使用
雪花
将一种形式的表转换为另一种形式
我正试图将CSV
文件
加载到
雪花
中。
s3
位置中输入csv表的示例格式如下(有2列: ID,Location_count):但是,
在
创建
数据库、
外部
阶段和
文件
格式之后,当我尝试使用以下查询加载输入
文件
时,它将返回LOAD_FAILED选择parse_
json
(Location_
浏览 2
提问于2021-02-09
得票数 0
1
回答
来自
S3
的
雪花
负载数据(复制)与来自
外部
表的加载
以下两种情况下的性能有什么不同,一种是
在
执行和存储的情况下对成本进行优化。 用
S3
中的
文件
创建
外部
表,并从
外部
表将“插入.选择.”加载到
雪花
目标。将数据从
S3
加载到临时表,然后从临时表加载(“INSERT.SELECT.”)到
雪花
目标。
浏览 4
提问于2020-09-17
得票数 0
2
回答
从
S3
到
雪花
与性能
、
、
、
我将大量事件作为小
JSON
文件
存储
在
S3
中。现在我需要吃这些
文件
到
雪花
使用雪管。对于发送到
雪花
的请求数量是否存在性能上的问题?我应该把这些小
文件
合并成一个更大的
JSON
,然后让
雪花
吃掉它吗?我知道
雪花
可以自动检测
S3
上
的更改并尝试刷新其
外部
表,但我是否应该让小
文件
不断触发此过程?
浏览 3
提问于2020-01-08
得票数 0
回答已采纳
1
回答
雪花
:使用嵌套的
JSON
将
S3
复制到表中
Requirement:从
S3
将嵌套的
JSON
文件
加载到
雪花
中COPY INTO schema.table_A FROM ( FROM '@public.
浏览 10
提问于2022-10-31
得票数 0
1
回答
Snowflake
外部
阶段-获取错误访问被拒绝
、
我已经
在
雪花
中为我的
S3
存储桶
创建
了一个
外部
舞台。当我尝试使用List @database.schema.stagename访问
stage
时,会出现访问被拒绝错误。我们已经检查了
S3
存储桶策略,并修复了该问题。但我想看看
雪花
里的木头。有没有可能
雪花
日志会给出关于这个问题的详细信息。?如果有我需要检查的地方?
浏览 11
提问于2020-12-23
得票数 0
1
回答
从Matillion中的公共Azure blob加载数据
、
我的Matillion
在
Azure
上
,我的
雪花
数据库也是。培训是基于AWS的,但提供了有关Azure或GS所需调整的信息。舞
浏览 20
提问于2022-09-28
得票数 0
回答已采纳
2
回答
如何
从
雪花
外部
S3
stage
获取
文件
名列表?
我正在寻找最好的方法来自动检测
S3
存储桶中的新
文件
,然后将数据加载到
雪花
表中。我知道这可以使用Snowpipe和SNS,
在
AWS中设置SQS通知来实现,但我希望
在
Snowflake中有一个独立的解决方案,可以用于多个数据源。我想有一个表,其中更新的
文件
名从
雪花
桶,然后加载
文件
,尚未从
S3
加载到
雪花
。到目前为止,我发现在Snowflake中从
外部
S3
stage
自动
浏览 0
提问于2020-04-16
得票数 1
3
回答
为什么
雪花
里有内部舞台?
根据
文件
可以在三个云platforms(AWS/Azure/GCP).So中的任意一个托管
雪花
帐户--这意味着
雪花
体系结构的所有三层(存储、计算和云服务)都是在这些选定的云平台上部署和管理的。和现在的
雪花
表示云存储中数据
文件
的位置。因此,关于第2点,因为存储总是部署在任何公共云(AWS/Azure/GCP)级
上
--理论
上
/隐式地指这些
外部
阶段--总是对吗?
浏览 5
提问于2021-09-09
得票数 5
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
GitLab CI/CD 自动化构建与发布实践
硬核干货|使用GitLab CI部署Rancher集群
在Django 2.0中定义Web服务API接口
数据湖和SQL并不矛盾
前端技巧:将你的网站变成移动应用,只需要这七行JSON代码
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券