腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
我
可以
将
模型
保
存到
ETL
的
多个
表
中
吗
?
我
有
临时
表
和
终结
表
、
我
有
多个
看起来一样
的
表
,是否
可以
通过更改底层
表
名将一个
模型
保
存到
多个
表
中
? ProductsProducts_Archive 列将是完全相同
的
。
浏览 21
提问于2020-01-16
得票数 0
1
回答
父子包ssis
中
的
事务控制
、
、
、
我
有
父包,其中有用于计数平面文件
的
foreach循环,在其中,
我
在调用(Exec package任务)子包时,一个接一个地处理每个文件,其中
我
有序列容器。在子包序列容器
中
,
我
有
两个流程任务,-one用于从导入模式
表
中
删除数据,并将所有数据从平面文件导入到由父包传递
的
平面文件
中
。-second正在
将
新
的
和
更新
的
行
浏览 1
提问于2015-07-02
得票数 0
1
回答
ETL
包
中
事实
表
的
外键连接方式
有
哪些?
、
、
、
我
是一个SSIS开发人员,这是
我
在设计包时遇到
的
问题。 人们用什么方法来获取事实表表单维度
表
的
外键?假设您
的
staging DB
和
Data Warehouse不在同一台服务器上,那么跨DB
的
简单T-SQL连接就不是一个选项。
我
现在做
的
方法是
将
数据从StagingDB加载到数据仓库
的
临时
表
中
,然后他们在那里执行T-SQL join
浏览 1
提问于2015-05-20
得票数 0
1
回答
如何在不创建新
表
的
情况下更新/插入
表
(
临时
的
或非
临时
的
)
、
背景:
我
的
团队
有
一个更新聚合
表
的
etl
任务。每一行都包含特定日期
的
数据,但是此行
可以
并且将在行日期之后更新(这意味着任何行都
可以
包含来自
多个
作业
的
数据)。这个
ETL
作业上周
有
一天丢失了一些数据,现在
我
需要对其进行回填。 问题:
我
有
丢失
的
数据,而我计划做
的
是
将
浏览 2
提问于2012-05-09
得票数 2
1
回答
ETL
脚本,动态地
将
多个
执行SQL结果集映射到
多个
表
(基于提供
的
sql文件
的
表
名)
、
、
、
、
ETL
脚本,动态地
将
多个
执行sql结果集映射到
多个
表
(基于提供
的
sql文件
的
表
名)
我
有
一个包含sql文件
的
源文件夹(
我
也
可以
将其作为存储过程)。
我
知道如何在foreach容器
中
循环
和
执行sql任务。现在
我
遇到
的
问题是,
我
需要使用每个sql查询
的</
浏览 0
提问于2016-12-17
得票数 0
1
回答
如何在每次
ETL
运行时不截断/加载
的
情况下使用SQL编写基本
的
ETL
?
、
、
、
、
我
有
一个OLTP数据库,
我
正在使用SQL (
ETL
)加载到另一个数据库
中
。为此,在第二个数据库数据库
中
,
我
基于事实
和
维度创建了星型模式
模型
。技术: MS-SQL维度:客户、客户、座席 注意:源系统
中
没有日期修改字段,源系统
中
可以
删除行。
我
有
一个代理作业,它每15分钟运行一次,以执行以下操作:对于每个
表
,
我<
浏览 3
提问于2021-11-22
得票数 0
1
回答
Oracle两个列表分区
表
之间
的
分区
、
、
我
有
一个
ETL
过程,它将数据加载到目标
表
A
中
。我们创建了另一个
表
B,它在结构上与目标表相同,这个
表
被报告小组访问以生成报告。这样做是为了最小化报表生成
的
停机时间。这样,报表总是访问最新
的
数据。目标
表
B是在客户端ID上分区
的
列表分区
表
。
ETL
团队在
表
A
中
为各自分区
中
的
每个客户端加载数据。
浏览 0
提问于2021-04-07
得票数 0
2
回答
索引是否会对OWB
中
的
加载性能产生负面影响
、
、
我
经常在
我
的
OWB映射中将数据暂
存到
表
中
,因为它提高了性能,而不仅仅是等到映射结束才
将
数据放入
表
中
。
我
在这些
临时
表
上设置了一些索引,以便与我
的
JOINERs
中
的
WHERE子句保持一致,以尝试进一步提高速度。然而,
我
是在搬起石头砸自己
的
脚
吗
?这些中间
表
上<em
浏览 2
提问于2011-12-07
得票数 0
回答已采纳
3
回答
Oracle 10g
临时
表
、
、
、
、
我
正在尝试
将
存储过程中使用
的
永久
表
转换为全局
临时
表
。
我
已经查看了这些永久
表
上
的
统计数据,有些
表
中有数千万行数据,如果G
的
大小为10 GB,则按顺序排列。Oracle声明全局
临时
表
将在用户
的
临时
表
空间中创建(
我
假设这是TEMP)。这方面的问题是,
临时
表
空间很小
浏览 7
提问于2009-12-09
得票数 1
回答已采纳
1
回答
在
ETL
的
转换步骤中使用多少
临时
表
/
临时
表
?
、
、
、
我
的
第一个想法是首先将数据从S3加载到一个
临时
表
中
,应用必要
的
转换,然后插入到目标
表
中
。所有的
表
都有相同
的
列,并且都在Redshift
中
。 然而,使用
多个
更新会对性能造成多大
的
影响?在
多个
临时
表
之间拆分更新和筛选以进行日常批处理会不会更好。代替S3 -> TEMP -> FINAL,流程
将<
浏览 30
提问于2021-04-01
得票数 0
回答已采纳
1
回答
将
数据从BQ移动到
、
、
有人能帮助我理解如何
将
数据从BQ (OLAP)转移到(OLTP)
吗
?这将是一个一次性
的
回填过程,然后每个月重复一次。在进入细节之前,
我
想指出
的
是,我们还没有准备好为CloudSQL或BigData投资,所以我们决定,由于公共站点将从relationalDB读取处理过
的
数据,所以我们决定
可以
将
BQ
中
存在
的
分析数据转移到
我
想到两种方法: Microservice
可以
有</e
浏览 5
提问于2020-10-09
得票数 0
1
回答
Oracle
中
临时
表
的
优点
、
我
试着找出使用
临时
表
对Oracle数据库
有
哪些性能影响。我们希望在
ETL
过程中使用这些
表
来保存
临时
结果。此时,我们使用物理
表
实现此目的,并在
ETL
过程开始时截断该
表
。
我
知道截断过程非常昂贵,因此
我
想如果使用
临时
表
会更好。 在这种情况下,如果使用
临时
表
可以
提高性能,你们中有谁有过经验
吗<
浏览 1
提问于2016-05-23
得票数 1
2
回答
SSIS数据源
的
多行UDF或存储过程
、
、
我们正在创建一个具有复杂代码
的
SSIS数据源。
我
读过MultiLine
表
函数很慢。当数据从一个地方流到另一个地方时,利用存储过程会产生更快
的
结果
吗
?
表
值函数非常慢
浏览 0
提问于2018-12-27
得票数 0
回答已采纳
1
回答
SSIS是否在到达ADO NET目标之前
将
文本文件读取到
临时
表
?
、
我
有
一个上传到tsql
表
的
文本文件。这很简单,但由于一些不一致,
我
需要将此文件上传到#tempTable或@tableVariable,在那里进行清理,然后将其上传到物理
表
。所以从本质上讲,
我
有
一个Flat File Source,它读取出现不一致
的
txt文件,并将其上传到ADO NET Destination
中
的
表
。如果目标
表
中
的</e
浏览 5
提问于2015-08-25
得票数 1
1
回答
Redshift
中
的
语法错误日志
表
、
、
、
、
我
正在编写一个C#例程来运行
ETL
代码,
将
数据从我们
的
临时
表
加载到数据仓库。我们
有
许多SQL代码来为
多个
表
执行
ETL
。
我
不想将那些冗长
的
代码复制到C#例程
中
,而是直接在C#
中
运行这些完整
的
SQL文件。 这里要关心
的
是,如果其中一个sql文件
中
存在错误,
我
如何跟踪特定
的
浏览 3
提问于2016-11-08
得票数 0
2
回答
使“计算
临时
表
中
的
中间结果”SQL模式适用于LINQ?
、
、
为了使这些页面更快,我们
的
技巧是识别不同
的
查询,这些查询提取相同
的
底层数据。然后,我们从这些底层
表
中计算中间结果,
将
这些结果缓
存到
临时
表
中
,然后将该
临时
表
连接到其他
表
以计算最
终结
果。当然,
我
可以
调用AsEnumerable()来物化中间查询结果,但是如果中间结果很大,那么
将
结果传入
和
传出SQL
浏览 2
提问于2011-11-24
得票数 4
2
回答
如何在Laravel
中
仅在管理员验证后保存更新
的
数据
、
我
有
两个用户:一个管理员
和
另一个简单
的
用户。当用户想要编辑数据时,它会向管理员请求“等待验证”;只有在验证之后,数据才会更新。这是
表
的
状态列
的
图像: 用户编辑数据时,状态为4,校验时必须为5,请问新数据未校验时如何保存旧数据,校验后如何替换旧数据?
浏览 0
提问于2018-11-13
得票数 0
1
回答
mysql查询会将
临时
表
写入磁盘
吗
?它到底在写什么?
我
正在优化一个mysql查询,该查询
将
两个
表
连接在一起,并具有一些where子句
和
一个order by。
我
真的很想知道这个
临时
表</em
浏览 0
提问于2013-04-10
得票数 1
2
回答
使用雪花管道
将
数据加载到snowflake时
的
数据聚合
、
我
正在评估雪花
的
用例报告。
我
正在考虑
ETL
的
雪管。数据是从S3获取
的
。S3
中
的
数据包含定期捕获
的
用户会话
的
相关信息。在Snowflake
中
,
我
希望存储这些数据聚合。根据文档,snowflake只支持基本
的
转换,在
将
数据从S3 staging复制到snowflake
中
的
表
的
过程
浏览 6
提问于2021-01-07
得票数 1
1
回答
Spring批处理REST服务
的
中间结果存储
、
、
我
想从REST服务
中
获取一个文档,使用Spring Batch处理,然后发送到其他REST服务,而不将任何内容保
存到
任何数据库
中
。考虑到每个Step都需要它
的
ItemReader
和
ItemWriter,
我
想我需要实现一个从输入服务下载文档
的
ItemReader,一个以某种方式
将
中间结果存储在内存
中
的
ItemWriter,然后一个从内存
中
读取这些结果用于下一步
的
It
浏览 3
提问于2018-11-11
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
小白学习大数据测试之ETL
Kettle spoon工具实战分享
企业级增量抽取数据模型
ETL-KETTLE工具使用
我对传统数据仓库粗浅的理解
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券