开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

未定义到几列的ODI SCD2

是指在使用Oracle Data Integrator（ODI）工具进行Slowly Changing Dimension Type 2（SCD2）处理时，未明确指定SCD2表中的列数。

SCD2是一种常用的数据仓库技术，用于处理维度表中数据的变化。它通过在维度表中添加新的行来跟踪数据的历史变化，同时保留旧数据的快照。在ODI中，SCD2处理可以通过使用"IKM Oracle Slowly Changing Dimension"（IKM代表Integration Knowledge Module）来实现。

在ODI中，SCD2处理通常需要指定目标表中的列数，以便正确地插入新的行。然而，有时候在设计阶段无法确定维度表中的列数，这时就可以使用未定义到几列的ODI SCD2方法。

未定义到几列的ODI SCD2方法的实现思路是通过动态生成SQL语句来处理维度表的变化。具体步骤如下：

创建一个ODI变量，用于存储目标表的列数。
使用ODI的技术转换（Interface）来处理SCD2逻辑。在技术转换中，可以使用ODI的表达式语言和函数来动态生成SQL语句。
在技术转换中，使用ODI的源表和目标表之间的映射关系来确定需要处理的列。可以使用ODI的条件语句和函数来判断源表和目标表中的数据是否发生了变化。
在技术转换中，使用ODI的变量和函数来动态生成插入新行和更新旧行的SQL语句。可以使用ODI的函数来获取当前时间和源表中的数据。
在技术转换中，使用ODI的变量和函数来动态生成目标表的列名和值。可以使用ODI的函数来获取目标表中的最大主键值。
在技术转换中，使用ODI的变量和函数来动态生成目标表的插入和更新语句。可以使用ODI的函数来获取目标表中的最新版本号。
在技术转换中，使用ODI的变量和函数来动态生成目标表的历史数据查询语句。可以使用ODI的函数来获取目标表中的历史数据。

通过使用未定义到几列的ODI SCD2方法，可以灵活地处理维度表中列数未知的情况，实现数据的历史跟踪和变化处理。在实际应用中，可以根据具体的业务需求和数据模型来调整和优化ODI的配置和设计。

腾讯云提供了一系列的云计算产品和服务，可以帮助用户构建和管理云基础设施、开发和部署应用程序、存储和处理数据等。具体推荐的腾讯云产品和产品介绍链接地址可以根据具体的需求和场景来选择，例如：

云服务器（ECS）：提供可扩展的计算能力，支持多种操作系统和应用程序。详情请参考：https://cloud.tencent.com/product/cvm
云数据库MySQL版（CDB）：提供高可用性和可扩展性的关系型数据库服务。详情请参考：https://cloud.tencent.com/product/cdb_mysql
云对象存储（COS）：提供安全可靠的对象存储服务，适用于存储和处理各种类型的数据。详情请参考：https://cloud.tencent.com/product/cos
人工智能平台（AI Lab）：提供丰富的人工智能算法和工具，支持图像识别、语音识别、自然语言处理等应用。详情请参考：https://cloud.tencent.com/product/ailab

请注意，以上推荐的腾讯云产品仅供参考，具体选择和配置应根据实际需求和情况进行。

相关搜索:无法导航到/，出现未定义的错误将其他工作簿中的几列复制到当前工作簿和当前工作表将范围扩展到未定义的范围读取/写入未定义的unicode字符到文件传递到函数数组的值是未定义的如何将标题从年份中分离出来，当标题连续到由符号“\”分隔的几列中时绑定到redux中的类后未定义调度未定义到ajax/json的序列化对象无法发布到SNS主题，获取未定义的MessageId 将未定义的值复制到选项输入 TypeError:无法读取未定义的React的属性“”state“”，传递到其他组件的状态未定义如何使PHP未定义的常量注意到错误注入到类构造函数中的函数引发未定义如何解决重定向到未定义路由的问题？身份验证后重定向到未定义的链接在Ubuntu上的mingw -“未定义的引用”...到它自己的函数未定义的方法`execute_prepared的Rails回形针到ActiveStorage的迁移 $scope变量未传递到请求标头/未定义的值 Vue SassError:升级到2.5时未定义的变量$white keras到tf.keras的转换:未定义密集层维度？

相关搜索:

页面内容是否对你有帮助？

有帮助

没帮助

相关·内容

SCD的三层

5.5.2 SCD1（缓慢渐变类型1）通过更新维度记录直接覆盖已存在的值。不维护记录的历史。一般用于修改错误的数据，即历史数据就是错误数据，除此没有他用。

02

维度模型数据仓库（四） —— 初始装载

（三）初始装载在数据仓库可以使用前，需要装载历史数据。这些历史数据是导入进数据仓库的第一个数据集合。首次装载被称为初始装载，一般是一次性工作。由最终用户来决定有多少历史数据进入数据仓库。例如，数据仓库使用的开始时间是2015年3月1日，而用户希望装载两年的历史数据，那么应该初始装载2013年3月1日到2015年2月28日之间的源数据。在2015年3月2日装载2015年3月1日的数据，之后周期性地每天装载前一天的数据。在装载事实表前，必须先装载所有的维度表。因为事实表需要维度的代理键。这不仅针对初始装载，也针对定期装载。本篇说明执行初始装载的步骤，包括标识源数据、维度历史的处理、使用SQL和Kettle两种方法开发和测试初始装载过程。设计开发初始装载步骤前需要识别数据仓库的每个事实表和每个维度表用到的并且是可用的源数据，并了解数据源的特性，例如文件类型、记录结构和可访问性等。表（三）- 1里显示的是本示例中销售订单数据仓库需要的源数据的关键信息，包括源数据表、对应的数据仓库目标表等属性。这类表格通常称作数据源对应图，因为它反应了每个从源数据到目标数据的对应关系。生成这个表格的过程叫做数据源映射。在本示例中，客户和产品的源数据直接与其数据仓库里的目标表，customer_dim和product_dim表相对应。另一方面，销售订单事务表是多个数据仓库表的源。

03

在Hive上实现SCD

版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/wzy0623/article/details/51508931

02

基于Hadoop生态圈的数据仓库实践 —— ETL（二）

版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/wzy0623/article/details/51837457

02

HAWQ取代传统数仓实践（三）——初始ETL（Sqoop、HAWQ）

本文通过介绍如何利用Sqoop对不同数据源进行数据导入，详细描述了Sqoop的导入流程、数据源配置、抽取和加载方式，并通过实例介绍了具体操作。

07

Greenplum 实时数据仓库实践（6）——实时数据装载

上一篇详细讲解了如何用Canal和Kafka，将MySQL数据实时全量同步到Greenplum。对照本专题第一篇中图1-1的数据仓库架构，我们已经实现了ETL的实时抽取过程，将数据同步到RDS中。本篇继续介绍如何实现后面的数据装载过程。实现实时数据装载的总体步骤可归纳为：

02

Kettle构建Hadoop ETL实践（六）：数据转换与装载

本篇重点是针对销售订单示例创建并测试数据装载的Kettle作业和转换。在此之前，先简要介绍数据清洗的概念，并说明如何使用Kettle完成常见的数据清洗工作。由于本示例中Kettle在Hadoop上的ETL实现依赖于Hive，所以之后对Hive做一个概括的介绍，包括它的体系结构、工作流程和优化。最后用完整的的Kettle作业演示如何实现销售订单数据仓库的数据转换与装载。

04

一文读懂如何处理缓慢变化的维度(SCD)

长期以来，Kimball方法一直是维度数据建模技术的标准。根据Kimball的说法，“时间概念渗透到数据仓库的每个角落”。这在数据分析的背景下意味着什么？在较高的层面上，现代分析可以被视为随着时间的推移不断变化的数据的聚合。问题在于，不断变化的数据不仅包括新的添加，还包括对先前数据集的更改。

02

维度模型数据仓库（五） —— 定期装载

（四）定期装载初始装载只在开始数据仓库使用前执行一次，然而，必须要按时调度定期执行装载源数据的过程。本篇说明执行定期装载的步骤，包括识别源数据与装载类型、使用SQL和Kettle两种方法开发和测试定期装载过程。从源抽取数据导入数据仓库有两种方式，可以从源把数据抓取出来（拉），也可以请求源把数据发送（推）到数据仓库。影响选择数据抽取方式的一个重要因素是源数据的可用性和数据量，这基于是抽取整个源数据还是仅仅抽取自最后一次抽取以来的变化。考虑以下两个问题：

03

知行教育大数据分析数仓项目_面试题精华版

1.简介一下当前这个项目能够介绍一下你写的项目: 我们这个大数据项目主要是解决了教育行业的一些痛点。首先，受互联网+概念，疫情影响，在线教育，K12教育等发展火热，越来越多的平台机构涌现。但是由于信息的共享利用不充分，导致企业多年积累了大量数据，而因为信息孤岛的问题，一直没有对这些数据进一步挖掘分析，因此也不能给企业的管理决策层提供有效的数据支撑。有鉴于此，我们做的这个教育大数据分析平台项目，将大数据技术应用于教育行业，用擅长分析的OLAP系统为企业经营提供数据支撑。具体的实现思路是，先建立企业的数据仓库，把分散的业务数据预处理，其次根据业务需求从海量的用户行为数据挖掘分析，定制出多维的数据集合，形成数据集市，供各个场景主题使用，最后用BI工具，进行前端展示。用到的技术架构包括：mysql，sqoop，基于CM的Hive，Oozie和FineBi。由于OLTP系统中数据大多存储在mysql，所以我们最终选择Sqoop作为导入导出工具，抽取数据到数仓，并使用基于CM管理的Hive进行数据清洗＋分析，然后sqoop导出到mysql，最后用FineBI展示OLAP的数据分析结果。所以，我们的技术解决了企业的三大痛点。一是数据量太大问题，传统数据库无法满足；二是系统多，数据分散问题，无法解决数据孤岛问题；三是，统计工作量太大，分析难度高问题，无法及时为企业提供数据参考。

02

拉链表

4.3.1.8.1.1 拉链表回顾拉链表就是之前我们讲过的SCD2，它的优点是即满足了反应数据的历史状态，又能在最大程度上节省存储。拉链表的实现需要在原始字段基础上增加两个新字段： start_time(表示该条记录的生命周期开始时间——周期快照时的状态) end_time(该条记录的生命周期结束时间)

02

维度模型数据仓库（六） —— 增加列

（五）进阶技术 1. 增加列数据仓库最常碰到的扩展是给一个已经存在的维度表和事实表添加列。本篇先讨论如果需要增加列，模式会发生怎样的变化。然后进一步说明如何在客户维度和销售订单事实表上添加列，并在新列上应用SCD2。假设需要在客户维度中增加送货地址属性，并在销售订单事实表中增加数量度量值。

03

OushuDB入门（五）——ETL篇

版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/wzy0623/article/details/80281643

02

基于Hadoop生态圈的数据仓库实践 —— 进阶技术（一）

一、增加列数据仓库最常碰到的扩展是给一个已经存在的维度表和事实表添加列。本节说明如何在客户维度表和销售订单事实表上添加列，并在新列上应用SCD2，以及对定时装载脚本所做的修改。假设需要在客户维度中增加送货地址属性，并在销售订单事实表中增加数量度量值。先看一下增加列时模式发生的变化。修改后源数据库模式如下图所示。

03

基于Hadoop生态圈的数据仓库实践 —— 进阶技术（四）

版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/wzy0623/article/details/51943736

02

基于Hadoop生态圈的数据仓库实践 —— 进阶技术（十三）

十三、无事实的事实表本节讨论一种技术，用来处理源数据中没有度量的需求。例如，产品源数据不包含产品数量信息，如果系统需要得到产品的数量，很显然不能简单地从数据仓库中直接得到。这时就要用到无事实的事实表技术。使用此技术可以通过持续跟踪产品的发布来计算产品的数量。可以创建一个只有产品（计什么数）和日期（什么时候计数）维度代理键的事实表。之所以叫做无事实的事实表是因为表本身并没有度量。 1. 产品发布的无事实事实表本小节说明如何实现一个产品发布的无事实事实表，包括新增和初始装载product_count_fact表。下图显示了跟踪产品发布数量的数据仓库模式（只显示与product_count_fact表有关的表）。

02

基于Hadoop生态圈的数据仓库实践 —— 进阶技术

三、维度子集有些需求不需要最细节的数据。例如更想要某个月而不是某天的记录。再比如相对于全部的销售数据，可能对某些特定状态的数据更感兴趣等。这些特定维度包含在从细节维度选择的行中，所以叫维度子集。维度子集比细节维度的数据少，因此更易使用，查询也更快。本节中将准备两个特定维度，它们均取自现有的维度：月份维度（日期维度的子集），Pennsylvania州客户维度（客户维度的子集）。 1. 建立月份维度表执行下面的脚本建立月份维度表。注意月份维度不包含promo_ind列，该列不适用月层次上，因为一个月中可能有多个促销期，而且并不是一个月中的每一天都是促销期。促销标记适用于天这个层次。

01

基于Hadoop生态圈的数据仓库实践 —— 进阶技术（三）

三、维度子集有些需求不需要最细节的数据。例如更想要某个月而不是某天的记录。再比如相对于全部的销售数据，可能对某些特定状态的数据更感兴趣等。这些特定维度包含在从细节维度选择的行中，所以叫维度子集。维度子集比细节维度的数据少，因此更易使用，查询也更快。本节中将准备两个特定维度，它们均取自现有的维度：月份维度（日期维度的子集），Pennsylvania州客户维度（客户维度的子集）。 1. 建立月份维度表执行下面的脚本建立月份维度表。注意月份维度不包含promo_ind列，该列不适用月层次上，因为一个月中可能有多个促销期，而且并不是一个月中的每一天都是促销期。促销标记适用于天这个层次。

02

17track全球物流查询,js混淆暴力破解！！

然后就发现，_0x2ec18e[_0x4f3f(...)] is not a function

02

C++求值顺序

结果可能是0 1或者是1 1. 因为虽然<<是左结合，但是对于那些没有明确规定运算对象的求值顺序的运算符而言，求值顺序就和优先级，以及结合律无关。所以上面的式子是未定义的，即如果表达式指向并且修改了同一个对象，这样的行为就是未定义的

02

【C语言】解决C语言报错：Undefined Reference

Undefined Reference（未定义引用）是C语言编译过程中常见的错误之一，通常在链接阶段出现。当编译器无法找到函数或变量的定义时，会报告未定义引用错误。这种错误会阻止生成可执行文件，影响程序的正常开发和运行。本文将详细介绍Undefined Reference的产生原因，提供多种解决方案，并通过实例代码演示如何有效避免和解决此类错误。

02

维度模型数据仓库（十七） —— 无事实的事实表

（五）进阶技术 12. 无事实的事实表本篇讨论一种技术，用来处理源数据中没有度量的需求。例如，产品源数据不包含产品数量信息，如果系统需要得到产品的数量，很显然不能简单地从数据仓库中直接得到。这时就要用到无事实的事实表技术。使用此技术可以通过持续跟踪产品的发布来计算产品的数量。可以创建一个只有产品（计什么数）和日期（什么时候计数）维度代理键的事实表。之所以叫做无事实的事实表是因为表本身并没有度量。产品发布的无事实事实表本节说明如何实现一个产品发布的无事实事实表，包括新增和初始装载product_count_fact表。图（五）- 12-1显示了跟踪产品发布数量的数据仓库模式（只显示与product_count_fact表有关的表）。

01

a[i] = i++ 到底对不对？

编程中有时会遇到一些有歧义的表达式，比如 a[i] = i++ 。那么 a[i] = i++ 到底对不对呢？

03

「我读」PL 观点 | 未定义行为有利的一面

Rust 官方团队 Ralf Jung 在 PL 观点 (PL Perspectives) 博客[1] 上发表了一篇文章《Undefined Behavior deserves a better reputation》[2] ，文中对UB（未定义行为）有利的一面进行了详细的阐述。通过这篇文章，我们可以对UB 有更深入的理解。

03

C 和 C++ 中的未定义行为

theme: channing-cyan highlight: a11y-dark

01

你可能不知道的字符比较中的“秘密”

有时候，一个简单的字符比较，你可能也会被弄得晕头转向。为什么这样说呢？请看下面这个例子（代码就不贴了，因为后来发现页面不支持这两个字符的显示）。猜测一下，会是什么结果？是1还是0？回答这个问题之前，

07

【JavaScript】解决 JavaScript 语言报错：Uncaught TypeError: Cannot read property ‘X‘ of undefined

在 JavaScript 编程中，“Uncaught TypeError: Cannot read property ‘X’ of undefined” 是一种非常常见的运行时错误。这个错误通常发生在尝试访问一个未定义或未初始化对象的属性时。

05

【JavaScript】解决 JavaScript 语言报错：Uncaught TypeError: Cannot set property ‘X‘ of undefined

在 JavaScript 编程中，“Uncaught TypeError: Cannot set property ‘X’ of undefined” 是一种常见的错误。这种错误通常发生在试图给一个未定义的对象的属性赋值时。了解这种错误的成因和解决方法，对于编写健壮的代码至关重要。

01

小程序登陆失败

小程序根据文档一步一步的操作，结果提示登陆失败。我要弄个提问，结果一直未定义length,只能跑到这来问了。这都是什么鬼？小程序根据文档一步一步的操作，结果提示登陆失败。我要弄个提问，结果一直未定义length,只能跑到这来问了。这都是什么鬼？

00

C语言 | 每日基础（80）

阿一：许多连接器只对对象文件和函数库进行一次扫描, 同时从函数库中提取适合当前未定义函数的模块。所以函数库和对象文件 (以及对象文件之间) 的连接顺序很重要; 通常, 你希望最后搜索函数库。例如, 在 Unix 系统中, 把 -l 参数放在命令行的后部。

JavaScrip最容易犯的十大错误及其避免方法（）

这可能由于许多原因而发生，但常见的是在呈现UI组件时不正确地初始化状态。让我们看一个在真实应用程序中如何发生这种情况的示例。我们将选择React，但不正确初始化的相同原则也适用于Angular，Vue或任何其他框架。

01

【Python】已解决报错：NameError: name ‘xxx‘ is not defined

在Python编程中，NameError 是一种常见的错误，它发生在尝试访问一个未被定义的变量时。

02

three.js 着色器材质之glsl内置函数

郭先生发现在开始学习three.js着色器材质时，我们经常会无从下手，辛苦写下的着色器，也会因莫名的报错而手足无措。原因是着色器材质它涉及到另一种语言--GLSL，只有懂了这个语言，我们才能更好的写出着色器材质，利用好的我们的GPU。

03

【Rust日报】2023-11-29 在Rust的 unsafe 代码中调试UB

ReadMore:https://hyphenos.io/blog/2023/debugging-ub-unsafe-rust-code/

01

头文件保护符

头文件应该含有保护符，即使这些头文件不会被其他头文件包含。编写头文件保护符并不困难，而且如果头文件被包含多次，它可以避免难以理解的编译错误。

01

C++ 链接库顺序导致的符号未定义问题

符号未定义是链接过程中常见的问题，有时候很明显，有时候却很隐晦，比如链接库的顺序导致的符号未定义问题。

00

init,__construct区别以及PHP魔术方法大汇总

init()是框架设置为初始化函数，当然框架内部还是用的___construct()内置函数;如果你是框架开发者，你当然也可以把初始化函数写成__init()，begin(),start()等 PS:php内部的几个魔术方法 PHP把所有以__（两个下划线）开头的类方法当成魔术方法 1)__construct() 这样的方法是构造函数，适合在使用对象前做一些初始化工作（注意：在5.3.3之后的版本与类名相同的方法不在是作为构造函数），注意在子类需要使用父类构造函数需要显示调用parent::__con

05

JavaScript 严格模式(use strict)

"use strict" 指令在 JavaScript 1.8.5 (ECMAScript5) 中新增。

03

维度模型数据仓库（九） —— 角色扮演维度

（五）进阶技术 4. 角色扮演维度当一个事实表多次引用一个维度表时会用到角色扮演维度。例如，一个销售订单有一个是订单日期，还有一个交货日期，这时就需要引用日期维度表两次。本篇将说明两类角色扮演维度的实现，分别是表别名和数据库视图。这两种都使用了MySQL的功能。表别名是在SQL语句里引用维度表多次，每次引用都赋予维度表一个别名。而数据库视图，则是按照事实表需要引用维度表的次数，建立相同数量的视图。修改数据库模式使用清单（五）-4-1里的SQL脚本修改数据库模式。分别给数据仓库里的事实表sales_order_fact和源数据库中订单销售表sales_order增加request_delivery_date_sk和request_delivery_date列。图（五）- 4-1 显示了修改后的模式。

02

基于Hadoop生态圈的数据仓库实践 —— 进阶技术（十四）

版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/wzy0623/article/details/52154160

01

javaScript中is-not-defined,undefined和null的区别

之前没太注意is not defined和undefined有什么区别,每次都是简单的把两者理解为未定义,现在回过头来梳理js基础的时候才发现其中区别还是很鲜明的。先从单纯的字面意思来理解一下（有道词典）：

02

基础知识 | 每日一练（127）

小林：通常, 头文件只包含外部说明。某些情况下, 特别是如果是非标准函数, 当你连接程序时, 需要指定正确的函数库以得到函数的定义。#include 头文件并不能给出定义。

ubuntu gcc编译时对’xxxx’未定义的引用问题

http://www.cnblogs.com/oloroso/p/4688426.html

02

【linux命令讲解大全】191.Linux必知命令之alias和unalias

直接在shell里设定的命令别名，在终端关闭或者系统重新启动后都会失效，如何才能永久有效呢？

01

（八）props 属性

给组件传递未定义的属性，值得是子组件未通过props 接收的属性，长用来定义claa 来修改子组件的class 样式

01

Kettle构建Hadoop ETL实践（八-1）：维度表技术

前面文章中，我们用Kettle工具实现了Hadoop多维数据仓库的基本功能，如使用Sqoop作业项、SQL脚本、Hadoop file output、ORC output等步骤实现ETL过程，使用Oozie、Start作业项定期执行ETL任务等。本篇将继续讨论常见的维度表技术，以最简单的“增加列”开始，继而讨论维度子集、角色扮演维度、层次维度、退化维度、杂项维度、维度合并、分段维度等基本的维度表技术。这些技术都是在实际应用中经常使用的。在说明这些技术的相关概念和使用场景后，我们以销售订单数据仓库为例，给出Kettle实现和测试过程。

03

GCC -O2 踩坑指南：严格别名（Strict Aliasing）与整数环绕（Integer Wrap-around）

GCC 在开启 -O2 编译优化后，会遇到编译器领域的两个著名问题：严格别名（Strict Aliasing）与整数环绕（Integer Wrap-around）。

01

某汽车名企C语言经典面试题，值得一看！

各位，今天给大家带来一道某汽车名企的一道面试题，感觉挺不错的，与大家分享一下，直接上图：

02

PHP中的那些魔术方法（一）

在PHP中，有一堆魔术方法，服务于类和对象。PHP虽然也是纯种的面向对象语言，但是之前的PHP还真不是，所以有一些面向对象的标准实现并不完善，比如重载。但是，我们可以通过一些魔术方法来弥补，例如__call()方法就可以用来实现重载。

02

修复博客主题PHP8兼容和优化深色模式

迁移博客等系统到了这台新的机器上，重新编译了一下运行环境，升级到了PHP8，不过主题有一些不兼容的地方，导致了一些 Warning 的输出

03

扫码

添加站长进交流群

领取专属 10元无门槛券

手把手带您无忧上云

扫码加入开发者社群

相关资讯

热门标签

活动推荐

运营活动

活动名称

广告关闭