如果有人能给我解释一下是什么让Apache Pig成为ETL工具，以及它的反面是什么，我会很高兴。我知道ETL意味着提取、转换和加载数据，Pig就是这么做的，但其他平台也是如此，比如Flink，Spark和R(你获取数据，执行一些操作，然后加载到其他地方)，我找不到任何信息说这些工具也被认为是ETL也许我没有完全理解ETL是什么意思？谢谢。
浏览 2提问于2015-03-11得票数 0
一直使用aws胶水python shell作业来构建简单的数据etl作业，对于spark作业，只使用过一两次用于在JDBC数据上转换为orc格式或执行星火sql。
浏览 8提问于2020-02-07得票数 6
回答已采纳
6回答
我们目前每天使用Datastage ETL从15个表(3个不同的模式)导出包含数据的CSV/文本文件。
我想知道是否有一种更简单的方法来完成这一点，而不是使用ETL。我试过斯克里泰拉。它看起来简单/快速，但它又是一个ETL。请建议..
浏览 18提问于2011-02-24得票数 4
回答已采纳
2回答
我是商业智能的新手，我将开发一个java应用程序。我想要从不同的来源integrate数据，这样我就可以将它们存储在数据库中。我是否可以在我的应用程序中添加一个或多个ETLs来实现这个目的?？
浏览 2提问于2016-02-03得票数 2
我正在重新发布，因为我的上一个问题由于格式问题而被关闭…
我正在尝试从V2$文件格式中提取数据，一些常用的ETL工具，如Talend，自定义脚本等都不起作用，这些都是不符合odbc的文件。我一直无法找到专门做ETL的脚本或工具。该文件由一个名为Avimark的兽医实践管理系统使用。我正在寻找关于如何做ETL的建议。谢谢&节日快乐！
浏览 3提问于2015-12-21得票数 0
我是ODI 11g的新手，我使用ODI 11g进行开发。到目前为止一切都很好。但是，我想从最终表格中删除最近三个月(etl_date)。我如何使用ODI做到这一点呢？DELETE FROM MYTABLE
WHERE ETL_DATE IN (TO_DATE(#ETL_DATE, 'DDMMYYYY'), ADD_MONTHS(TO_DATE(#ETL_DATE,'DDMMYYYY'), -1), ADD_MONTHS(TO_DATE(#ETL_D
浏览 0提问于2018-04-09得票数 0
我们有一个同时从事GoodData ETL工作的团队，并希望在将这些ETL发布到生产之前遵循代码审查的传统软件开发实践。我们试图将这些ETL保存在基于Git的版本控制系统中，并使用pull请求进行代码审查，但不幸的是，存储ETL的那些XML文件并不那么人性化。
有什么建议如何有效地审查其他人对ETL的更改吗？CloudConnect是否为此提供了任何工具，或者可能提供了一些特殊的比较查看器，可以更好地解析这些ETL？
浏览 3提问于2016-01-13得票数 1
比方说，我配置了一个开发人员端点，并且每天运行一个作业30分钟。定价是每天30分钟，还是包括AWS Glue - Developer端点的空闲时间。尤瓦
浏览 2提问于2018-01-12得票数 1
回答已采纳
2回答
谁能告诉我如何在事务下向SQL Server大容量插入数据？我有一个程序将数据从一个文件导入到数据库的多个表中。我使用SQL Server和Entity Framework将这些记录导入到事务下的数据库中。请告诉我这是一个好的跟随方式吗？该文件包含许多列。少数列属于父表，其余列属于子表。那么我们如何使用SqlBulkCopy来映射它们呢？
有10个子表。我需要先将数据从文件插入到子表中。如果由于某种原因在子表中插入记录导致错误，我将不得不回滚事务并继续使用文件中另一条记
浏览 0提问于2014-01-25得票数 3
但我有一个问题:当我的记录与我的供应商注册，一切都很好，当在WPA打开.etl文件，我可以查看尽可能多的信息。但是如果我在没有注册的情况下收集事件，当我在WPA中打开.etl文件时，一切都不是人类友好的。那么，我必须在开始收集事件之前注册我的提供程序吗？有没有一种方法可以尽可能地查看.etl (收集时不先注册我的提供商)？下面的图片可能会让我说的更容易理解。
浏览 3提问于2017-03-29得票数 0
1回答
我正在寻找源代码和所有相关的组件/材料，以审查技术ETL过程之间的源数据库和数据仓库，以增加我的技术商业智能知识。在哪里可以找到这些类型的源代码和数据库？我可以找到用于冒险性工作OLTP及其数据仓库的数据库，但找不到ETL进程的源代码。
浏览 0提问于2012-03-16得票数 2
回答已采纳
我需要开发一个比较价格与symfony，ETL，ESB ...application导入CSV文件，并在数据库中存储内容(MySQL)的应用程序。我开始阅读Talend (一种开源ETL)，但我在我的网站上找不到好的教程来教授这个ETL的实现。所以你有什么想法。
谢谢你。
浏览 3提问于2015-03-27得票数 0
需要建议，请参见下面的场景我是SSIS的新手，所以需要建议。需要在SQL Server中找到解决方案，而不是<e
浏览 0提问于2013-03-07得票数 1
回答已采纳
3回答
ETL工艺设计与性能
、、、
我正在为一个使用C#的数据仓库开发一个ETL过程，它既支持Server也支持Oracle。在开发期间，我一直在编写将数据从一个数据库同步到另一个数据库的存储过程。我的团队负责人希望使用C#代码来执行ETL。我们有代码生成，当数据库定义更改时自动生成新的类。这也是我决定不使用犀牛ETL的原因。当数据库定义更改时，需要同时维护to和PL/SQL脚本
优点：
更容易开发ETL
浏览 1提问于2010-12-02得票数 6
回答已采纳
目前，我们已经开发了很多ETL，底层的表名和列名将会改变。这将影响我们已经开发的ETL。在这方面的任何帮助都将非常感谢。
浏览 0提问于2011-05-11得票数 2
回答已采纳
这个产品/web应用程序主要是在Spring和hibernate中开发的。
现在，当我将产品卖给一家公司时，他们正在寻找批量加载工具来加载用户和公司。或者我应该选择像Pentaho或informatica这样的ETL工具？在这种情况下，我需要复制我的编码和业务逻辑实现，以使用Pentaho或informatica。
浏览 0提问于2014-04-09得票数 6
回答已采纳
何时使用SSIS包而不是存储过程？我们可以通过SSIS实现的功能也可以通过store procedure实现
浏览 0提问于2015-11-24得票数 0
1回答
我正在开发一个ETL，它的提取步骤必须从表中读取数据。如果我的用户拥有对表的读取权限，那么正确的验证方法是什么？
浏览 0提问于2014-11-24得票数 4
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
