我正在重新发布，因为我的上一个问题由于格式问题而被关闭…
我正在尝试从V2$文件格式中提取数据，一些常用的ETL工具，如Talend，自定义脚本等都不起作用，这些都是不符合odbc的文件。我一直无法找到专门做ETL的脚本或工具。该文件由一个名为Avimark的兽医实践管理系统使用。我正在寻找关于如何做ETL的建议。谢谢&节日快乐！
浏览 3提问于2015-12-21得票数 0
1回答
ETL在各种算法处理方面的局限性
、、、、
我想知道ETL不能解决的问题。正如我们都知道的，我们可以提取数据，进行一些转换和处理，并将转换后的数据存储到数据存储中，在ETL中处理也可能非常复杂。那么，如果除了使用J2EE构建UI应用程序之外，一切都可以使用ETL完成，那么编写Java代码的范围是什么呢？
哪种算法在ETL中运行良好，哪种类型的算法应该在ETL之外运行。在这方面，我更喜欢谈论ETL工具，而不是ETL这个概念，比如Talend是一个自动生成代码(特定于ETL供应商是如何实现的)的工具
浏览 0提问于2015-08-14得票数 0
之后，我将执行一些ETL操作，并在PowerBI中使用该结果。示例：：脚本在早上8点结束。为了构建一些空间，预定的Data运行时间是早上8:30。(FYI:之后，当ETL操作完成时，PowerBI报告会自动刷新)
使用这些工具的： Microsoft Azure Data Factory 或 Microsoft Azure Synapse Analytics
浏览 10提问于2022-07-19得票数 0
回答已采纳
1回答
当我为AWS胶水服务创建ETL端点以从redshift群集卸载数据时，S3作业仅在VPC端点策略设置为“完全访问”时才起作用。Effect": "Allow", "Principal": "*" ]当策略设置为“自定义"arn:aws:s3:::examplebucket/*"],
浏览 14提问于2017-08-30得票数 1
我想用BizTalk来解决一个问题，并希望您能对解决这个问题的最佳方法有一些想法。我正在使用平面文件适配器加载平面文件。此文件包含多个不同类型的记录。类型1记录是父记录。其余类型都使用各种外键链接到父记录。我希望开发一个转换，它将使用通过加载平面文件(包含所有类型的记录)创建的消息，并将其转换为一条消息，该消息是根据外键连接所有记录的结果。因此，结果消息中的每个记录都将包含来自所有记录类型的列，因为消息记录将是连接的结果。* Type1* Type2* Type3* Type4
转换后的消息可能包含如下记
浏览 5提问于2009-04-17得票数 1
1回答
我们有一个ETL项目，其中数据从一个UI应用程序流到一系列应用程序(转换/逻辑)中。 整体的座右铭是在“UI 2”中看到“UI 1”的数据。
浏览 28提问于2020-09-04得票数 0
一直使用aws胶水python shell作业来构建简单的数据etl作业，对于spark作业，只使用过一两次用于在JDBC数据上转换为orc格式或执行星火sql。
浏览 8提问于2020-02-07得票数 6
回答已采纳
如何向我的数据库mySql发送请求，然后检查是否有更改，以便在有更改时可以刷新div？这是我的代码。它只是每隔5秒自动刷新一次加载函数，以便将新的更改应用到表中。我不知道如何向我的数据库发送请求以查看更改。 Loading........ $(function refresh(){
setInterval(function(){refresh()},5000)
浏览 1提问于2014-03-04得票数 0
6回答
我们目前每天使用Datastage ETL从15个表(3个不同的模式)导出包含数据的CSV/文本文件。
我想知道是否有一种更简单的方法来完成这一点，而不是使用ETL。我试过斯克里泰拉。它看起来简单/快速，但它又是一个ETL。请建议..
浏览 18提问于2011-02-24得票数 4
回答已采纳
当我们从我们的应用程序中发送自定义遥测到应用程序洞察时，它是否会被视为ETL过程？
浏览 15提问于2021-06-16得票数 0
回答已采纳
1回答
使用Java自定义宾得勺组件
、、、、
在过去，我有很多使用SSIS的糟糕经验，所以当时我决定使用C#开发自己的ETL。实际上，.Net只执行提取步骤。数据被插入到DB中，其余的ETL由MSSQL查询引擎从txt文件中的普通SQL执行，由.Net在MSSQL中读取和执行。
我的想法是从.Net转到Java，并使用Spoon特性。例如，带有重音的字母被分隔符替换，所以我不能仅仅告诉ETL工具使用分隔符来拆分列，我首先需要验证存在多少分隔符，如果有更多的分隔符，就处理它。所以，我的想法是正常使用Spoon的GUI来构建ETL。然后使用Eclipse通过其SDK进行开
浏览 2提问于2017-08-22得票数 0
回答已采纳
我们目前正在使用DataStage进行ETL处理。我们有很多自定义脚本来转换数据-例如
我们正在用Azure数据工厂取代DataStage。Azure Data有能力使用自定义脚本进行转换吗？如果是的话，请参考.
浏览 3提问于2022-01-15得票数 1
回答已采纳
直接或在将它们保存到etl文件之后。 我已经使用在使用服务结构有状态服务模板时创建的ServiceEventSource类发送了自定义日志消息。我尝试过使用LinqPad，这很不错，但我似乎不能A)找到会话的名称，或者B)在调试我的服务fabric服务时找到任何.etl文件的保存位置。我还尝试使用PerfView来捕获和创建.etl文件。我使用“机器范围”进行聚焦处理，并将etl数据发送到我的桌面。我保留了默认的500mb文件，在Visual Studio诊断事件选项卡中看到消息之前，我没有点击该文件。然
浏览 21提问于2019-06-01得票数 1
回答已采纳
1回答
如果我使用自定义脚本，或者是否有一个工具可以处理preocess，那么可以将数据从SQL推送到MySQL服务器(不需要从MySQL提取数据)。
浏览 1提问于2012-01-24得票数 2
1回答
我在liquibase有张桌子。我想从该表中检索特定"type“的" name”字段，然后将name转换为大写。我如何使用changeset或ServletContextListener来做同样的事情？
浏览 3提问于2014-09-25得票数 0
(optional = false)@Column(name = "ID")问题是无论我使用哪种生成策略，我都会收到错误，因为我有一个插入记录的ETL例如，如果JPA生成器刚刚为一条新记录生成了id49，那么ETL工具就会生成20条ID为50-70的记录，当我创建另一条eclipse链接记录时，生成器会得出50作为已经使用过的id。
浏览 2提问于2016-03-04得票数 0
3回答
这里是我的项目的简化版本：├── dags└── plugins └── operatorsname = "custom_plugin" DumpCsvFileToPostgres helpers = []
破碎的DAG: /root/气流/dags/etl
浏览 1提问于2019-08-06得票数 0
我试图使用OrientDB来映射由多个不同系统管理的服务器之间的关系(有一些重叠)。假设来自每个系统的每个服务器都是一个顶点，是否有一种方法可以在具有相同属性的两个服务器(例如IP地址)之间自动创建边缘？System, Name, IPAlpha, compute-1, 192.168.0.1Beta, storage-1, 192.168.0.1
Beta, storage-
浏览 1提问于2016-06-08得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
腾讯会议活动推荐
腾讯云开发者
