1回答
我正在尝试通过Azure数据工厂将数据从Azure数据湖Gen2复制到Azure synapse(SQL数据仓库)。以下是一些详细信息： 源(ADLS)链接服务身份验证类型:服务主体接收器(Synapse)链接服务身份验证类型:托管标识 选定的复制方法: Polybase 在验证时，我得到了这个错误：“源链接服务不应该将身份验证方法作为服务主体对于polybase，我们应该对链接的服务使用相同的身份
浏览 10提问于2020-10-14得票数 0
回答已采纳
我是Azure环境的新手，在尝试将Azure blob存储上的CSV文件中存在的数据复制到Azure数据仓库中的表中时，我正在使用数据工厂。出生日期的格式是"MM/dd/yyyy“，我使用polybase将数据从blob复制到我的azure DW表中。表的列被定义为( int，int，datetime)。如果我在数据工厂中使用"Bulk In
浏览 2提问于2020-02-05得票数 0
我正在尝试使用Polybase将几个CSV文件从Azure Data Lake摄取到Azure Synapse。每个CSV文件中都有一组固定的列，列名称位于第一行。但是，列可以按不同的排序顺序出现。在Polybase中，我需要声明外部表，在设计时我需要知道列的确切顺序，因此我无法创建外部表。是否有其他方法可以摄取CSV文件？
浏览 12提问于2020-05-07得票数 0
回答已采纳
1回答
使用来自源数据仓库的复制活动的数据工厂管道，->暂存blob存储，->接收器数据仓库。禁用Polybase并使用bulk insert工作。"annotations": [] "type": "Microsoft.DataFactory/factories/pipelin
浏览 8提问于2019-08-02得票数 0
1回答
复制活动后继续在数据湖中进行分批
、、、、
我一直在使用Azure数据工厂(polybase)中的复制数据功能将日期复制到Synapse中，并启用了分阶段功能，以便在我们的蔚蓝数据湖中分阶段处理数据。但是，一旦复制到Synapse完成，我们的天蓝色数据湖中的暂存文件就会被删除。
在复制活动完成后，是否有任何方法将暂存的文件保存在数据湖中，而不是删除？
浏览 4提问于2022-04-11得票数 0
我需要将一些数据从一个azure SQl DB实例复制到我的azure数据仓库中。DATABASE_NAME = 'MyAzureSqlDb',) ;Msg 103010，级别16，状态1，第7行，第2行分析错误，列: 13：“关系数据库管理系统有没有其他简单的方法从SqlDb -> SqlDw复制数据？听起来，唯一的选择就是让ETL工具来做这件事。
浏览 0提问于2018-07-23得票数 -1
1回答
我正在尝试通过Azure数据工厂将大量csv文件从blob存储加载到Azure SQL数据仓库。当我处理大量行时，理想的方法是使用PolyBase来批量加载数据。当我将源指向单个文件时，SQL DW PolyBase显示为true，但当我指向所有csv文件时，SQL显示为false。有没有人遇到过这个问题？
浏览 27提问于2018-07-25得票数 0
我只是在浏览一些微软文档，并为数据工程相关的事情做handOn。我对一个场景有几个查询-“将CSV文件从Blob存储复制到Synapse分析(阶段表)： 我读到我们可以通过创建外部表的过程在Synapse中进行直接数据拉取。azure/synapse-analytics/sql-data-warehouse/load-data-wideworldimportersdw) 如果上面是可能的，那么在什么情况下我们使用Azure数据工厂复制或数据
浏览 20提问于2020-08-04得票数 0
1回答
我想在azure数据工厂中使用copy activity.In源代码将数据从一个表复制到另一个表，没有约束，但在接收器上，我在年龄列上有检查约束->检查(age>=18)。我观察到的是，如果在复制活动运行时将数据从源复制到接收器，如果由于检查约束而导致即使有一条记录失败，整个复制活动也会失败，并且即使我提供了跳过和记录错误记录的选项，它也不会将任何行复制到接收器。请给我
浏览 25提问于2020-03-20得票数 0
1回答
原始环境的数据以通过Hive加载的ORC文件的形式存储在Azure数据湖上。我成功地通过数据工厂将所有的数据从原始数据湖复制到测试数据湖。模式/文件夹位置在各自的数据湖上是相同的，我是否遗漏了一些与亚稳态有关的东西，因为它在测试中是不同的？编辑:我想添加一个外部表，使用Polybase在中为Test环境的Data设置一个外部表，它能够很好地读取数据。
浏览 0提问于2018-07-11得票数 1
回答已采纳
我是SQL和Azure数据工厂的新手，我正在尝试使用azure数据工厂将一些数据从一个表导入到同一个azure sql数据库中的另一个表中。为了能够使用接收表中的数据，我需要转换源中的一些行。数据流成功执行：。但是，数据行不会复制到我的接收表中。
我甚至在接收器上尝试了“重新创建”表选项，我可以看到接收器表中的列名正在被覆盖以匹配源表，但仍然没有行被传输到
浏览 5提问于2019-07-11得票数 0
回答已采纳
1回答
仅此而已:是否有一种方法可以将蔚蓝表(带有SAS连接)复制到Microsoft上的数据库？用蟒蛇也有可能吗？我试过SSIS视频演播室2019年，但没有成功
浏览 7提问于2022-11-03得票数 0
回答已采纳
我目前正在使用数据工厂(V2)将一些实体从Dynamics 365复制到Azure Data Lake (Gen1)。 到目前为止，我只是在每个接收器数据集变得相关时单独创建它们。但是有成百上千的潜在实体需要复制，用我当前的流程设置这些实体将非常耗时。 是否有可能(或者有更好的方法)将所有实体复制到数据湖中？
浏览 45提问于2019-05-04得票数 0
我正在使用Azure CosmosDB SQL，我正在寻找一种将数据从CosmosDB发送到Google Big query的方法。我计划使用Kafka或Azure ADF来做同样的事情。有没有什么最佳实践或者工具或者连接器可以用来将数据从CosmosDB发送到Google Bigquery。
浏览 9提问于2020-10-17得票数 0
1回答
我正在尝试从下面提到的URL解析html表的内容 https://www.w3schools.com/html/html_tables.asp 我只想检查一下azure数据工厂中是否有任何活动可用于下载html内容、解析html表内容并将解析后的数据存储在azure blob中。
浏览 15提问于2019-01-22得票数 0
我想要提取所有公共列并在sql表中加载整个数据。有人能告诉我哪些资源可以帮助我的需求吗？
谢谢!
浏览 3提问于2022-06-30得票数 0
在数据工厂中生成了一个文件(使用复制任务，其中源数据集是Sql，而接收器是Azure blob存储)，我正在尝试按照this question的答案将文件复制到AWS S3存储桶中。(或者，如果您可以建议一种更好的方法将文件从Blob存储复制到S3，请这样做。)
浏览 18提问于2021-11-09得票数 0
回答已采纳
我有一个Azure SQL数据库，它有一个存储过程，从这里我试图加入一个驻留在服务器数据库中的表。本质上，我试图查询一个位于前提SQL server数据库中的表.是否有从Azure SQL数据库进行跨服务器查询的任何选项？
编辑:我查看了注释中提到的链接服务器，但似乎链接服务器不适用于Azure、SQL数据库、Singleton和弹性池。它们为Server数据库引擎和Azure SQL托管实例启用。
浏览 0提问于2021-02-25得票数 2
我正在尝试使用Azure数据工厂将csv的所有记录从blob存储传递到SQL的本地数据库。我知道如何使用LookUp和复制活动逐个传递数据，但我不知道如何传递csv的所有记录。
浏览 0提问于2021-09-07得票数 0
在为存储在Azure存储中的外部数据创建PolyBase外部文件格式定义时，我很难将字段终止符指定为unicode字符。我之所以要指定unicode字符，是因为当我使用azure数据工厂在Azure blob中加载数据时，除非它的unicode字符为\u 0081，否则复制活动不支持指定多个字符作为列分隔符
浏览 3提问于2017-07-13得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
