使用Azure Data Analytics运行U-SQL查询以在Azure数据工厂中写入csvs,我如何获取文件上设置的到期值?我有一个Azure Service Fabric应用程序,该应用程序具有将json文件写入azure数据湖的服务。在这个使用SDK的编写过程中,我能够将过期值应用于这些json文件。然后,我继续使用ADF中</
我正在尝试在U-SQL中生成一个动态的FROM子句,这样我们就可以根据之前的查询结果从不同的文件中提取数据。大概是这样的:
@filesToExtract = SELECT whatevergeneratesthepaths from @foo; <-- this query generates a rowsetSELECT * FROM @filesToExtract; <-- here we want to extra
我目前正在使用Azure Data Factory进行ETL作业,最后我想启动一个U-SQL作业。我已经创建了我的datalake.usql脚本,脚本使用的UDF在datalake.usql.cs文件中,与Visual Studio中的U-SQL项目具有相同的结构(这是我开发U-SQL作业并成功运行它的地方在那之后,我将它们都上传到Azure B
这就是我所处的位置。
我在data Lake Store中存储了大量数据。但是,当我想要生成一份报告(可能需要一个月的时间)时,我希望将其系统化到一个表中,以便在查询时反复引用。我应该只使用Data Lake Analytics通过创建U-SQL表()提供的内置数据库特性,还是应该在SQL Data Warehouse中创建这个表?我想我真正想知道的是,这两种情况的优缺点是什么,什