1回答
如何使用用户分配的标识从数据库访问ADLS容器
azure、azure-databricks、azure-managed-identity、azure-data-lake-gen2
我已经成功地在Databricks中挂载了带有服务主体的ADLS，并且能够对数据进行必要的转换。
现在，我正在使用用户分配的托管身份来避免在代码中保留秘密。
浏览 6提问于2022-03-08得票数 0
1回答
如果datamart是数据仓库的逻辑分区，那么它在datalake中对应的是什么？
bigdata、etl、snowflake-schema
如果datamart是数据仓库的逻辑分区，那么它在datalake中对应的是什么？另外，在datalake中是否有类似星形或雪花模式的设计？
浏览 0提问于2018-04-02得票数 0
2回答
如何将Azure数据湖中的数据推送到SSAS ( Azure分析服务)？有可能吗？
azure-data-lake、azure-analysis-services
Azure数据湖是我的数据源。我想将数据从azure数据湖推送到Azure分析服务(SSAS)。我怎么能做到这一点？
浏览 1提问于2016-12-02得票数 1
1回答
如何在三角洲湖进行createOrReplaceTempView？
apache-spark-sql、delta-lake
我想使用我的天蓝色数据湖Gen2上的蜂巢Metastore中的达美湖表作为我公司湖房的基础。
以前，我使用了“常规”蜂巢目录表。我会将数据从拼图加载到火花数据，并使用df.CreateOrReplaceTempView("TableName")创建一个临时表，这样我就可以使用spark或% SQL魔术来执行ETL了。但是，如果我不想执行这个saveAsTable操作并写入我的数据湖，该怎么办？使用SQL执行ETL的
浏览 6提问于2022-09-08得票数 0
回答已采纳
3回答
AWS湖形成: s3://abc/的湖形成许可不足
amazon-web-services、amazon-s3、aws-lake-formation
我正在尝试从AWS湖编队控制台设置一个数据集。我按照下面的资源进行同样的操作：对s3的湖形成许可不足：
有人能帮上忙吗
浏览 0提问于2020-09-15得票数 10
2回答
使用数据湖分析复制数据- U-SQL
azure、azure-data-lake、u-sql
我需要从ADLS(Azure数据湖存储)源复制到接收器ADLS，但只复制最新的文件。每小时，到达源的一个.csv文件，这个文件必须被复制到宿数据湖。任务:复制file_01.csv以接收数据湖。event: Hour2 - file_02.csv到达源。任务:复制file_02.csv以接收数据湖。诸若此类。在那里我会提取系统的日期和时间(我不知道怎么做)。选择最新的文件，并将该文件复制到接收器数据湖</em
浏览 2提问于2018-04-23得票数 0
2回答
Azure应用程序无法访问数据湖存储中新创建的文件
azure、azure-data-lake、u-sql
我编写了控制台应用程序来监控/分析Azure数据湖存储中的文件。我在Azure活动目录中创建了一个应用程序来访问azure资源。我遵循了给出的所有步骤，让能够访问蔚蓝数据湖存储上的应用程序。我提供了对父目录和数据湖存储的所有幼童文件夹/文件的访问权限。我正在为我提供访问的文件获取所有这些信息。但是
浏览 1提问于2018-01-30得票数 0
4回答
将表从azure SQL数据库迁移到Azure数据湖
azure、ssis、azure-data-lake
我想要完全迁移所有的表从azure SQL数据库到azure数据湖。我怎么能做到这一点。请给我一些场景，这样我就可以完全搬到天蓝色的数据湖。提前谢谢。
我也可以通过SSIS做到这一点吗？
浏览 1提问于2016-10-21得票数 2
7回答
Hadoop Vs数据湖
hadoop、data-warehouse、data-lake
我听说了数据湖这个新名词。我在谷歌上查到了
数据湖是一个大规模的存储库和处理引擎.数据池提供“任何类型的数据的大量存储、巨大的处理能力和处理几乎无限并发任务或作业的能力”。术语数据湖通常与面向Hadoop的对象存储相关联。在这种情况下，组织的数据首先加载到Hadoop平台，然后将业务分析和数据挖掘工具应用于其驻留在Hadoop的商品计算机集群节点上的数据。我对Hadoop和数据<
浏览 8提问于2016-03-14得票数 16
2回答
从一个DataLake到另一个DataLake的Azure数据工厂复制
azure-data-lake、azure-data-factory-2
我需要建立一个能够从一个DataLake复制到另一个的管道，但是到目前为止，通过谷歌搜索，我找不到任何与之相关的东西，有人能给我指出正确的方向吗？非常感谢。
浏览 16提问于2018-02-21得票数 0
1回答
如何在地球引擎中找到一个区域(以多边形为界)内的所有湖泊？
google-earth、google-earth-engine
我使用了陆地卫星5号和7号数据。我创建了以下代码：我该怎么做呢？
浏览 4提问于2019-06-19得票数 0
2回答
如果我删除Azure数据湖分析帐户，它会删除它的默认数据源吗？
azure、azure-data-lake
我对Azure相当陌生，我只是尝试Azure数据湖分析。为了测试目的，我创建了一个新的Azure帐户，并且希望现在就删除它，但是在安装过程中，我使用了一个现有的Azure数据湖存储(ADLS)帐户作为默认的存储帐户。我现在知道我可能应该添加现有的ADLS作为关联的数据存储。
浏览 3提问于2017-08-18得票数 0
1回答
将Azure应用程序Insight日志文件导出到Azure数据湖存储
azure、azure-application-insights、azure-data-lake
我可以通过azure应用程序洞察力跟踪我的应用程序日志文件，并导出xls工作表( )，但是为了备份跟踪目的，我需要将所有日志文件存储到蔚蓝数据湖存储中。我需要在我的应用程序上调试这个问题，当我面对issues.but时，我得到了和继续导出sql，blob存储的链接，我不想要不必要的存储来将我的数据存储在蔚蓝资源中。因此，如果有任何方式连接应用程序洞察力到Azure数据湖通过连接器或plugins.IF，its，请您分享我的链接。
谢谢。。
浏览 2提问于2017-05-30得票数 5
2回答
如何为Azure数据工厂中的文件位置(通配符文件路径)提供动态表达式路径？
azure、azure-data-factory、azure-data-lake、azure-data-flow
我得到了我的数据湖中的每个数据单excel文件。我的容器名是数据湖中的“odoo”。Excel文件存储在名为“odoo”的文件夹中，下面是文件的名称我正在使用数据流，我想使用通配符路径获取日常文件。下面是我试图给出的动态表达，但没有成功。/odoo/@concat('report_', string(formatDateTime(utcNow(), 'yyyy-MM-dd')), '
浏览 3提问于2022-02-28得票数 0
回答已采纳
1回答
Azure Data Lake - .avro to SQL
json、avro、azure-data-lake、u-sql、azure-eventhub-capture
我正在使用Event Hub上的capture函数将数据推送到数据湖中。这是保存在湖中的.avro文件。令人沮丧的是，来自API的数据最初是JSON格式的，但从azure上的web应用程序返回为.avro。
浏览 12提问于2018-11-12得票数 0
1回答
数据湖如何存储数据和格式？
sql、image、nosql、azure-data-lake、data-lake
我听说数据湖可以存储任何类型的数据:关系型，NoSql，图片/图像，Adobe，Excel。如何以无SQL格式或二叉树存储数据？还是把它像普通硬盘一样保存？如果是这样的话，他们为什么不直接称之为存储，而不是数据湖呢？我正在试图找到“数据湖”的确切存储机制。
浏览 0提问于2018-09-09得票数 2
回答已采纳
2回答
从数据湖中检索数据到分析系统
hadoop、bigdata、analytical
我们在Hadoop文件系统中创建了一个新的数据湖。数据以ORC的形式存储。目前分析系统直接连接到数据湖来读取这些ORC文件。
有没有办法在数据湖和分析系统之间创建一个中间层来服务数据？
浏览 16提问于2018-10-04得票数 0
1回答
数据存档与数据摄入
bigdata、erp
从大数据或数据湖的角度来看，数据归档和数据摄入到底有什么区别？我推测，在数据湖的上下文中，“摄入”是一个恰当的词，但是如果我们在那里使用'Archival‘而不是’摄入‘，那么我们所缺少的是什么。我认为使用“摄入”而不是“归档”的几个原因是
谢谢
浏览 1提问于2018-09-28得票数 0
2回答
如何处理数据湖vs数据仓库中的历史化数据？
data-warehouse、data-lake
在传统数据仓库中实现数据历史化是可能的(甚至是核心功能)。随着时间的推移，数据将被添加到数据仓库中，并且可以在数据中及时移动。 如果我只想使用数据湖，并为业务用户提供数据历史化，这可能吗？
浏览 36提问于2020-11-30得票数 0
回答已采纳
1回答
Azure Databricks DBFS数据集存储在哪里？
azure、databricks、azure-databricks
我将数据上传到Azure Databricks，可以看到DBFS列表中有数据集，但在Databricks所属的资源组中找不到任何数据集。
数据集存储在哪里？此外，如果我创建达美湖，如何从Azure数据工厂调用Delta湖？我看不出三角洲湖存放在哪里。
浏览 11提问于2022-04-14得票数 0
回答已采纳
云服务器
对象存储
ICP备案
云点播
语音识别
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号