7回答
我听说了数据湖这个新名词。我在谷歌上查到了
数据湖是一个大规模的存储库和处理引擎.数据池提供“任何类型的数据的大量存储、巨大的处理能力和处理几乎无限并发任务或作业的能力”。术语数据湖通常与面向Hadoop的对象存储相关联。在这种情况下，组织的数据首先加载到Hadoop平台，然后将业务分析和数据</em
浏览 8提问于2016-03-14得票数 16
2回答
我们在Hadoop文件系统中创建了一个新的数据湖。数据以ORC的形式存储。目前分析系统直接连接到数据湖来读取这些ORC文件。
有没有办法在数据湖和分析系统之间创建一个中间层来服务数据？
浏览 16提问于2018-10-04得票数 0
在传统数据仓库中实现数据历史化是可能的(甚至是核心功能)。随着时间的推移，数据将被添加到数据仓库中，并且可以在数据中及时移动。 如果我只想使用数据湖，并为业务用户提供数据历史化，这可能吗？如果是，一个可能的方法是什么样子的？
浏览 36提问于2020-11-30得票数 0
回答已采纳
2回答
从头开始建数据湖
、、
我正试图从零开始构建一个“数据湖”。我理解数据湖是如何工作的，以及它的用途；它遍布互联网。但是，当问题出现时，如何从头开始建立一个，就没有来源了。我想知道如果：
我知道如何运行Hadoop并将数据导入Hadoop。我想在前提数据湖上建立一个示例来演示我的经理。任何帮助都是非常感谢的。
浏览 1提问于2019-02-27得票数 2
回答已采纳
我需要在AWS上构建一个数据湖，但是我不知道S3和HDFS到底有什么不同。我在网上找到了一些答案，但我仍然不明白真正的区别。
我还需要知道是否有人在AWS中拥有HDFS和S3的数据湖架构。
浏览 2提问于2019-07-11得票数 1
回答已采纳
/tests/.my_test_env
如何构建Docker镜像来模拟Azure数据湖(第2代)？我使用Python3SDK与数据湖进行交互，文档在这里-- 。
浏览 3提问于2020-08-27得票数 2
希望在订阅/帐户中注册所有数据源，但是缺少"Azure (多个源)“选项。其他来源(HIVE、SAP、AWS S3)也是如此。
浏览 2提问于2021-01-19得票数 1
回答已采纳
对于像我这样的用户来说，这似乎是一种困惑，因为azure blob存储和蔚蓝数据湖存储有什么主要区别，在哪个用户情况下，azure blob存储比蔚蓝数据湖存储更适合，反之亦然？
谢谢。
浏览 9提问于2020-04-05得票数 4
回答已采纳
我需要建立一个能够从一个DataLake复制到另一个的管道，但是到目前为止，通过谷歌搜索，我找不到任何与之相关的东西，有人能给我指出正确的方向吗？非常感谢。
浏览 16提问于2018-02-21得票数 0
1回答
我正在尝试构建一个Azure Data管道，它从Azure数据湖中获取数据并对其进行转换。
在我看来，这其中的权衡并不明显。但第二个选
浏览 0提问于2019-04-17得票数 1
回答已采纳
1回答
我有一个带有blob容器的ADLS存储帐户。我已经成功地在Databricks中挂载了带有服务主体的ADLS，并且能够对数据进行必要的转换。请提出一个工作解决方案或任何有益<
浏览 6提问于2022-03-08得票数 0
我正在使用Azure数据工厂复制活动将数据从Oracle Table复制到Azure data Lake。 只要我的日期格式是DD-MM-YYYY，azure就会把它们转换成DATE_TIME格式。有没有办法保留与源文件相同的格式 如果复制活动是针对单个表的，我可以对特定列的格式进行硬编码。在我的场景中，我尝试使用相同的复制活动复制多个表，因此无法更新模式
浏览 18提问于2019-09-04得票数 0
回答已采纳
我对Azure相当陌生，我只是尝试Azure数据湖分析。为了测试目的，我创建了一个新的Azure帐户，并且希望现在就删除它，但是在安装过程中，我使用了一个现有的Azure数据湖存储(ADLS)帐户作为默认的存储帐户。我现在知道我可能应该添加现有的ADLS作为关联的数据存储。我假设我现在可以安全地删除Azure帐户，而不会影响底层的默认存储帐户，但我想在执行此操作之前检查一下，因为如果删除现有的ADLS，将是一个巨大的
浏览 3提问于2017-08-18得票数 0
我使用Azure来构建我的Java项目。我需要认证一些Azure服务如下：
请给我建议，非常感谢！
浏览 2提问于2021-01-14得票数 0
回答已采纳
我有一个简单的工作，从pubsub读取历史数据与日期限制例如，我想读取消息从日期2020-04-10到2020-04-20，然后将消息保存在google存储桶中的单个文件中的每一天
浏览 4提问于2020-06-10得票数 0
我是天蓝色门户的初学者，我在前端侧(角2)和后端侧(Asp.net核心)配置了azure应用程序洞察力。我可以通过azure应用程序洞察力跟踪我的应用程序日志文件，并导出xls工作表( )，但是为了备份跟踪目的，我需要将所有日志文件存储到蔚蓝数据湖存储中。我需要在我的应用程序上调试这个问题，当我面对issues.but时，我得到了和继续导出sql，blob存储的链接，我不想要不必要的存储来将我的数据存储在蔚蓝资源中。因此，如果有任何
浏览 2提问于2017-05-30得票数 5
1回答
数据湖如何存储数据和格式？
、、、、
我听说数据湖可以存储任何类型的数据:关系型，NoSql，图片/图像，Adobe，Excel。如何以无SQL格式或二叉树存储数据？还是把它像普通硬盘一样保存？如果是这样的话，他们为什么不直接称之为存储，而不是数据湖呢？我正在试图找到“数据湖”的确切存储机制。
浏览 0提问于2018-09-09得票数 2
回答已采纳
2回答
我有以下构建数据湖的用例(例如在Azure中)：
我的组织处理濒临破产的公司。一旦一家公司破产，它需要把他们所有的数据交给我们，包括结构化数据(例如CSV)以及半结构化和非结构化数据(例如PDF、Word文档、图像、JSON、.txt文件等)。在这里拥有一个数据湖会有所帮助，因为数据量可能很大，而且不可预测，Azure data看起来是一个相对低成本和可伸缩的存储
浏览 1提问于2020-01-07得票数 0
1回答
从大数据或数据湖的角度来看，数据归档和数据摄入到底有什么区别？我推测，在数据湖的上下文中，“摄入”是一个恰当的词，但是如果我们在那里使用'Archival‘而不是’摄入‘，那么我们所缺少的是什么。我认为使用“摄入”而不是“归档”的几个原因是
如果有多个源系统(如果是从源到目标的一对一迁移，则更像是一种存档
浏览 1提问于2018-09-28得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
