我需要在AWS上构建一个数据湖，但是我不知道S3和HDFS到底有什么不同。我在网上找到了一些答案，但我仍然不明白真正的区别。
我还需要知道是否有人在AWS中拥有HDFS和S3的数据湖架构。
浏览 2提问于2019-07-11得票数 1
回答已采纳
我们希望确保我们有能力访问我们的数据，并且将其摄入到我们的分析数据湖(一些实时的)中。我正在寻求关于供应商和他们的解决方案我们应该有哪些要求/更喜欢什么的建议？分阶段表-我们是否应该请求供应商将其DB表(作为文件)进行阶段，并将加载到我们(或他们的)数据湖环境中。这将是一个原始数据源分析和数据存档。我关心的是增量更新。
浏览 7提问于2021-10-13得票数 0
回答已采纳
2回答
我正在探索Azure数据湖，我是这个领域的新手。我探索了很多东西，读了很多文章。基本上，我必须从不同来源的数据开发Power仪表板。但是我想使用Azure数据湖，我探索了Azure和Azure ( use )。我绘制了如下的架构图。
我可以在Azure数据湖创建一个数据库，那是我的数据仓库吗？在Azure数据湖(如.csv )中，从原始文件输出数
浏览 1提问于2018-03-15得票数 3
回答已采纳
我们知道Intel CPU在端口0上进行整数除法，FP div / sqrt在不完全流水线的除法执行单元上。我们从、其他发表的文章和实验测试中了解到这一点。(例如)这是复杂的英特尔CPU(不像AMD)解码整数除法为多个uop，例如10 div r32在Skylake上。
AMD CPU同样在一个执行端口上有他们的分隔器，但是我对它们不太了解，也没有一个可以测试的。AMD整数除法只解码几个uop(编写RDX和RAX)，而不是微码
浏览 4提问于2019-10-16得票数 7
回答已采纳
2回答
就在项目主页上，有一张图表显示了Delta在“您现有的数据湖”上运行，但没有提到Spark。在其他地方，它表明德尔塔湖迪兹运行在Spark之上。所以我的问题是，它可以独立于Spark运行吗？例如，我可以在不使用Spark的架构中，使用S3存储桶来设置Delta Lake，以便以Parquet格式进行存储、模式验证等吗？
浏览 2提问于2021-04-20得票数 3
我有一个要在Azure上运行和基准测试的程序。我们已经在亚马逊EC2上测试了这个程序，并希望尝试尽可能接近地镜像硬件。在EC2上，我们访问的数据被存储在固态硬盘上。我们在Azure上的blob中有数据。
浏览 1提问于2016-04-04得票数 0
我在Azure blob存储中有3个文件，我想一个接一个地挑选文件来进行架构验证，我是否可以知道我应该在azure数据工厂中使用哪个正则表达式，以及在架构验证文件应该放置在数据湖中之后
注意:文件名中只有日期会改变
浏览 2提问于2021-08-26得票数 0
一位朋友的公司正在开发一种数据架构，对我们来说，它似乎相当复杂，并且存在一些可伸缩性和成本问题。当前架构- Azure Stack多源通过Azure数据库存储到Azure数据湖Gen2 Azure数据库清理数据并将其存储回Azure数据湖Gen2中:原始的、干净的使用分析服务也会垂直增长--许多服务充当粘合剂，更难使用CostsConvoluted：：Azure Server和Azure Analysis都需要始终打开，表示不需要的费用
提议的建筑-蔚蓝w/三角洲湖
浏览 5提问于2021-12-10得票数 0
无法确定架构，因为没有找到匹配名称模式'的文件。请在OPENROWSET函数中使用WITH子句来定义架构。注意事项：容器中文件的路径是正确的，实际上，我通过右键单击容器中的文件并生成脚本生成了以下查询：
备注
更新
订阅的所有者是其
浏览 1提问于2021-11-07得票数 0
回答已采纳
我是hdinsight的新手。在一个普通的内部集群上，我可以创建一个新的表，并将其放在现有的模式中，或者创建一个新的模式，以便稍后检索它。如果我创建一个hbase表，我可以执行类似的方法。我已经搜索了文档，但没有找到此过程的详细信息。我不想创建sql数据库。
浏览 0提问于2017-05-15得票数 0
1回答
我需要将一些代码转换为英特尔i7-8705G的ISA，但我不知道它使用的是哪个版本的x8664 ISA。我惊讶地看到了几个版本。在英特尔网站上，它只是将其列为64位。
浏览 0提问于2019-07-11得票数 0
回答已采纳
我在数据湖中有很多excel文件。我试图在数据流中读取数据，并使其低于错误。我所有的excel文件都是相同格式的，具有相同的列名。
浏览 3提问于2022-03-01得票数 0
2回答
您认为最好的架构方法是什么? 1.尝试使用c#代码处理流分析中的数据，我知道.Net支持天青流分析，但我认为还为时过早？有这种方法的经验吗? azure流分析是否支持复杂的c#算法?2.将数据存储到azure数据湖并使用数据湖分析来处理数据？
非常感谢您的经验和建议。非常感谢
浏览 0提问于2017-07-05得票数 0
7回答
我听说了数据湖这个新名词。我在谷歌上查到了
数据湖是一个大规模的存储库和处理引擎.数据池提供“任何类型的数据的大量存储、巨大的处理能力和处理几乎无限并发任务或作业的能力”。术语数据湖通常与面向Hadoop的对象存储相关联。在这种情况下，组织的数据首先加载到Hadoop平台，然后将业务分析和数据挖掘工具应用于其驻留在Hadoop的商品计算机集群节点上的数据。我对Hadoop和数据湖有点困惑。两者之间的区别是什么。如果它们是相同的，为什么会出现这个词。或者如何定义数据湖。
浏览 8提问于2016-03-14得票数 16
我在Data Lake中处理大约4000个csv文件的输入文件集，当作业准备时间超过25分钟时，作业失败并出现脚本编译错误
浏览 0提问于2017-04-20得票数 2
1回答
我们有一个要求，我们需要将HAWQ的数据作为restful API提供给许多消费者，如移动应用程序、web应用程序等，并以JSON格式提供web服务安全性；基本上数据即服务从数据湖到不同的应用程序。您可以帮助我们的细节架构或一些相同的指针。我们使用的是Pivotal HD 3.0
浏览 2提问于2015-09-08得票数 1
1回答
我已经在Azure数据湖分析中创建了数据库、架构和表。 txt文件中的数据是有制表符限制的，我需要跳过2个第一行。我想我应该用 内置提取器，但如何添加 参数来提取数据？
浏览 26提问于2018-05-17得票数 2
回答已采纳
我在中有一个外部表：( external_cust_id varchar(30))with serdeproperties('serialization.format'='1')inputformat &
浏览 5提问于2021-08-12得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
