6回答
如何搭建Hadoop处理环境？
、、、、
Apache Hadoop 是用于开发在分布式计算环境中执行数据处理应用程序的框架。旨在从单个服务器提供存储和计算资源的方式扩展到数千台机器。Apache Hadoop的核心部分由存储部分（Hadoop分布式文件系统）及其数据处理部分（MapReduce）组成。Hadoop将文件分割成大块，并将它们分发到群集中的节点上。那么如何搭建Hadoop处理环境？
浏览 2027提问于2018-10-24
我已经开始学习Hadoop了，我知道HDFS提供了分布式存储系统，Mapreduce是用于data processing.Now的，我正在阅读Hadoop生态系统。从Hive的定义来看，它是一个构建在hadoop上的数据仓库，用于提供类似SQL的接口。
我的问题是，当hadoop提供容错、分布式的HDFS时，为什么要使用hive？hive会取代HDFS吗？hive是否也只提供sql接口或存储？
浏览 1提问于2018-07-26得票数 0
我是Hadoop的新手，如果我的问题太不成熟，我深表歉意。
我知道Hadoop用于分析大型数据集上的数据。最后，我们如何处理分析的数据，创建报告和演示文稿？但是，在基于Hadoop的数据库中是如何工作的呢？在客户端，如果请求特定的报告，这需要来自Hadoop DB的数据点，那么流程会是怎样的？我确信客户端不会直接在hadoop中运行Job来获取生成报告所需的数据，因为hadoop作业需要更多的时间来处理。我的问题是，通过在hadoop DB上运行MR作业，处理的数据(结
浏览 2提问于2015-12-23得票数 0
我刚刚开始学习Hadoop，我对如何以分布式方式存储数据感到有点困惑。我有MPI背景。对于MPI，我们通常有一个主处理器，它将数据发送到各种其他处理器。这是由程序员显式完成的。有了Hadoop，您就拥有了Hadoop分布式文件系统(HDFS)。那么，当您将本地服务器中的某些文件放入HDFS时，HDFS是否会自动以分布式方式存储此文件，而无需程序员执行任何操作？
浏览 8提问于2019-01-26得票数 1
回答已采纳
6回答
我目前正在使用Hadoop进行一个项目。
在其他分布式文件系统中呢？文件内容搜索是分布式文件系统的软点吗？
浏览 13提问于2011-06-09得票数 23
回答已采纳
Spark具有用于各种数据库和数据存储的连接器。我希望了解Hadoop连接器的语义，以便能够为我的自定义数据库创建一个连接器。
浏览 1提问于2016-02-26得票数 0
5回答
我可以访问一台运行Linux的计算机，它有20个内核，92 GB的RAM和100 GB的硬盘存储器。我想使用Hadoop来完成一项涉及大量数据(超过100万字，超过1B字组合)的任务。将伪分布式模式或完全分布式模式作为在一台计算机上充分利用Hadoop功能的最佳方法？？。
对于我打算使用Hadoop来说，经历数据丢失和由于节点失败而不得不重新运行作业并不是什么大问题。涉及到的使用完全分布式模式。描述伪分布式模式；更详细的信息可以找到。
浏览 7提问于2015-07-30得票数 11
1回答
为此，我正在考虑将Hadoop用于MapReduce和分布式计算。使用MapReduce模式，我可以创建每组100.000条记录，并将它们分布在集群上，以便进行一些分布式分析/计算。除此之外，我还必须存储所有这些记录，并每个月使用它们来改进我每天计算的算法。哪家商店最适合这种情况？我正在考虑HBase或CouchDB，因为我认为它们很适合我的需求。
浏览 3提问于2015-02-11得票数 0
Hadoop到底是干什么用的，主要的应用场景和应用领域是什么，主要解决的核心问题又是什么，我们个人可以用它来干什么 产生价值呢?
浏览 944提问于2020-09-24
5回答
这是很明显的，我们都会同意，我们可以称HDFS + YARN + MapReduce为Hadoop。但是，在Hadoop生态系统中，不同的其他组合和其他产品会发生什么呢？例如，HDFS + YARN + Spark仍然是Hadoop吗？HBASE是Hadoop吗？我想我们考虑的是HDFS + YARN + Pig Hadoop，因为Pig使用MapReduce。只是MapReduce工具被认为是Hadoop，但是在HDFS + YARN上运行的任何其他工具(比如火花)都是非Had
浏览 18提问于2015-01-24得票数 13
回答已采纳
3回答
在其主页中，有人说它比Hadoop框架更好。但是他们说:火花运行在Hadoop..。我真的不明白为什么可以在Hadoop上运行，而它应该比Hadoop更好。
有人能解释一下这两者之间的等级吗？
浏览 6提问于2017-10-22得票数 1
回答已采纳
我想了解hadoop是否支持siebel应用程序，有没有人可以分享这样做的经验。我查找了在线文档，但在这里找不到任何适当的链接来解释这个发布问题
我已经和siebel应用程序一起运行Oracle数据库了，我想用HAdoop替换..is有可能吗？
浏览 1提问于2014-02-24得票数 1
我是Oozie和Hadoop的新手。我想问一下，是否可以在Oozie中运行shell操作，并将输出存储到Hadoop分布式文件系统上的一个文件中。
浏览 0提问于2015-04-02得票数 2
我正在研究Hadoop和云存储。所以很奇怪，Hadoop能像Dropbox或者Google一样使用吗？
浏览 2提问于2017-05-02得票数 1
回答已采纳
12回答
火花和Hadoop之间有依赖关系吗？
如果没有，那么当我运行而没有Hadoop时，是否会忽略一些特性？
浏览 10提问于2015-08-15得票数 119
回答已采纳
1回答
我将hadoop安装在一个节点上，采用伪分布式模式。dfs.replication值为1。默认情况下，hdfs中的文件存储在哪里？我使用的hadoop版本是2.5.1。
浏览 3提问于2015-04-30得票数 0
回答已采纳
3回答
我对Hadoop的用法并不感到困惑。我不知道何时何地使用Hadoop。
根据定义，这项工作还由Oracle、MSSQL等其他数据库完成，即跨集群存储和处理数据。那么使用Hadoop还有什么优点呢？
浏览 3提问于2015-08-12得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
