1回答
我开始了解hadoop。我对它有了一些了解，但是当我读到关于Hive，Pig和其他Apache工具时，我感到很困惑。因此，有人能简单地概述一下hadoop和Apache的工具(Hive、Pig、等)，我想知道它们在处理大数据时是如何和在哪里使用的。
浏览 3提问于2014-05-20得票数 0
回答已采纳
2回答
HBase项目-技术和架构
、、、、
我想开发一个应用程序来学习如何使用HBase。我可以使用什么技术来使用HBase开发一个好的学习项目？例如，我想使用Ruby on Rails或Java或Spring之类的东西。我能做什么架构？
浏览 0提问于2012-02-25得票数 1
回答已采纳
在Hadoop中，我可以轻松地创建Map/Reduce应用程序，这些应用程序可以访问和处理巨大的文本文件和csv文件中的数据。我的问题是，Hbase能不能做同样的事情，访问这么大的文件，或者HBase有其他用途？HBase就像运行关系数据库一样运行查询；所以，我很难理解Hbase的优势，除非它可以像Hadoop那样访问巨大的文本和csv文件。
浏览 3提问于2012-12-18得票数 0
回答已采纳
2回答
我想知道，如果hadoop中使用了这么大的数据集，那么Hadoop使用的数据结构是什么。如果可能的话，请有人向我提供hadoop中底层数据结构的详细视图。
浏览 12提问于2014-02-24得票数 2
回答已采纳
Hadoop将通过从Hbase读取数据并将数据写入Hbase来运行许多作业。假设我有100个节点，那么有两种方法可以构建Hadoop/Hbase集群：
哪种选择更好？
浏览 4提问于2014-04-19得票数 1
回答已采纳
2回答
由于大数据术语被广泛用于管理海量数据，我想尝试用大数据构建一个小型应用程序，以了解结构以及如何从ASP.NET技术开始？
有可能吗？
浏览 1提问于2014-04-02得票数 5
回答已采纳
如果我正确理解Hadoop生态系统，我可以从HDFS或HBase运行我的HBase作业源数据。假设前面的假设是正确的，我为什么要选择一个而另一个呢？我能找到的最好的一句话是："HBase是在需要实时读写随机访问非常大的数据集时使用的Hadoop应用程序。“- this (2009) Hadoop:权威指南，第1版。
浏览 0提问于2010-09-22得票数 8
回答已采纳
2回答
扩展算法所需的概念和工具
、、、、
我想开始思考如何扩展我为数据分析编写的算法，以便它们可以应用于任意大的数据集。我想知道实现这一点的相关概念(线程、并发、不可变数据结构、递归)和工具(Hadoop/MapReduce、Terracota和Eucalyptus)是什么，以及这些概念和工具是如何相互关联的。采用像R/Hadoop (HRIPE)这样的东西...或者为Python编写包装器以启用多线程或Hadoop访问？我知道这可能会涉及到额外的硬件需求，我想了解一些基本
浏览 2提问于2010-03-10得票数 5
回答已采纳
如果我从物联网设备接收数据，是否应该先将数据保存在Hadoop中，然后保存到Cassandra？lambda架构在批处理层具有Hadoop，接收数据并将其发送到nosql数据库的服务层。为什么数据应该放在Hadoop的第一位？如果Hadoop包含原始数据，那么Cassandra中存储的是什么类型的数据？
流层现在是模糊的。我只是想一起了解一下Cassandra和Hadoop的用法。
浏览 2提问于2016-11-22得票数 4
我正在构建一个需要大量数据处理和分析的应用程序(同时处理大量文件)。
为此，我打算使用Hadoop (Map-reduce，Hbase(HDFS文件系统))。同时，我有像用户设置，应用程序用户列表，支付信息和其他小数据集，可以很容易地管理任何RDMS数据库，如sql或Mongo。有时它可能只有很少聚合和分析数据，这些数据是由Hadoop计算的，但数据也不是那么大。我的问题是，我是否应该选择像Mysq
浏览 2提问于2016-06-20得票数 2
2回答
虚拟机上的Hadoop
、、、
为了实现可伸缩性，我们希望从MySQL迁移到Hadoop。运行在虚拟机上的hadoop集群会改善我们网站的性能吗？
在虚拟机(ESXi)上实现hadoop集群有哪些优点和缺点？
浏览 0提问于2011-01-26得票数 -2
2回答
这个应用程序是用C++开发的，所以我会考虑使用Hadoop管道来将数据输入和输出。每个实例都需要按其自身数据(当前存储在一个文件中)的顺序处理100 it到200 it，并且应用程序当前(可能) IO有限，因此每个作业完全在本地运行是很重要的。但是，我想知道Hadoop是否适合这个特定的应用程序。因此，使用Hadoop处理我的数据是可能的。然而，我的模型似乎不太适合Hadoop :社区同意吗？或者对如何最好地发布这些
浏览 2提问于2011-03-08得票数 2
回答已采纳
是否有可能使用谷歌的数据流服务来运行Hadoop先生乔布斯呢？
我有 Hadoop先生乔布斯，我希望能够在数据流服务上运行。我希望能够利用Dataflow服务，而不必完全重写Hadoop作业。
浏览 0提问于2015-01-20得票数 0
回答已采纳
1回答
我听说Hadoop是一个很棒的数据处理工具，一旦MongoDB连接到，它就可以提高性能。它能很好地处理Map Reduce，但它对我这个不包含任何Map Reduce函数的例子有用吗？此外，如果我在MongoDB中使用Map Reduce并连接Hadoop，性能将如何提高？
浏览 0提问于2014-04-25得票数 0
1回答
在Hadoop中，假设我有一个文件A.txt，并且有一些示例数据，例如：
如何将这些数据存储在块中？基本上，我想了解文件中的数据是如何存储在HDFS块中的。它会破坏内容，还是会根据一些独角兽或内容大小等对内容进行拆分。
浏览 5提问于2017-10-09得票数 0
1回答
对于Kylin应用程序中的示例“默认”数据库来说，一切都很好。现在，我正在尝试在$KYLIN_HOME/conf/kylin.properties文件中添加以下代码的Server数据库：kylin.source.jdbc.connection-url
浏览 4提问于2021-08-25得票数 0
在Kubernetes上Hadoop和标准Hadoop有什么区别？在Kubernetes上部署Hadoop有什么好处？
浏览 0提问于2018-11-26得票数 11
回答已采纳
1回答
所有NoSQL框架都使用吗？
、、、、
我是大数据的新手；显然，大多数使用NoSQL框架(如MongoDB、CouchDb和Cassandra )的应用程序都需要访问大量的数据。现在，我的问题是，这些NoSQL工具是否都使用Hadoop文件系统作为它们的存储，或者某些文件系统是如何使用的呢？如果他们使用Hadoop文件系统，那么他们有一个简单的方法来集成Hadoop文件系统吗？
谢谢
浏览 2提问于2015-01-26得票数 1
回答已采纳
2回答
我是Hadoop世界的新手。我将在我的PC上安装一个独立版本的Hadoop，以便将文件保存在HDFS (当然是1个节点)上，然后运行pySpark从HDFS读取文件并对其进行处理。
浏览 0提问于2017-01-11得票数 0
最近，我使用hadoop批量加载将数据放入hbase中，首先，我调用hdfs将数据写入hadoop中的文件中，总共有7,000,000行数据，大小为503 to。其次，我使用org.apache.hadoop.hbase.mapreduce.ImportTsv和org.apache.hadoop.hbase.mapreduce.LoadIncrementalHFiles将数据放入hbase中。我所做的最重要的事情是使用大容量工具将<e
浏览 5提问于2012-12-13得票数 3
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
