想购买云服务做大数据计算和分析，如何选择满足个人日常学习的配置？我是小白，从未用过云服务，现在需要用到Hadoop、Hbase、Mysql、Hive、Spark、zookeeper等，只是学习使用
浏览 150提问于2018-06-21
1回答
Hadoop，火花和云
、、、、
看起来Hadoop、Spark和不同版本的Clouds提供了存储和分析大数据的工具。有一些文章比较Hadoop和Spark (例如，这篇文章)。还有一些文章讨论了AWS上用于使用Hadoop/spark的服务，例如这篇文章。
我的问题是，如果我使用的是提供存储和分析服务的云计算，我还需要hadoop/spark吗？
浏览 0提问于2023-04-16得票数 0
我想为数据分析目的部署一个小型数据中心。我将主要从web应用程序中获取数据。我知道我可以设置hadoop集群并根据需要进行扩展。我还知道，OpenStack是一个免费的、开源的云计算软件平台，主要作为服务基础设施(IaaS)部署。然而，很明显，一些行业更喜欢在OpenStack (撒哈拉沙漠)之上的hadoop。因此，我想知道有或没有OpenStack的Hadoop的区别、优缺点。
简单地说，如果我将Hadoop放在OpenStack之上，我会得到哪些额外的特性？
浏览 0提问于2015-12-18得票数 0
回答已采纳
1回答
我正在考虑给客户买雪花，但是我不能告诉他们文档在哪里存储数据？似乎是s3，但为什么这么昂贵的存储成本？用户的s3或雪花中的数据是s3吗？
浏览 2提问于2020-03-12得票数 0
回答已采纳
我想分析Hadoop的源代码。我下载源代码文件并将其导入IDEA。但是IDEA告诉我它找不到org.apache.hadoop.ipc.protobuf包。
浏览 2提问于2020-02-01得票数 0
回答已采纳
我想获得一些使用Hadoop和页面排名的经验。我用Hadoop完成了一个简单的页面排名算法的实现。现在，我计划分析更改一些算法参数的可能影响，并研究它如何影响页面排名。现在，我正在分析悬空节点如何影响页面排名。任何关于这个pagerank还可以有哪些变化的建议都将极大地帮助我获得更深入的知识。
谢谢
浏览 5提问于2012-10-21得票数 2
回答已采纳
1回答
目前，Hadoop通过将任务分配给包含数据的节点或接近该节点的节点(例如相同的机架)来实现数据局部性。但是，我想知道是否可以将相同的概念应用于部署在一组虚拟机上的云计算中，因为有关物理层的信息，例如哪些物理机器当前承载了这些VM，可能是不可用的。
浏览 5提问于2014-01-21得票数 2
回答已采纳
我想分析一些hadoop示例程序(如word计数)的映射和减少函数，但我不确定源代码位于何处。我已经在google上搜索了word计数的源代码，但是我相信当我下载它时，它应该包含在hadoop包的某个地方。
有谁知道在哪里可以找到hadoop示例程序的映射和约简函数？
浏览 2提问于2014-07-14得票数 0
回答已采纳
2回答
我无法澄清OpenStack和Cloudera之间的区别。你能给我进一步的信息吗？我怎么能两样都用？
浏览 10提问于2017-05-19得票数 2
回答已采纳
4回答
在过去的几个月里，我一直在研究BigData，并开始做我的五年计划，即在Windows Azure中使用MapReduce和HDInsight来分析BigData。我只是遇到了一个特殊的困惑，在成本、性能、稳定性等方面，哪种平台可以更好地进行BigData分析，例如Amazon、Oracle、IBM等。简而言之，就是BigData分析的HDInsight vs Other BigData Solutions。任何帮助都将不胜感激。
浏览 1提问于2015-02-24得票数 0
我已经创建了一个以Azure存储作为HDFS的HDInisght。我想知道是否可以使用webHDFS apis将二进制文件上传到HDFS。同时，我检查了hdfs-site.xml，发现 <name>dfs.webhdfs.enabled</name> <final>true</
浏览 0提问于2020-07-14得票数 0
回答已采纳
我编写了一些例程Hadoop MapReduce作业，因此仅根据给定Apache Hadoop源代码中的一些示例调用context.write()方法。但是这样的复制并不能帮助我更深入地理解Hadoop API。
因此，最近我开始更仔细地阅读Hadoop API文档()，并尝试找出除了context.write()之外，上下文中还有其他方法。在哪里可以找到hadoop中Context类的文档？
浏览 2提问于2016-07-05得票数 1
1回答
为什么google cloud click to deploy hadoop工作流程需要选择本地持久磁盘的大小，即使您计划将hadoop连接器用于云存储？默认大小为500 GB。在google云中使用hadoop云存储连接器时，是否有推荐的持久化磁盘大小？“在Google Cloud平台上部署Apache HadoopHadoop将部署在单个集群中。H
浏览 7提问于2014-11-23得票数 0
1回答
我目前正在从事一个项目，在该项目中，我必须分析两个特定IT系统的需求，这些系统使用云计算，用于cloud。换句话说，我必须分析这些系统对Cloud的需求，这样他们就能够在实现当前目标的同时切换它。在该项目的稍后阶段，我将分析一些将云API标准化的云计算标准，以找出当前标准中可能存在的缺陷。调查结果可能而且很可能是，某一标准不支持监测资源使用情况，因此目前无法使用。我认为目前我收集到的需求可以被描述为用户故事，但是对于复杂的需求分析来说
浏览 0提问于2012-09-01得票数 8
可以使用哪些Hadoop服务源？我想我读到Cosmos支持Cloudera CDH服务和原始Hadoop服务器服务？那么HortonWorks或MapR呢？我知道非标准文件系统可以与Hadoop一起使用，例如MapR-FS，这样的选项在Cosmos中可能吗？我还读到Cosmos“坐”在fiware之上，因此Hadoop as a service (HaaS)可以使用，Hadoop集群使用开放堆栈生成？然而，我看到人们指的是共享固件云？fiware是否作为远程云运行？是否
浏览 7提问于2016-05-27得票数 1
我需要检查整个图中存在的多个模式，我认为这在hadoop中很容易完成。但是，我不确定将元组从neo4j馈送到hadoop的最佳方式。有什么建议吗？
浏览 1提问于2014-01-13得票数 0
URL中有一条语句告诉您
"Azure Data Lake Store can be accessed from Hadoop (available with HDInsight cluster) using
浏览 7提问于2018-06-04得票数 12
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
