腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
3
回答
Hadoop
是什么?怎么使用呢?
、
和
MapReduce一样吗?听说
Hadoop
是做大数据并行
计算
的框架,这种跟“
云
计算
“有什么区别?
浏览 720
提问于2017-09-28
1
回答
云
计算
中
Hadoop
的数据局部性
、
、
、
目前,
Hadoop
通过将任务分配给包含数据的节点或接近该节点的节点(例如相同的机架)来实现数据局部性。但是,我想知道是否可以将相同的概念应用于部署在一组虚拟机上的
云
计算
中,因为有关物理层的信息,例如哪些物理机器当前承载了这些VM,可能是不可用的。
浏览 5
提问于2014-01-21
得票数 2
回答已采纳
3
回答
如何在家里学习
云
计算
和
大数据?
、
、
我想在家里学习
云
计算
和
大数据。在
云
计算
中应该学习哪些技术? 学习大数据(
Hadoop
)的技术是什么?
浏览 0
提问于2012-07-04
得票数 15
回答已采纳
1
回答
如何将仅
计算
节点添加到
Hadoop
集群
、
我正在使用
Hadoop
设置一个包含两个data+compute节点
和
两个纯
计算
节点的集群。我正在使用Spark with Yarn进行数据处理。对于前一种类型的节点,我只需将host-name添加到workers配置中,
hadoop
会自动在这些节点上启动hdfs
和
YARN。但是对于仅用于
计算
的节点,我不希望它们运行dfs。我找不到任何
hadoop
配置来将特定节点排除在运行dfs之外。有人能告诉我设置这种节点分布的正确方法吗?
浏览 25
提问于2021-05-17
得票数 0
回答已采纳
1
回答
谷歌
云
点击部署
hadoop
、
、
、
为什么google cloud click to deploy
hadoop
工作流程需要选择本地持久磁盘的大小,即使您计划将
hadoop
连接器用于
云
存储?默认大小为500 GB。在google云中使用
hadoop
云
存储连接器时,是否有推荐的持久化磁盘大小?“在Google Cloud平台上部署Apache
Hadoop
Hadoop
将部署在单个集群中。默认部署创
浏览 7
提问于2014-11-23
得票数 0
2
回答
Openstack与Cloudera的区别
、
、
、
我无法澄清OpenStack
和
Cloudera之间的区别。你能给我进一步的信息吗?
浏览 10
提问于2017-05-19
得票数 2
回答已采纳
1
回答
想购买
云
服务做大数据
计算
及数据分析,如何选择满足个人日常学习的配置?
想购买
云
服务做大数据
计算
和
分析,如何选择满足个人日常学习的配置?我是小白,从未用过
云
服务,现在需要用到
Hadoop
、Hbase、Mysql、Hive、Spark、zookeeper等,只是学习使用
浏览 147
提问于2018-06-21
1
回答
从Windows访问
Hadoop
云
服务
、
、
、
我是
hadoop
的新手。我正在使用雅虎提供的Linux,因为我不允许在我的机器上安装操作系统。我需要利用
云
服务,并且必须在
hadoop
相关项目上工作。但为了访问它,他们要求,因为我是在基于windows的平台上工作,但我无法解决它。 我也查了。但它也是付费的。我认为
云
访问就像是使用MSTSC的IP连接
云
一样。但事实并非如此。我需要在windows的
云
浏览 4
提问于2013-04-01
得票数 2
1
回答
Hadoop
可以像Dropbox或Google一样使用吗?
、
、
、
、
我正在研究
Hadoop
和
云
存储。所以很奇怪,
Hadoop
能像Dropbox或者Google一样使用吗?
浏览 2
提问于2017-05-02
得票数 1
回答已采纳
1
回答
在中配置多个vm项目的最佳实践的附加教程或工作示例
我希望人们能够知道更多在上配置系统的示例
和
最佳实践指南,这样我就可以获得更多的部署经验,并将这些知识应用到我自己的项目中。我看过,它通过使用脚本部署锡兰德拉集群
和
hadoop
来运行,但我希望有更多的可用,包括以下主题 多项目系统,以及如何构造它们的可靠性
和
安全互操作性。
浏览 2
提问于2014-01-29
得票数 2
3
回答
PHP与
Hadoop
/MapReduce实现中的其他语言,以及云中的一般语言
、
、
、
、
我开始学习一些
Hadoop
/MapReduce,主要来自PHP背景,以及一些Java
和
Python。我已经看过了,看起来PHP中有一些
Hadoop
/MapReduce,但绝大多数文献似乎都致力于这四种语言。在涉及
Hadoop
/MapReduce的
云
计算
项目中,为什么PHP是第二类语言,有什么好的理由吗?考虑到在
云
计算
世界之外,PHP似乎是其最受支持的语言,这一点特别令人惊讶,这损害了上述3种(无C++)语言。如果这是任意的
浏览 0
提问于2010-06-25
得票数 3
回答已采纳
1
回答
Hadoop
,火花
和
云
、
、
、
、
看起来
Hadoop
、Spark
和
不同版本的Clouds提供了存储
和
分析大数据的工具。有一些文章比较
Hadoop
和
Spark (例如,这篇文章)。还有一些文章讨论了AWS上用于使用
Hadoop
/spark的服务,例如这篇文章。 我的问题是,如果我使用的是提供存储
和
分析服务的
云
计算
,我还需要
hadoop
/spark吗?任何有助于识别不同用例
和
应用程序的引用/阅读都将受到高度
浏览 0
提问于2023-04-16
得票数 0
1
回答
集群:您能调整执行者/节点的数量吗?
、
、
、
"Azure Databricks在每个工人节点上运行一个executor;因此在Azure Databricks体系结构的上下文中可以互换使用executor
和
worker两个术语。
浏览 3
提问于2022-06-10
得票数 1
回答已采纳
2
回答
cpu/内存绑定环境中大图的最佳数据结构
、
、
、
、
我面临几个困难: I需要一种有效的方法来存储、检索
和
更新图形的数据。我应该使用SQLite对象来查询来自Java类的查询、堆上的大型自定义java对象还是什么?任务是CPU密集型的,但它也能频繁地访问内存,所以我不这么认为,但我对contribution.Always开放--记住:资源稀缺,ram不足,磁盘速度慢,cpu很珍贵(按电池
计算
)。
浏览 3
提问于2011-01-16
得票数 1
回答已采纳
1
回答
R脚本分布式调度系统
、
、
、
、
我想在几台机器上调度
和
分发-- Windows或Ubuntu --(一项任务只在一台机器上)执行R脚本(例如使用RServe )。我想使用所有这些机器的
计算
能力,并在它们上分发我的R脚本。 我还需要一个调度程序。一种在固定时间或定期安排脚本的工具。我同时使用Windows
和
Ubuntu,但是在其中一个系统上提供一个好的解决方案就足够了。最后,我不需要服务器来获得脚本的结果。脚本可以访问数据库、保存文件等,但不返回任何内容。
浏览 8
提问于2011-12-29
得票数 5
3
回答
为
Hadoop
practice创建或获取环境
、
、
、
我已经开始阅读有关
hadoop
的文章。我也想学习实践。由于
hadoop
是分布式环境,并被设计为在linux上运行,因此我不能在运行windows的本地
计算
机上实践它。互联网上有没有
云
或虚拟机,我可以自己搭建整个环境并开始学习?我可以预先配置
hadoop
集群,但我更喜欢自己配置。
浏览 0
提问于2014-08-15
得票数 0
1
回答
雪花桌存放在哪里?
我正在考虑给客户买雪花,但是我不能告诉他们文档在哪里存储数据?似乎是s3,但为什么这么昂贵的存储成本?用户的s3或雪花中的数据是s3吗?
浏览 2
提问于2020-03-12
得票数 0
回答已采纳
6
回答
Google Cloud Dataflow
和
Google Cloud Dataproc之间的区别是什么?
、
、
看看谷歌的
云
服务,DataProc似乎也可以做同样的事情。 而且看起来DataProc比DataFlow便宜一点。
浏览 1
提问于2017-09-27
得票数 66
1
回答
Hadoop
在数据放在datanodes之前是否有多个本地临时文件位置?
、
、
我想我了解
Hadoop
架构
和
结构的基本知识。在将数据写入datanode之前,我会得到它被缓存在本地临时文件位置中。或者
Hadoop
甚至可以处理来自不同位置的多个同步上传(例如,多台
计算
机将不同的大文件上传到基于
云
的
Hadoop
集群) 请帮助我在任何地方找不到这些信息
浏览 4
提问于2015-01-09
得票数 0
回答已采纳
1
回答
GCP dataproc在哪里存储笔记本实例?
、
、
、
我使用Dataproc创建了一个星火库集群,并将Jupyter Notebook附加到其中。然后,我删除了集群,我以为笔记本已经不见了。但是,在创建了另一个集群(连接到同一个Bucket)之后,我可以看到我的旧笔记本。这是否意味着笔记本(或他们的检查点)存储在我的桶里?或者它们存储在哪里,以及如何确保它们被删除?
浏览 4
提问于2022-02-09
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Hadoop计算框架之MapReduce
理解边缘计算和云计算
边缘计算和云计算区别,云计算会被边缘计算取代吗?
Hadoop技术的过去与未来:成于大数据,败于云计算
网格计算和云计算的概念和区别
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券