另一个问题是，每个znode只能包含1M数据，因为ZooKeeper不是设计为容纳非常大的数据值的大型数据存储。但是，如果我需要一种存储大量数据的分布式数据库，我如何使用ZooKeeper来实现呢？如果这些大型数据没有存储在znode中，那么它应该存储在哪里，ZooKeeper如何获取这些数据？
浏览 0提问于2014-01-16得票数 0
1回答
大型对象的分布式缓存
、、、、
也许一种天真的方法是使用像这样的通用存储。然后，分布式解决方案更有前途。但是，主要关注的是将该结构复制到所有机器上。
事先谢谢你。
浏览 4提问于2013-01-29得票数 10
回答已采纳
GraphX可以存储、处理、查询和更新大型分布式图形吗？我希望避免与网络通信和数据移动相关的成本。
浏览 1提问于2014-08-06得票数 2
1回答
我目前正在使用mongodb，它对我的数据(测试结果)很好，但我需要存储超过32MB和超过16MB的mongo限制的不同类型的测试结果。
浏览 0提问于2012-08-23得票数 2
回答已采纳
1回答
实例化和关闭Kubeflow豆荚
、、、、
在训练我的机器学习模型时，我想使用一台大型机器在云上训练我的模型，但在那之后，我只想在一个小规模的实例上服务这个模型。我希望大型机器只在训练阶段使用，并在此之后关闭。库贝弗尔能做到这一点吗？
浏览 7提问于2021-02-02得票数 2
回答已采纳
我们目前将Clearcase用于大量大型项目。我们在后台使用SQL Server作为文件存储，最终达到了访问文件太慢的地步。看看GIT和Mercurial，我们看到了一个基于存储文件差异的分布式VCS -这有可能获得更好的本地性能。
有没有人知道Jazz RTC是有文件差异支持的文件存储，还是数据库支持的文件存储？
浏览 0提问于2011-06-28得票数 2
回答已采纳
我们已经看过和观看了关于大型分布式团队如何使用Git的视频，但是我们中那些没有分布式的团队和我们团队其他成员一起在办公室工作的人呢？我们应该如何构建我们的存储库和工作流程？当然，这些团队可以各自维护自己的Git存储库，并在必要时相互推拉，这在许多情况下很快就会变成噩梦。或者，他们可以各自维护自己的存储库，并与单个存储库同步，该存储库称为团队的“主”。
浏览 1提问于2009-01-21得票数 9
回答已采纳
2回答
现在我必须处理一个大型的RDF数据集，我的问题是:我能在集群上安装Virtuoso以便存储这个RDF数据集并能够执行SPARQL分布式查询吗？换句话说: Virtuoso是一个很好的解决方案，可以在hadoop集群中工作，并且可以使用SPARK来执行分布式查询吗？
浏览 0提问于2019-12-01得票数 0
回答已采纳
1回答
为此，我正在考虑将Hadoop用于MapReduce和分布式计算。使用MapReduce模式，我可以创建每组100.000条记录，并将它们分布在集群上，以便进行一些分布式分析/计算。除此之外，我还必须存储所有这些记录，并每个月使用它们来改进我每天计算的算法。哪家商店最适合这种情况？我正在考虑HBase或CouchDB，因为我认为它们很适合我的需求。
浏览 3提问于2015-02-11得票数 0
根据Wiki页面的定义，分布式云计算是“云计算也可以由运行在不同位置的一组分布式机器提供，同时仍然连接到单个网络或集线器服务。”
这与雾计算有什么不同？根据wiki的定义，雾计算或雾网络是一种使用一个或多个协作的最终用户客户端或近用户边缘设备来执行大量存储(而不是主要存储在云数据中心中)、通信(而不是在互联网骨干网上路由)以及控制、配置、测量和管理(而不是主要由诸如
浏览 0提问于2015-02-03得票数 2
3回答
Hadoop是一个开放源码的框架，它允许使用简单的编程模型在分布式环境中存储和处理大型数据。它被设计成从单一服务器扩展到数千台机器，每台机器都提供本地计算和存储。根据定义，这项工作还由Oracle、MSSQL等其他数据库完成，即跨集群存储和处理数据。那么使用Hadoop还有什么优点呢？
浏览 3提问于2015-08-12得票数 1
回答已采纳
1回答
我想知道你们是否有任何建议，哪些存储库实现在常见硬件上具有良好的集群和水平伸缩特性？问题是，我们必须在存储库之上实现一个保存系统，该系统能够摄取和管理大量具有大文件(> 50 TB)的异构数据(> 500 TB)。
似乎只能通过使用分布式文件系统来实现集群。可以是集群的，但是它的DataStore (对于大型二进制数据)对于集群环境中的所有节点必须是相同的。你们有什么建议吗?我应该检查哪些存储库系统？
浏览 3提问于2011-05-05得票数 3
1回答
试图找出如何创建一个简单的分布式数据库etcd用于存储元数据，而不是数据本身--是否可以/建议将etcd与另一个键值存储结合起来处理大型数据？
我也看过
浏览 7提问于2022-01-06得票数 0
回答已采纳
4回答
存储库中的分支是什么？
、、、
根据我对subversion的理解，如果您有一个包含多个项目的存储库，那么您可以在该存储库中对单个项目进行分支(请参阅)
然而，我不太理解的是，当你在一个分布式系统(Git，Hg，Bazaar )中创建一个分支时会发生什么您可以只对存储库的一个子目录进行分支，还是在创建分支时对整个存储库进行分支？这个问题是我在超级用户()上发布的一个更大的问题的一部分，当我试图弄清楚如何最好地对独立项目的大型分层布局进行版本控制时产生了这个问题。也许对于分布式系统，我想要做的事情最好是
浏览 3提问于2010-05-27得票数 3
回答已采纳
1回答
我是Apache的新手，对于Ignite和spark集成来说，看起来Ignite提供了一个内存中的层，数据将跨spark应用程序存在，这是Tachyon作为内存文件系统提供的功能。那么，我的问题是对于内存中的文件系统(IGFS用于点燃)，Ignite和Tachyon之间有什么区别？两人之间的利弊是什么？
浏览 1提问于2016-12-06得票数 4
回答已采纳
设Q是星火中的分布式行矩阵，我要计算Q与其转置Q'.的交叉积请注意，我希望执行2 Distributed RowMatrix的点积，而不是本地的分布式积。crossMat转换为RowMatrix：最后我可以申请但是，这个过程包括分布式矩阵类型之间的许多
浏览 2提问于2017-09-04得票数 1
回答已采纳
1回答
我的应用程序在s3上存储随时间变化的大型二进制文件(100Mb -1 1Gb)。我希望提供回滚或下载这些文件的以前版本的能力，而不必存储快照副本。
实现这一目标的最佳方法是什么？
浏览 0提问于2011-09-28得票数 1
Spark中的一切都是以RDD (键和值对)的形式创建的。这有必要吗？可以通过RDD数据集创建/执行哪种类型的分析？请提供一个将其转换为RDD的示例和用法 谢谢，Aditya
浏览 15提问于2019-04-30得票数 0
1回答
猪窝Hbase的不同之处
、、、
我是hadoop技术的新手。我正在尝试弄清楚这些Pig Hive和Hbase用于哪种类型的数据(结构化、非结构化、半结构化)？
浏览 3提问于2015-01-05得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
云直播
对象存储
腾讯会议活动推荐
腾讯云开发者
