腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如果我们使用Hadoop来处理大数据,就会
存储
数据,因为hadoop数据库
HBase
存储
结构
化数据,而大数据是非
结构
化的。
、
Hadoop用于处理大数据,hadoop使用
HBase
作为其数据库,但BigData可能80%是非
结构
化的,
HBase
只
存储
结构
化数据。 非
结构
化数据
存储
在哪里?或者是否有hadoop工具将非
结构
化数据转换为
结构
化格式?
浏览 0
提问于2018-10-20
得票数 0
回答已采纳
2
回答
是否可以将HDFS
存储
类型/策略与
HBase
一起使用?
、
、
HDFS有一个叫做storage types/policies的功能--它可以将文件
存储
在具有不同属性的商店中(快速固态硬盘或缓慢但廉价的归档
存储
)。 我想知道是否可以通过
HBase
使用此功能?我的用例是,我有一些数据是“热”的,预计会经常被访问,所以我想把它放在“热”(SSD)
存储
中,而有些数据是“冷”的,不经常访问,所以我想把它放在一个更便宜的
存储
上。我正在尝试找出如何使用
HBase
/HDFS来组织这项工作。
浏览 27
提问于2020-11-29
得票数 0
回答已采纳
1
回答
度量收集和分析体系
结构
、
、
、
、
首先,不需要
存储
所有数据,因为用户只需要指定时间段的图表,因此需要一些聚合。什么样的数据库解决方案适合它?我相信没有RDMS会处理这么多的数据。那么,如何获取度量的平均数据来将其呈现给最终用户呢?AWS具有共享的时间序列数据处理架构: 很简单,我是这样想的: 以前有没有人做过类似的事?也许还有更简单的建筑?
浏览 0
提问于2018-11-26
得票数 1
1
回答
HBase
真的是一个柱状数据库吗?
、
我读到了关于
HBase
的文章,关于它的常见描述是“柱状数据库”。这到底是什么意思?与传统的关系数据库系统相比,
HBase
的
结构
是否相反? 提前感谢!
浏览 1
提问于2018-05-15
得票数 1
回答已采纳
1
回答
使用火花流在
Hbase
/HDFS中保存原型
、
、
、
、
我希望使用火花流
存储
Hbase
/HDFS中的protobuf消息。我有两个问题 如何
存储
原型消息的层次
结构
?我的意思是,应该在
存储
之前将嵌套的元素夷为平地,还是有任何机制来按原样
存储
它们?如果嵌套元素是集合或映射,那么它们是
浏览 5
提问于2016-06-22
得票数 2
回答已采纳
1
回答
从REST中获取数据并将其
存储
在HDFS/
HBase
中
、
、
、
、
我了解到HDFS用于
存储
更多的
结构
化数据,而
HBase
用于
存储
非
结构
化数据。我有一个REST,在这里我需要获取数据并将其加载到数据仓库(HDFS/
HBase
)。数据采用JSON格式。HDFS还是
HBase
?另外,你能告诉我一些教程来做这件事。我偶然发现了关于的事情。但我不确定这是否符合我的用例。 如果你能引导我找到解决这个问题的特定资源/技术,那将是很有帮助的。
浏览 1
提问于2017-08-09
得票数 1
回答已采纳
2
回答
在Hadoop中使用
HBase
代替Hive的目的
、
、
、
我们同时使用Hive和
HBase
。我可以使用HDFS访问Hive的所有细节,如文件等。但我的困惑是- 有谁能告诉我。
浏览 2
提问于2016-12-29
得票数 4
回答已采纳
1
回答
如何探索
HBase
数据
、
、
我目前正在做一个将数据加载到
HBase
中的应用程序,我选择了
HBase
,因为数据不是
结构
化的,因此建议使用基于列的数据库。一旦数据在
HBase
中,我就想将Solr集成到它,但是我发现关于这个主题的信息很少,我的问题"“也没有答案,所以我想问如何查询
存储
在
HBase
中的数据?火花流似乎不适合这一点。有什么帮助吗?
浏览 0
提问于2016-04-18
得票数 0
回答已采纳
1
回答
在使用
HBase
时,是否可以将分区数据
存储
在从节点的主存中,如IMDB (内存中的DataBase)?
、
先决条件: Q2。如果我歪曲了master / slave nodes of HDFS和
HBase
系统的
结构
或关系,或者如果我对它们没有任何正确的理解,请告诉我。
浏览 0
提问于2018-05-10
得票数 0
3
回答
HBASE
火花与HDFS火花
、
、
、
我知道
HBASE
是一个柱状数据库,它将表的
结构
化数据按列而不是按行
存储
到HDFS中。我知道Spark可以从HDFS读/写,还有一些用于Spark的
HBASE
连接器现在也可以读写
HBASE
表。问题: 1)在
HBASE
之上分层火花而不是单独使用
HBASE
所带来的附加功能是什么?它只取决于程序员的能力,或者有任何性能原因来这样做?是否有星火所能做的事,而
HBASE
却无法做到?2)源于前面的问题,什么时候应该在HDFS和SPARK之间添加
HB
浏览 4
提问于2016-08-13
得票数 9
回答已采纳
3
回答
Hadoop与
HBase
集成
、
我是大数据技术的新手,我有一个关于
hbase
如何与hadoop集成的问题。"
Hbase
位于HDFS之上“是什么意思?我的理解是,HDFS是分布在多个节点上的
结构
化和非
结构
化数据的集合,而
HBase
是
结构
化数据。 如何将
Hbase
与Hadoop集成,以提供对底层数据的实时访问。换句话说,
Hbase
和hdfs之间是否有一个额外的层,其中包含
HBase
所理解的
结构
中的数据。
浏览 8
提问于2016-03-27
得票数 1
回答已采纳
1
回答
如何将
HBase
用于
存储
?
据我所知,
HBase
将其数据以H文件的形式
存储
在HDFS中。它将所有数据
存储
在哪里?
浏览 0
提问于2013-07-05
得票数 0
1
回答
通过Sqoop将所有表导入
HBase
、
、
操作系统: Windowssqoop import-all-tables --
hbase
-table testhbaseall --
hbase
-create-tableconnect jdbc:mysql://localhost/madha --username root --password sa --warehou
浏览 3
提问于2015-08-21
得票数 2
1
回答
我如何知道
hbase
表中的所有列?
、
在
hbase
中,我使用描述'table_name‘,只有column_family返回。我如何才能了解每个专栏家族中的所有专栏?
浏览 3
提问于2014-03-17
得票数 0
回答已采纳
1
回答
HBase
:复制是如何工作的?
、
我目前正在将
HBase
评估为一个数据
存储
,但还有一个问题没有得到回答:
HBase
在许多节点上
存储
了许多相同对象的副本(也称为复制)。由于
HBase
具有所谓的强一致性(在解释到最终一致性方面),它保证每个副本在读取时返回相同的值。正如我所理解的
HBase
概念一样,在读取值时,首先将查询
HBase
主程序以获得提供数据的(必须有多个) RegionServer。然后,我可以发出读和写的请求,而不需要主人的发明。How如何提供,
HBase
如何在内部工作?会写
浏览 2
提问于2011-03-24
得票数 20
回答已采纳
1
回答
如何在Hadoop中建立接收和
存储
大数据的大数据平台
、
、
、
、
我试图建立一个大的数据平台,在Hadoop中接收和
存储
大量的异构数据,如文档、视频、图像、传感器数据等,然后实现分类过程。那么,由于我目前使用的是VMware VSphere EXSi Hadoop,什么样的体系
结构
可以帮助我 Habse XAMPP所有这些都很好,但是我不知道如何接收大量数据和如何
存储
数据,因为我发现
Hbase
浏览 1
提问于2015-10-05
得票数 0
回答已采纳
1
回答
Kappa体系
结构
:当插入到批/分析服务层时
、
、
、
、
如您所知,Kappa架构是Lambda体系
结构
的某种简化。Kappa不需要批处理层,而是速度层必须保证历史数据重计算的计算精度和足够的吞吐量(更多的并行性/资源)。不过,Kappa体系
结构
需要两个服务层,以防需要根据历史数据进行分析。例如,年龄<2周的数据
存储
在Redis (流服务层),而所有旧数据
存储
在
HBase
(批处理服务层)的某个地方。例如:假设数据的来源是Kafka,数据是由Spark
结构
化流或Flink处理的,接收器是Redis和
HBase
。
浏览 7
提问于2019-10-15
得票数 7
回答已采纳
4
回答
Hbase
与蜂巢的比较
、
、
我试着对
HBASE
有一个清晰的理解。 考虑到他们从事的工作类型,他们不是都一样吗?另外,我们不能在已经存在的HDFS文件上创建
Hbase
表,这是真的吗?
浏览 6
提问于2014-02-18
得票数 1
1
回答
HBase
不同的客户端
、
、
我正在做一个项目,我想从
HBase
系统中读取数据。我读到有各种各样的
HBase
客户端可用,默认的Java客户端,Thrift,Avro等等。现在我很困惑,如果我选择默认的Java客户端,那么我是否能够使用thrift客户端读取
存储
在
HBase
中的数据?我想知道,如果我使用thrift客户端从
HBase
读取数据,那么它将使用thrift反序列化程序将数据从二进制类型转换为适当的类型?如果这是真的,那么如果我使用
HBase
默认客户端读取数据,那么使用thrift客户端加载的数据将会损坏吗?
浏览 2
提问于2013-02-13
得票数 2
回答已采纳
1
回答
Hbase
是柱状DB吗?
Hbase
表基于列族,这意味着每一列都是元组--每一列都
存储
在一起。 这是否意味着
HBase
不是一个柱状DB?柱状DB在IO中是有效的,它们可以做更好的压缩,因为单个列的数据往往是相似的。
HBase
列族是
存储
在一起的事实,它是否降低了效率,还是
HBase
做了一些聪明的技巧来保持列的性质?
浏览 5
提问于2017-04-12
得票数 2
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
【HBase底层原理之物理存储】掌握HBase底层原理,升职加薪!
HBase的表结构你设计得不对!
kafka zookeeper存储结构
InnoDB记录存储结构
HBase之数据模型及表结构设计
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频
活动推荐
运营活动
广告
关闭
领券