我想要触发hbase中所有表的主要压缩。使用hbase客户端API，可以通过admin.majorCompact(tableName)随时触发主要压缩。1)如何判断压缩的完成状态，因为hbase客户端接口majorCompact是一个异步进程。2)是否必须等到压缩过程完成，才能查询hbase进行实时处理
浏览 0提问于2017-09-13得票数 1
我使用HBase shell和常用的create table命令在Bigtable中创建表，您可以在其中指定压缩，这显然忽略了压缩属性。示例：hbase(
浏览 4提问于2017-05-10得票数 1
回答已采纳
我们已经安装了HDInsight Hbase集群，并且我们观察到，虽然正在进行主要的压缩，但客户端应用程序无法访问Hbase。
请建议处理此场景的最佳实践。
浏览 3提问于2016-05-19得票数 0
我已经做了配置:habse.offpeak.end.hour:22，hbase.offpeak.start.hour: 18.hbase.hregion.majorcompaction: 86400000，但是hbase仍然在随机时间做主要压缩，比如:9:00 ,13:55等等。你能告诉我如何配置hbase做主要压缩在非高峰时间。
浏览 3提问于2021-11-26得票数 0
2回答
HBase键值压缩？
、、、
在开始之前，我想告诉您，我对Hadoop & HBase非常陌生。到目前为止，我发现Hadoop非常有趣，并希望在未来做出更多的贡献。
我主要感兴趣的是改进HBase的性能。为此，我修改了HBase的/io/hfile/Hfile.java中的/io/hfile/Hfile.java方法，使其能够完成高速缓冲数据汇编，然后直接写入Hadoop，以便以后可以由HBase加载。现在，我想出一种压缩键值对的方法，这样就可以节省带宽。我做了很多研
浏览 7提问于2011-06-20得票数 0
我有一个非常大的Hbase表apData，但是它在创建时没有被设置为压缩。现在是1.5 it。所以我想在这张桌子上启用压缩功能。我应该如何压缩表，并确保未来的数据将自动压缩时，它被插入。
提前感谢！
浏览 8提问于2015-05-15得票数 3
回答已采纳
在进行测试时，我观察到即使在区域中有超过3个文件之后，也不会立即触发轻微的压缩。这可能会导致存在大量文件的问题，这些文件保存的是同一行键的行。我已经看到在10000秒后(大约2小时，45分钟)被唤醒的压缩线程正在开始压缩并将压缩任务放到队列中。是否有任何配置可以告诉您，在由批量加载(完全负载)编写的3个或更多hFiles时立即触发轻微的压缩，而不考虑HFile的大小？Hbase版本: HBase 1.1.2.2.6.5.4-1
<e
浏览 1提问于2019-12-31得票数 0
回答已采纳
1回答
Hbase表基于列族，这意味着每一列都是元组--每一列都存储在一起。HBase列族是存储在一起的事实，它是否降低了效率，还是HBase做了一些聪明的技巧来保持列的性质？
浏览 5提问于2017-04-12得票数 2
回答已采纳
1回答
当文件作为记录从linux机器上传到Hbase表时，我们观察到数据大小的减少(文件系统上为10 GB，Hbase表中为6-8 GB )。在hbase表上没有使用压缩方法，主要压缩也被禁用。
浏览 47提问于2021-06-23得票数 0
1回答
在从RDBMS到Hbase的批量数据迁移过程中，会不会出现过频繁的区域拆分？如果它发生的次数更多，那么它肯定会影响写入和读取性能。
我知道预分割可以在一定程度上避免这个区域的分裂。但在我们的产品设计中，首先我们将在Hbase中单独写入新数据(可能需要6个月)，一旦Hbase系统稳定了对新数据的读写，将开始将数据从RDBMS迁移到Hbase。
浏览 3提问于2016-11-18得票数 0
当我在Apache HBase中运行主要压缩时，它不会删除标记为删除的行，除非我首先完全重新启动HBase。., INC
然后，我运行命令major_compact 'myTable'并等待几分钟，以便主要压缩在后台完成。然后，当我再次执行扫描时，行和tombstone标记仍然存在。但是，如果我重新启动HBase并运行另一个主要压缩，行和逻辑删除标记就会消失。简而言之，只有在运行主要压缩之前重启HBase，major_compact
浏览 0提问于2014-08-04得票数 0
5回答
我要监测hbase的主要压实情况。每一张桌子我都想知道
通过UI？一般来说，我应该监测哪些额外的参数来检测是否需要主要的压缩？
浏览 4提问于2012-11-13得票数 7
回答已采纳
1回答
hbase压缩文件大小是多少
、、、、
我最近读到，在Hbase主要压缩后，如果存储文件的大小超过hbase.hregion.max.filesize，即256MB，那么它再次被分成2。所以有人能解释压缩是在多大的文件上进行的吗？在主要压缩之后形成的存储文件将包含多少列族的数据？
浏览 0提问于2014-07-19得票数 1
1回答
在HDP群集上安装Snappy
、、、、
我有一个使用Hortonworks数据平台2.6.1构建的HBase集群。现在，我需要对HBase表应用快速压缩。
hbase org.apache.hadoop.hbase.util.
浏览 1提问于2017-10-31得票数 0
回答已采纳
我有一张HBase桌子。我对表执行了HBase主要压缩。如何在Java中动态获取Hbase表的HFiles数量？
浏览 2提问于2016-10-24得票数 0
我使用sqoop导入工具将数据导入到HBASE表中。我已经创建了一个自定义的PutTransformer类，并且我使用了jar和属性来使用自定义转换器，但是它没有考虑自定义转换器类。
有人能帮我吗。/ -libjars /home/ghk/hbase/poc/customsqoop.jar -D --连接‘jdbc:poc:瘦：@//XX.XY.XA.XZ:1521/A 701’-表XYZ.TEMP_HBASE_TYPE2-列的TID、HBAS
浏览 8提问于2013-10-07得票数 1
5回答
现在，我正在尝试在其上安装hbase (0.94.18版)。但是我得到了以下错误(尽管我已经将其解压缩到/usr/local/hbase中)：
Error: Could not find or load main class org.apache.hadoop.hbase.util.HBaseConfToolError: Could not find or load main class org.apache.hadoop.hbase.zookeeper.ZKServ
浏览 1提问于2014-05-11得票数 3
1回答
我确实知道hbase压缩的基础知识，即它在HFiles上是如何工作的。但是，我很好奇，在两次压缩(次要和主要)期间，其他服务会发生什么情况，这会是hbase的停机时间吗？也就是说，在压缩时，如果客户端运行get或put查询怎么办？在压缩过程中，该查询是否会得到响应或挂起？谢谢,
Vikash
浏览 10提问于2018-05-30得票数 0
1回答
我想在压缩数据上运行这些查询，因为它们将提供更好的性能，我们可以完全跳过解压缩。我目前正在使用Hbase的聚合客户端，它看起来像是(还没有检查源代码yet...can是错误的)，Hbase使用它的b树索引查找行键，解压缩该块并按顺序读取数据。有办法跳过解压过程吗？如何使HBase只通过处理压缩数据来计算计数。如果这是不可能的，是否还有其他列db提供此功能。
浏览 4提问于2014-03-01得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
