上传到Hbase后数据大小减小

文章/答案/技术大牛

发布

1回答

linux、hadoop、nosql、hbase

当文件作为记录从linux机器上传到Hbase表时，我们观察到数据大小的减少(文件系统上为10 GB，Hbase表中为6-8 GB )。在hbase表上没有使用压缩方法，主要压缩也被禁用。

浏览 47提问于2021-06-23得票数 0

1回答

Html5画布调整大小

javascript、image、html、canvas

我使用画布在客户端调整图像大小，然后将图像上传到服务器。我的意图是将图像大小调整到原始尺寸的一半，并希望看到文件大小的减小。但调整后的图像大小始终大于原始图像大小。例如, 我正在调整一个2.5MB的JPEG图像文件的大小，尺寸为2592x1936到1296x968 (JPEG文件)，并尝试将其上传到服务器。在服务器上，我看到文件以3.5MB的大小保存。在使用html5画布调整<em

浏览 0提问于2011-08-24得票数 2

1回答

有没有办法在HBase上进行硬删除(真正的删除)？

hbase、bigdata、database、nosql

我知道hbase从来不会对记录进行真正的删除，它只是设置了一个墓碑标记。但是，如果数据量越来越大，并且有一天您想要通过对某些选定行执行硬删除(实际删除)来减小大小，该怎么办呢？

浏览 15提问于2017-01-06得票数 1

回答已采纳

1回答

测试运行后HBASE数据库大小增加

hadoop、hbase、cluster-computing、hdfs

我用的是HDFS+HBASE。我已经创建了一个数据库并运行了2个小时的测试。我想在测试运行后检查数据库大小的增加情况。我曾尝试使用以下方法获取读数：hadoop fs -dus /hbase.du -sk /HADOOP.观察是在测试运行后，大小显示为减少而不是增加。使用的版本: ZooKeeper 1.0.0、

浏览 3提问于2012-10-10得票数 1

1回答

Amazon上的区域服务器数量

hadoop、hbase、elastic-map-reduce

假设我在Amazon弹性mapreduce上启动了一个集群，并有一个主节点实例、两个核心节点实例和15个任务节点实例。我也很想知道区域服务器分配将如何工作。

浏览 1提问于2013-10-03得票数 1

2回答

用户上传的图片:在前端限制文件大小还是在后端减少文件大小？

web-applications

显然，需要有一种方法来限制文件大小，但是这里最好和最常见的实践是--限制用户可以上传的图像的大小，还是在上传到后端后减小图像的大小？感谢您的指导！

浏览 37提问于2011-07-10得票数 0

1回答

Android -使用Base64在上传到服务器之前缩小图像文件大小

android

我试着在使用base64上传到服务器之前从图库中减少文件大小。我已经尝试了stackoverflow上的所有建议&我在互联网上找到的其他地方都没有成功。对于大于2MB的图像，一旦写入服务器，它们的大小似乎就会减小(降至约500KB)。然而，对于小于500KB的图像，在服务器上解码并写入后，它们似乎比原始文件大小(再次约为500KB)。有没有其他方法可以减少图像文件的大小并以编程方式上传到服务器？

浏览 10提问于2016-09-06得票数 0

1回答

上传前请缩小照片大小

ios、image-resizing

因此，在将照片上传到服务器之前，我希望减小照片的大小。我试着使用CANVAS HTML 5，它可以在安卓系统上运行，但不能在iOS 7或8上运行。上传之前有没有其他方法可以用来减小照片大小？

浏览 0提问于2014-12-25得票数 0

1回答

将数据传输到hadoop集群有很多种方法--例如，通过编程(例如，通过)编写数据，通过odbc连接器(例如，sqoop中包含的连接器)、通过或通过命令行工具进行传输。对于大规模、原始数据、传输能力，各种数据传输选项比较如何？我希望安排一个不规则的进程，将~3TB的数据传输到Hadoop集群中。没有太多的需求--只有我尽可能快地传输数据；数据传输步骤是这里最重要的瓶颈。数据可以传输到集群上的任何地方-- HDFS<em

浏览 4提问于2013-12-17得票数 2

2回答

如何在缩小镜像大小后将镜像上传到firebase react native

android、ios、react-native、blob、firebase-storage

实际上，我想使用数据或uri上传图像，而不是使用origURL，因为在使用uri上传uploading.Currently之前，我需要减小图像大小。

浏览 4提问于2017-12-14得票数 1

3回答

使用大量内存的UIImageJPEGRepresentation (Swift 3.0)

ios、swift、xcode、swift3

selectedUIImages { // doing something with the data 在iPhone 7上试过了，除了我的应用程序在循环时使用了高达700MB的内存之外，没有出现任何问题，但在较旧的iPhone上，我得到了这样的信息： *Message from debugger: Terminated due

浏览 38提问于2017-02-21得票数 3

1回答

Apache坚持“将长方体数据转换为HFile”

cube、kylin、warehouse

我在实验室设置中安装了以下堆栈：现在我尝试从Kylin本身提供的示例数据集构建一个多维数据集，这个过程将停留在78.26%的“将长方体数据转换为HFile”。日志不显示任何错误，几个小时后就会失败，可能是因为超时。你们中有人遇到这个问题并设法解决了吗？

浏览 2提问于2021-08-11得票数 0

2回答

Hbase，区域服务器，存储文件大小，索引

hadoop、indexing、compression、hbase、hortonworks-data-platform

在Hbase中，对索引表使用压缩吗？如果是，您使用什么类型的压缩？在/app/hbase/data/data/default，索引表的大小为380.0 G，在/apps/hbase/data/archive/data/default中，索引表的<e

浏览 6提问于2016-12-12得票数 2

回答已采纳

3回答

减小sybase sql anywhere db文件大小

sql、database、sybase、filesize、sqlanywhere

是否有可能减小sap sql anywhere数据库文件的大小？几周后，我们的数据库大小约为10 db，因为数据库不会自动减小db大小。但实际上，数据库只包含240MB的数据。sum((((table_page_count * DB_PROPERTY('PageSize')) / 1024) / 1024)) dbsize FROM SYST

浏览 1提问于2015-02-17得票数 0

1回答

HBase:如何更改表的memstore？

hbase、cloudera、cloudera-cdh

我们有一个要求，在第0天，我们将运行历史spark作业来将批量数据加载到HBase中。每天发布，我们只需将当天结束的数据添加到HBase即可。为了处理这种情况，我们希望在运行历史作业之前更改(增加大小) hbase表的内存存储区。在历史作业完成后，我们希望将内存库恢复为默认大小。谢谢

浏览 2提问于2019-04-02得票数 0

2回答

在Hbase中存储图像元数据丢失和Exif

java、hadoop、hbase、javax.imageio

使用Java程序将图像上传到hbase，检索图像后发现文件大小差异最终增加，并且大多数Exif和Meta数据丢失(GPS位置数据，相机详细信息等)。

浏览 0提问于2016-04-30得票数 2

1回答

读取文件并将其放入hbase的最快方法

java、file、hbase

我正在尝试从txt文件中读取数据并将其放入hbase表中。我在这些文件中有大约100亿条记录，预计我需要在一两天内完成它。问题是，它一直持续到第三天，还没有完成。

浏览 2提问于2016-04-16得票数 0

1回答

如何在删除数据后减小ms access数据库文件大小(.accdb) (MS Office2007)*

c#、winforms、ms-access

我想在删除数据后减小ms access数据库文件的大小。已删除数据，但大小保持不变。我正在使用MS Office2007。谁能告诉我怎样才能在删除后减小ms access数据库的文件<e

浏览 1提问于2011-11-25得票数 0

回答已采纳

2回答

HBase:为什么为每一列都存储行键？

hbase

我正在尝试减小HBase表的大小，并遇到了这样的情况：这表示为表中的每一列存储行键。这似乎是难以置信的浪费，需要我仔细注意添加到行键的每个字节，因为添加到表中的字节数将是存储的总列数。此外，我希望每一行都作为文档存储在数据库中的单个键下，但这并不是这样。那么，为什么要这样实现呢？

浏览 1提问于2015-08-09得票数 1

1回答

Nifi Hbase数据插入比原始数据占用更多空间

hadoop、hbase、apache-nifi

我正在使用Nifi实时进行数据转换，处理后的数据存储在Hbase中。我使用puthbasejson在hbase中存储数据。而我正在使用的存储row key/id是uuid。但在nifi数据证明或在线工具中，单个JSON的原始数据大小为390字节。但对于1500万个数据，其大小为55 GB，根据该大小，单个记录的数据大小为3.9KB。因此

浏览 53提问于2021-10-01得票数 2

点击加载更多