Elasticsearch基于磁盘的分配和分层存储(热-温)优先
Elasticsearch基于磁盘的分配和分层存储(热-温)优先是指Elasticsearch在处理数据时，会根据数据的热度和优先级，将数据分配和存储到适当的磁盘上。
具体来说，Elasticsearch将数据分为热数据和温数据两个层级。热数据是指经常被访问的数据，对查询性能和响应时间要求较高的数据；温数据是指不经常被访问的数据，对查询性能和响应时间要求相对较低的数据。
在磁盘分配方面，Elasticsearch会将热数据分配到性能较高、响应速度较快的磁盘上，以提高查询性能和响应时间。而温数据则被分配到性能较低、响应速度较慢但存储容量较大的磁盘上，以降低成本。
在数据存储方面，Elasticsearch使用了基于Lucene的倒排索引技术。对于热数据，Elasticsearch会将其存储在内存或快速磁盘上，以加快查询和响应速度。而对于温数据，Elasticsearch会将其存储在普通磁盘上，以满足存储容量需求。
该优先级分配和存储策略使得Elasticsearch能够更好地适应不同数据的访问模式和需求，提供更高效、灵活的数据存储和查询能力。
推荐的腾讯云相关产品：腾讯云Elasticsearch服务 产品介绍链接地址：https://cloud.tencent.com/product/es
相关·内容
我正在设置Elasticsearch集群的基线和POC，目前我正在使用4台服务器，其中3台将容纳弹性集群，但存储空间有限(可能无法容纳每天预期的数据)。如果我设置一个3热-1热的分层存储，如果3个热服务器几乎被填满，它会重新分配分片到1温服务器以平衡数据吗？我想知道的是，当启用基于磁盘的分片分配</em
浏览 38提问于2019-10-08得票数 0
设置为3个节点，两个具有5tb存储的温节点和一个具有2TB的热节点。我想将2tb的存储添加到两个节点中的每个节点上。不使用坞-组合文件。
弹性映像是在没有指定卷的情况下启动的，但只指定<em
浏览 6提问于2022-04-14得票数 0
回答已采纳
1回答
使用Windows 2008 R2中的OMSA工具，我创建了一个新的RAID 5数组和名为Vault的虚拟磁盘。📷正如您所看到的，总的存储容量是4,655 am当我使用6×1TB的HDD时，它不应该更大吗？所有磁盘都不分配热备件。另外，我想把一个热备用的</e
浏览 0提问于2017-07-19得票数 1
回答已采纳
2回答
我有一个类，它存储文档并使用elasticsearch客户端对它们进行索引。我希望索引只在内存中，除非显式地保存到磁盘上。具体地说：
但是，Elasticsearch实际上是一种磁盘上服务(直接将索引写入磁盘，在请求时删除)。有什么方法可以从Elasticsearch获得期望的行为吗？
浏览 3提问于2020-11-03得票数 0
编辑:我升级了，现在当我尝试将新磁盘分配为全局热备用时，收到以下消息：
警告物理磁盘0:0:0:此物理磁盘不适合保护此控制器上的所有当前或潜在虚拟磁盘。可能的原因包括:物理磁盘空间不足、SAS和SATA类型物理磁盘的不支持混合、SSD和HDD类型物理磁盘的不支持混合、512字节和4K扇区大小物理磁盘</
浏览 0提问于2015-12-18得票数 0
回答已采纳
1回答
我已经创建了ES集群(版本5.4.1)，其中包含4个数据节点、3个主节点和一个客户端节点(kibana)。数据节点为r4.2xlarge aws实例(61g内存，8vCPU)，为ES JAVA分配30G内存。更多数据节点？更多客户端节点？更大的节点？更多的复制品？任何可以提高性能的东西都是一种选择。
有没有人有类似的设计或负载？我很高兴听到关
浏览 0提问于2017-08-22得票数 1
这是我之前问过的一个问题的后续。我现有的索引存储在每个节点的/data1/elasticsearch中。查看我发现的的Elasticsearch文档
El
浏览 9提问于2021-05-04得票数 0
回答已采纳
启用复制时，Ehcache是否会将底层磁盘存储区复制到其他节点？当在缓存中搜索到溢出到磁盘的元素时，缓存是在磁盘上搜索该元素还是返回NULL？
浏览 1提问于2017-02-13得票数 0
我已经习惯了传统的无菌疗法。在传统的SAN上，我们可以创建存储层(快速磁盘、慢磁盘)，然后从这些存储层分配卷。这样，需要超低延迟和超高吞吐量的设备就可以从闪存盘中生成卷，而数据仓库可以获得建立在慢速旋转介质上的卷，等等。显然，这是用于块存储的，但我正在试图找出gluster是否支持类似的内容。如果我部署9个存储节点，每个存储节点10个磁盘
浏览 0提问于2018-09-04得票数 2
回答已采纳
Windows 2016 (或Windows 2012 R2)是否允许创建具有以下配置的分层镜像存储空间卷：SSD层:1个SSD驱动器
例如，我有2×136 GB的HDD和1×250 GB的SSD，我希望将其设置为386 GB (136 GB + 250 GB)的单一卷，这样的方式是通过RAID 1保护HDD，但SSD不是镜像的。然后，我可以使用SSD进行回写缓存
浏览 0提问于2016-10-29得票数 5
我正在研究HCI解决方案，其中大多数似乎是围绕RAIN (独立节点冗余阵列)、高速缓存或以快速、昂贵的缓存磁盘(SSD/NVMe)和廉价的、较慢的容量磁盘(SATA/SAS)的形式对“热”和“冷”数据进行分层在Microsoft的中，他们在Docs中给出的混合服务器节点示例是4×4 TB SATA驱动器由2×800 GB的SSD作为缓存
浏览 0提问于2017-08-16得票数 1
我计划使用一个基于VMWare的设置，由两个VMWare服务器(2个CPU，256 am内存)和一个DAS (带24x900GB磁盘的DELL MD3220 )组成。为了提高存储容量，我们将在MD3220中添加一个24x900GB的MD3220外壳。两个DAS都将有2个控制器。问题是如何最好地分割两个DAS以获得最佳的IOPS/MBps，每个DAS必须有2个热备件？对于RAID 5的设置:一般来说，在所有2
浏览 0提问于2012-12-04得票数 2
回答已采纳
我的索引处于“黄色”状态，因为有一个分片未分配。我的三个数据节点总体上有足够的磁盘空间，但它们是分区的。每个数据节点有三个磁盘分区，分别称为/data1、/data2和/data3。Elasticsearch只在/data1上存储分片。retry_failed"
尝试重新分配碎片。在这个集群上还有一个小得多的第二个索引，它处于绿色状
浏览 49提问于2021-04-20得票数 0
2回答
工件备份策略
、、、
我正在检查每周备份存储库的最佳方法是什么。什么是最好的方法？我们有许多每天都与Jenkins一起构建的项目，因此：
*我认为不需要每周备份，因为我们应该使用外部备份工具(如)每周备份当前的备份。其主
浏览 4提问于2014-04-14得票数 0
我有一个svn回购，是17G的大小。我尝试采取svnadmin转储的回购和转储大小为42 G。为什么这么大？蒂娅！
浏览 2提问于2017-05-17得票数 1
回答已采纳
1回答
弹性搜索错误
、、
[Failed to execute phase [query], all shards failed]","status":503}Elasticsearch::Transport的日志
pavan@Pavan-Inspiron-3542:~/elasticsearch-1.4.4/bin$ .this.In，我们的rails应用程序中，我们使用elasticsearch为renters搜索由landlords发布
浏览 3提问于2015-03-11得票数 1
回答已采纳
2回答
{ "cluster_name"："elasticsearch"，"status"："red"，"timed_out"：false，"number_of_nodes"：10，"number_of_data_nodesactive_shards"：8862，"relocating_shards"：12，"initializing_shards"：0，"unassigned_shards&qu
浏览 0提问于2018-01-19得票数 3
我计划使用数据来解决集群问题，其中包含一个具有二进制值的列--买进/卖出。热编码属性(添加两列买卖，并将1放在适当的列上)？
这两种名义到数字转换方法如何影响流行聚类算法的最终模型(K均值、层次化等)
浏览 0提问于2020-02-26得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
