开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

如果一个带有_primary_shard优先级的GET请求登陆到一个只有副本碎片的节点上，该怎么办？

如果一个带有_primary_shard优先级的GET请求登陆到一个只有副本碎片的节点上，可以采取以下步骤：

首先，需要了解_primary_shard的概念。在Elasticsearch中，一个索引被分成多个分片（shard），每个分片可以有多个副本（replica）。_primary_shard是每个分片中的主分片，负责处理写入操作和协调读取操作。
当一个带有_primary_shard优先级的GET请求登陆到一个只有副本碎片的节点上时，该节点无法直接处理该请求，因为它只有副本碎片，没有主分片。
解决这个问题的方法是，该节点会将该请求转发给拥有主分片的节点。这个过程称为转发（forwarding）。转发请求的节点会根据_primary_shard的信息，将请求发送到拥有主分片的节点上。
拥有主分片的节点接收到请求后，会处理该请求并返回结果给转发请求的节点。
转发请求的节点再将结果返回给发起请求的客户端。

需要注意的是，以上步骤是Elasticsearch内部的处理机制，对于开发工程师来说，不需要直接干预这个过程。开发工程师只需要了解_primary_shard的概念和作用，以及在设计和开发应用程序时如何合理利用分片和副本来提高系统的性能和可用性。

推荐的腾讯云相关产品：腾讯云 Elasticsearch

腾讯云 Elasticsearch是基于开源的Elasticsearch分布式搜索和分析引擎构建的托管服务。它提供了高可用性、高性能、易扩展的搜索和分析能力，适用于日志分析、全文搜索、数据挖掘等场景。

产品链接地址：https://cloud.tencent.com/product/es

页面内容是否对你有帮助？

有帮助

没帮助

相关·内容

Elasticsearch文档读写模型实现原理

当主接受到来自副本的响应为拒绝它的请求时，此时的主分片会向Master服务器发送请求，最终将知道它已经被替换了，后续操作将会路由到新的主分片服务器上。如果没有副本，那会发生什么呢？...当一个节点接收到read请求时，该节点根据路由规则负责将其转发给相应的数据节点，对响应进行整理，并对客户端作出响应。我们称该节点为该请求的协调节点。基本流程如下：将读请求路由到到相关的分片节点。...根据第二步选择的各个分片，向选中的分片发送请求。汇聚各个分片节点返回的数据，然后返回个客户端，注意，如果带有分片字段的查询，将之后转发给一个节点，该步骤可省略。...异常处理：当一个碎片不能响应一个read请求时，协调节点将从同一个复制组中选择另一个副本，并将碎片级搜索请求发送给该副本。重复的失败会导致没有碎片副本可用。...由于数据首先是在主分片上进行索引后，然后才转发请求到副本，在转发之前数据已经在主分片上发生了变化，所以在并发读时，如果读请求被转发到主分片节点上，那该数据在它被确认之前（主分片再等待所有副本全部执行成功

5443 0

Elasticsearch Document Get API详解、原理与示例

如果所请求的字段没有被存储，它们将被忽略。...3.4 倾向性（优先级、Preference） Preference参数控制get请求对同一个复制组内多个副本的选择，默认情况下，该操作是在碎片副本之间进行随机分配的。...一言以蔽之，preference的作用是同一个复制组中的路由规则。其可选值： _primary 操作将只在主分片上执行。 _local 如果可能的话，操作将更倾向于在本地分配的碎片上执行。...当请求发到一个Node上，如果该Node上有对应的副本，则在该节点上执行，不会再将请求转发到其他节点。...自定义字符串值同一个自定义值，将会固定使用同一个分片（路由），该值通常会和会话信息绑定在一起，例如用户名，sessionId等，在应用层面对各分片节点进行分流。

1.9K2 0

1.Redis数据库基础入门介绍与安装

repl-timeout 60 # 同步后在副本套接字上禁用TCP_节点延迟？ # 如果选择“是”，Redis将使用更少的TCP数据包和更少的带宽向副本发送数据。...repl-backlog-ttl 3600 # Redis Sentinel使用它来选择复制副本，以便在主副本不再正常工作时升级到主副本(副本优先级)。...# 优先级较低的副本被认为更适合升级，因此例如，如果有三个副本的优先级为10、100、25 Sentinel将选择优先级为10的，即最低优先级。...；只有作为集群节点启动的节点才可以。...# 默认情况下，普通客户端不受限制，因为它们不会在不询问的情况下（以推送方式）接收数据，而是在请求之后，因此只有异步客户端可能会创建请求数据比读取数据更快的场景,相反发布订阅和副本客户端有一个默认限制，

9323 0

MongoDB数据库生产案例实践三部曲

； (3) 主机磁盘空间使用比率过大，数据库/集合存碎片比较多； (4) MongoDB版本为3.2，有一定的WT引擎内存死锁概率，建议升级到3.4版本； (5) Oplog在高峰期只有3.5分钟可同步数据时间间隔...存在的风险：比如3节点副本集，一主两从，如果oplog在高峰期，主库dml相当频繁，覆盖了oplog日志信息，而secondary节点没有接收到，则secondary...修改MongoDB架构在原来基础上，192.168.111.7为隐藏节点；添加了一个延迟节点111.8 将变成5个节点的副本集<建议为奇数，如果不添加延迟节点，也有添加一个仲裁节点...说明 (1) 如上只是一个升级主库的案例； (2) 事实上，先升级secondary，将该节点设置为隐藏节点，没有query后，在操作，基本不影响业务操作； (3) 然后再升级主库，当然会将某个secondary...提升为主库，在主从切换时，会有大概1~5秒的影响； (4) 从3.2升级到3.4是因为需要回收空间，在线添加节点是最有效的方式； (5) 如果不回收空间等其他操作，从3.4升级到3.6只需要按照官网操作即可

7793 0

Redis学习笔记—-Redis5.0.5配置文件详解「建议收藏」

#也可以删除所有以前配置的save,通过添加一个带有一个空字符串参数的save指令,就像下面的例子: #save "" save 900 1 save 300 10 save 60 10000 4.6.2...# 2) Redis副本能够执行与master如果复制链接丢失的次数相对较少 # 时间。您可能需要配置复制待办事项列表的大小(参见下一节)根据您的需要，使用一个合理的值。...#有些操作系统会真的把数据马上刷到磁盘上；有些则会尽快去尝试这么做。 #Redis支持三种不同的模式： #no：不要立刻刷，只有在操作系统需要刷的时候再刷。比较快。...这时，它只能取-1到-5 #这五个值，每个值含义如下： #-5: 每个quicklist节点上的ziplist大小不能超过64 Kb。...#注：这里的节点个数是指quicklist双向链表的节点个数，而不是指ziplist里面的数据项个数。 #实际上，一个quicklist节点上的ziplist，如果被压缩，就是整体被压缩的。

1.6K2 1

Redis使用——Redis的redis.conf配置注释详解（四）

# # --- SECURITY WARNING --- # # 如果你计划把Redis放在一个公开的地址到服务器Gopher页面，确保设置一个密码的实例。...# 使用此配置，可以配置单个节点的字节大小，以及在添加新流项时切换到新节点之前，该节点可能包含的最大项数。...# # 范围在1到500之间，但是值超过100通常不是一个好主意。大多数用户应该使用缺省值10， # 只有在需要非常低延迟的环境中，才应该将此值提高到100。...# 在更改这两个参数之前，理解它们的含义是很重要的。 # # LFU计数器每个密钥只有8位，它的最大值是255，所以Redis使用了一个带有对数行为的概率增量。...# # 分裂时基本上超过一定水平(见下面的配置选项)复述,将开始创建新副本的值在连续的内存区域利用特定Jemalloc特性 # (为了理解如果一个分配导致分裂和分配在一个更好的地方),与此同时，会发布旧的数据副本

3914 0

Elasticsearch索引、搜索流程及集群选举细节整理

数据到达的任何节点都将成为该批次的协调节点，并将数据路由到正确的位置，即使实际摄取工作是在保存目标索引数据的数据节点上执行的。管道和数据流数据通常到达单个标准索引，但也可以路由到数据流或摄取管道。...但是，虽然该segment现在存在于文件系统上，但它主要位于文件缓存中，实际上可能不在磁盘上，如果此时发生崩溃，这将是一个问题。...集群级别的问题通常与过程中的碎片丢失或移动有关。正常的流程是从协调器节点到主节点再到副本节点，但是如果在这个过程中主节点发生了变化，或者副本丢失了怎么办？...这个博客是关于搜索如何在相当深的层次上工作的，我们的目标是遍历从搜索请求到结果回复的过程，包括将查询路由到碎片、分析器、映射、聚合和协调。...这可能会令人困惑，因为在 Elasticsearch 中，一个不同的分片（带有分片 ID）实际上是一组单一的主副本及其可选的副本副本。

1.7K2 0

Elasticsearch 6.6 官方文档之「索引分片分配」

文章目录索引分片分配分片分配过滤节点离开时延迟分配取消分片迁移监视延迟的未分配分片永久删除节点索引还原优先级 每个节点的分片总数索引分片分配在本模块中，提供每个索引的设置，以控制分片到节点的分配...对于节点5上的每个主节点，主节点将副本分片提升为主节点。主节点将新副本分配给集群中的其他节点。每个新的复制副本都会在整个网络上复制主分片的完整副本。更多的分片被移动到不同的节点以重新平衡集群。...取消分片迁移如果延迟分配超时，主节点将丢失的分片分配给另一个节点，该节点将开始恢复。...索引还原优先级 尽可能按优先顺序还原未分配的碎片。...index_4将在下一个恢复，因为它具有下一个最高优先级。下一步将恢复index_2，因为它是最近创建的。 index_1将在最后恢复。

2.5K3 0

第04篇-如果通过elasticsearch的head插件建立索引_CRUD操作

UI熟悉-登陆页面现在让我们进一步探索elasticsearch-head插件。以下是用户界面登录页面的屏幕截图。让我们一一探索上图中的标记项目： 1.概述指示用户界面现在位于哪个选项卡上。...红色的群集健康状况表明群集中有一些尚不可用的节点（主分片），这可能是一个严重的问题，因此颜色为红色。如果某些副本分片不可用，则将显示为黄色，最后，如果每个分片均可用，则将显示为绿色。...该列显示节点列表，并提供选项以使用“ info”和“ actions”下拉列表查看节点详细信息。 7.分片信息分片是Elasticsearch中基本的存储单元。每个索引均分为碎片。...这些碎片可以分布在不同的节点之间或单个节点上。对于索引“ training-test-01”，我们在单个节点“ 9CCT_A1”上有5个分片。双击每个分片可获得状态和信息。...UI熟悉-请求页面下一个在elasticsearch-head中探索UI的主页是请求页面，如下所示：这个UI基本上允许我们执行上一个博客中通过终端执行的所有CRUD操作。

1.8K0 0

Elasticsearch针对文档Search与CRUD操作的执行流程

客户端的搜索请求落在了Node 3上，那么Node 3即成为了协调节点(coordinating node)；协调节点将会构建一个空的优先级队列(priority queue)。...协调节点将搜索请求广播(broadcast)到Node 1节点P1分片和Node 2节点RO分片中去；接下来，P1分片和RO分片分别构建优先级队列，然后分别获取匹配的文档，将其保存在各自优先级队列中。...协调节点Node 3分别给P1分片和RO分片发送一个multi GET请求。 P1分片和RO分片将这些相匹配文档的详情传递给协调节点。协调节点将最终数据返回给客户端。...GET /_search { "from": 90, "size": 10 } 试想一下，如果分页深度很深且分片足够多，而每个分片都要构建一个大小为from + size的优先级队列，此外...2.2 查询文档(GET) 客户端发送请求接收到该请求的节点即成为协调节点，该协调节点根据文档_id判断出文档所归属的分片(如果主本分片与副本分片，那么采用轮训算法选取一个分片)，最后将请求转发给该分片进行处理

3691 0

【Redis】Redis配置文件详解

（主要bind只能有一行配置，如果有多个网卡要监听，就配置多个ip，用空格隔开，否者只有配置的最后一个bind生效）。...值为1意味着slave只有在其master至少有一个其他工作的slave时才会迁移，以此类推。它通常反映集群中每个主机所需的副本数量。默认值为1（仅当副本的主副本至少保留一个副本时，副本才会迁移）。...默认情况下，普通客户端不受限制，因为它们不会在没有请求（以推送方式）的情况下接收数据，而是在请求之后接收数据，因此只有异步客户端可能会创建一个场景，其中请求数据的速度比读取数据的速度快。...范围在1到500之间，但是超过100通常不是一个好主意。大多数用户应该使用缺省值10，只有在需要非常低延迟的环境中才应该将值提高到100。...基本上，当碎片超过某个级别（参见下面的配置选项）时，Redis将通过利用特定的Jemalloc功能（以了解分配是否导致碎片并将其分配到更好的位置）开始在连续内存区域中创建值的新副本，同时释放数据的旧副本

1.2K2 0

慌得一逼，Kafka宕机后不再高可用？吓死宝宝了

但最近系统测试人员常反馈偶有 Kafka 消费者收不到消息的情况，登陆管理界面发现三个节点中有一个节点宕机挂掉了。...副本是以 Topic 中每个 Partition 的数据为单位，每个 Partition 的数据会同步到其他物理节点上，形成多个副本。...你说如果挂掉的是 Leader 怎么办？那就在 Follower 中在选举出一个 Leader 即可，生产者和消费者又可以和新的 Leader 愉快地玩耍了，这就是高可用。...你可能还有疑问，那要多少个副本才算够用？Follower 和 Leader 之间没有完全同步怎么办？一个节点宕机后 Leader 的选举规则是什么？直接抛结论：多少个副本才算够用？...如果有 Follower 由于网络、GC 等原因而没有向 Leader 发起拉取数据请求，此时 Follower 相对于 Leader 是不同步的，则会被踢出 ISR 列表。

1K2 0

Kafka宕机后不再高可用？探究Kafka高可用实现

从Kafka部署后，系统内部使用的Kafka一直运行稳定，没有出现不可用的情况。但最近系统测试人员常反馈偶有Kafka消费者收不到消息的情况，登陆管理界面发现三个节点中有一个节点宕机挂掉了。...是的，基于上面这张多副本架构图就实现了Kafka的高可用。当某个Broker挂掉了，甭担心，这个Broker上的Partition在其他Broker节点上还有副本。你说如果挂掉的是Leader怎么办？...Follower和Leader之间没有完全同步怎么办？一个节点宕机后Leader的选举规则是什么？直接抛结论: 多少个副本才算够用？...如果有Follower由于网络、GC等原因而没有向Leader发起拉取数据请求，此时Follower相对于Leader是不同步的，则会被踢出ISR列表。...而就是这个Topic，它的默认副本数为1。如果所有的Partition都存在于同一台机器上，那就是很明显的单点故障了！

4172 0

k8s容器的定向调度与亲和性

nodeName 强制将Pod调度到指定主机名的节点上，这种方式简单粗暴，没有经过scheduler的调度逻辑。示例 : 我有一个机器学习的应用，需要调度到集群中唯一的GPU节点上，可以这样做。...示例 : 我有一个机器学习的应用，需要调度到集群中带有hardware-type: gpu标签的节点上，带有该标签的节点有多台，可以这样做。...） Gt（key的value必须大于提供的值，仅支持整数） Lt（key的value必须小于提供的值）示例2：我有一个机器学习的应用，倾向于调度到集群中带有hardware-type: gpu，且区域...），并让他们的副本必须部署到同一个节点上，假设zeus已经部署好了，那athena的部署可以这样实现。...，相信看完全文的小伙伴都可以悟出其中奥妙，我们可以将高计算、高内存的Pod调度到指定的节点，避免影响关键服务运行，另外为了保障微服务的高可用性，我们通常会打散副本到不同的节点或者可用区等等，本期就介绍到这里

1111 0

解决Elasticsearch分片未分配的问题「译」

在Elasticsearch中，健康的群集是一个平衡的群集：主分片和副本分布在所有节点上，以保证有节点故障时的持久可靠性。但是当你看到分片是UNASSIGNED状态的时候该怎么办？...他们也被引导到localhost，它假定你在本地提交请求; 否则，请替换localhost您的节点的IP地址。...换句话说，主节点不会将主分片分配给与其副本相同的节点，也不会将同一分片的两个副本分配给同一个节点。如果没有足够的节点相应地分配分片，分片可能会处于未分配状态。...由于三个节点中的每一个已经包含该分片的副本，所以尚未分配每个主分片的两个副本。解决此问题，可以将更多数据节点添加到群集或减少副本数量。...根据Elasticsearch文档，主节点不会将主分片副本分配给任何运行旧版本的节点。例如，如果主分片在版本1.4上运行，则主分区将无法将该分片的副本分配给运行1.4之前任何版本的任何节点。

7.4K1 0

CDN缓存的那些事儿

缓存优先级 不缓存配置（后台设置） > 自定义缓存配置（后台配置） > 源站缓存配置 > 默认缓存策略 PS:源站缓存配置，指 Cache-Control 和 Expires 请求头的设置缓存刷新和缓存预热...当用户对该资源发起请求时，节点会回源拉取资源，并缓存一份更新后的资源在分发节点。当源站有针对资源进行批量更新时，可以通过规则刷新来刷新节点缓存文件。...实际上，规则刷新并没有删除节点资源，而是规则一旦生效之后，缓存在 CDN 节点的资源会被标记为过期，新的请求会回源校验一次，如果源站该资源有更新，则将新的资源响应给最终用户并替换节点上的旧资源。...可以通过浏览器获取响应头信息（参考[浏览器获取网络请求信息]）,Age值表示在CDN上的缓存时间，单位为秒。...对于动态文件一般类似是带有cookie id 的登陆页面，交易页面，或者是需要与数据库进行交互生成的页面，建议直接在后台配置不缓存。然后在提交一下刷新，过10分钟以后在尝试登录一下。

1.6K0 0

elasticsearch的查询流程分析

（一）query（查询阶段）当一个search请求发出的时候，这个query会被广播到索引里面的每一个shard（主shard或副本shard），每个shard会在本地执行查询请求后会生成一个命中文档的优先级队列...请求到索引里面每一个主shard或者副本shard上，每个shard会在本地查询然后添加结果到本地的排序好的优先级队列里面。...上面提到一个术语叫coordinating node，这个节点是当search请求随机负载的发送到一个节点上，然后这个节点就会成为一个coordinating node，它的职责是广播search请求到所有相关的...节点标识了那些document需要被拉取出来，并发送一个批量的mutil get请求到相关的shard上 2，每个shard加载相关document，如果需要他们将会被返回到coordinating...节点上收集所有的结果数进入一个全局的排序列表后，然后获取根据from+size指定page页的数据，获取这些docId后再构建一个multi-get请求发送相关的shard上从_source里面获取需要加载的数据

2.7K8 0

Redis配置文件详解

同时需要注意的是如果注释掉bind后面的内容，运行Redis的计算机将直接暴露于在internet上，绑定到所有接口是危险的，并且会暴露向互联网上的每个人提供实例。...，例如，如果有三个副本的优先级分别为10、100和25，Sentinel将选择优先级为10的副本，这是最低的 However a special priority of 0 marks the replica.... # 如果Redis无法根据该策略删除密钥，或者如果该策略设置为'noeviction'，则Redis将开始对将使用更多内存的命令（例如SET，LPUSH等）进行错误答复，并将继续回复诸如GET之类的只读命令...这提高了群集抵抗故障的能力，否则如果孤立的主节点没有可用的副本，则该主节点在发生故障的情况下无法进行故障转移 Replicas migrate to orphaned masters only if there...master的slave数量大于该值，slave才能迁移到其他孤立master上，如这个参数若被设为2，那么只有当一个主节点拥有2 个可工作的从节点时，它的一个从节点会尝试迁移。

1.9K4 0

GFS — 取舍的艺术

Master 节点只有一个，其他的都有多个。本质上，Chunkserver 和 Client 都表现为 Linux 系统上的一个或一组进程。...举个例子，假设每个租约会带上其失效的时间戳，此时间戳在 Master 上产生，在主备份节点上被测试，如果主备份节点时钟慢，那么它续约之前 Master 可能就认为该租约超时了，从而将租约授权给另一个备份节点...因此追加写对记录的最大大小是有要求的，不能超过块大小的四分之一，这样每次追加写的时候每个块浪费最多不超过四分之一。如果记录在任何一个备份节点上写入失败，客户端都会对该追加操作进行重试。...副本数差的越多，优先级就越高，这不难理解，毕竟差的越多，该数据块不可恢复的危险就越大。文件的活跃状态。举两个极端例子，如果最近文件很活跃，比如说在创建中，那么就优先对该文件所含文件块进行副本补齐。...最后，Master 会周期性的进行系统范围内的副本挪动以充分利用硬盘空间并进行负载均衡。同时，这种周期性操作也会将一个新加入集群的节点慢慢的填满，而不是直接将所有的写请求打过去以迅速填满该节点。

1.1K2 0

Kubernetes 调度器介绍

Priorities Priorities阶段即再次对节点进行筛选，如果有多个节点都满足条件的话，那么系统会按照节点的优先级(priorites)大小对节点进行排序，最后选择优先级最高的节点来部署 Pod...： PodFitsResources：节点上剩余的资源是否大于 Pod 请求的资源 PodFitsHost：如果 Pod 指定了 NodeName，检查节点名称是否和 NodeName 匹配 PodFitsHostPorts...RC 下面的多个 Pod 副本，尽量调度到多个不同的节点上，当一个 Pod 被调度的时候，会先去查找该 Pod 对应的 controller，然后查看该 controller 下面的已存在的 Pod，...运行 Pod 越少的节点权重越高 ImageLocalityPriority：就是如果在某个节点上已经有要使用的镜像节点了，镜像总大小值越大，权重就越高 NodeAffinityPriority：这个就是根据节点的亲和性来计算一个权重值...其中 value 为 32 位整数的优先级，该值越大，优先级越高 globalDefault 用于未配置 PriorityClassName 的 Pod，整个集群中应该只有一个 PriorityClass

7793 0

点击加载更多

扫码

添加站长进交流群

领取专属 10元无门槛券

手把手带您无忧上云

扫码加入开发者社群

相关资讯

热门标签

活动推荐

运营活动

活动名称

广告关闭