在分布式系统的发展历程中，协调服务始终扮演着关键角色。ZooKeeper作为一个高度可靠的分布式协调服务，自诞生以来便成为众多大型系统的核心基础设施。最初由雅虎...

在分布式系统中，ZooKeeper作为一个高可用的协调服务，承担着维护配置信息、命名服务、分布式锁和集群管理等关键职责。它的核心价值在于提供强一致性的数据存储和...

在当今数据驱动的时代，分布式消息系统已成为现代互联网架构不可或缺的一部分。Apache Kafka作为其中的佼佼者，凭借其高吞吐、低延迟和可扩展性，广泛应用于实...

Coban 是 Grab 的实时数据流平台团队，一直致力于围绕 Kafka 构建生态系统，服务于 Grab 各个业务领域。平台作为 Grab 数据湖的入口，从不...

本文作者为沃尔玛开发者 Ankur Ranjan 与 Sai Vineel Thamishetty 。二人长期关注 Apache Kafka 与流处理系统的演进...

JuiceFS 能够将各类对象存储接入本地，并支持跨平台、跨地域的多主机同时读写。采用数据与元数据分离存储的设计，文件数据经切分后存储于对象存储，而元数据可保存...

在 AI 训练中，业界往往将关注点集中在计算资源上，但如果存储性能不足，GPU 无法被充分利用，计算效率将会大幅受限。因此，存储系统的性能对于提升整体训练效率至...

传统的向量数据库简直就是存储“巨兽”。它们为每一个文档都预先计算好嵌入（Embeddings）并全部存储下来，磁盘空间很快就会被塞满。LEANN则不一样：

将数据存储到 linux 操作系统种，会先存储到页缓存（Page cache）中，按照时间或者其他条件进行刷盘（从 page cache 到 file），或者通...

3. 也可以用MySQL来做固化存储，redis做缓存，读写操作都落缓存，异步线程定期刷DB；

为了减少离线消息的冗余度，增加一个群消息表，用来存储所有群消息的内容，离线消息表只存储用户的群离线消息msg_id，就能大大的降低数据库的冗余存储量。

有一类业务场景，没有固定的schema存储，却有着海量的数据行数，架构上如何来实现这类业务的存储与检索呢？

百度为何能实时检索出5分钟之前新出的新闻？同城为何能实时检索出1秒钟之前发布的帖子？

当然，除了APPEND_ONLY向量存储，还支持TRANSIENT类型的向量存储，这更多是便于测试或者用完即弃的场景。

② redis作为限流计数器的外置存储，令牌桶算法在redis上实现原理：核心是使用hashmap存储当前请求用户的令牌桶状态（current_tokens, ...

在嵌入式系统开发中，SD NAND因其小尺寸、高可靠性和易用性成为众多项目的首选存储方案。然而，开发过程中经常会遇到CRC（循环冗余校验）错误的问题，这不仅影响...