首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
首页标签分布式存储

#分布式存储

🗄️Spring Boot 3 整合 MinIO 实现分布式文件存储

别惹CC

文件存储已成为一个做任何应用都不可回避的需求。传统的单机文件存储方案在面对大规模数据和高并发访问时往往力不从心,而分布式文件存储系统则提供了更好的解决方案。本篇...

5710

千亿级数据量,毫秒级读写,深度剖析探探LSM Tree存储引擎

童子龙

探探是挚文集团旗下一款月活超千万的社交软件,其部分核心业务数据依托于LevelDB进行存储,特别是用户滑动行为所生成的关系链及其各类关系类型的计数系统。该平台能...

18220

喜报!腾讯云存储荣获2024年度分布式存储产品金奖

云存储

腾讯云 | 云存储 (已认证)

在峰会发布的“2024存储风云榜”中,腾讯云数据加速器 GooseFS 荣膺“2024年度分布式存储产品金奖”。“2024存储风云榜”展示了数据存储领域的创新成...

5900

HBase、Elasticsearch、TiDB 的优势与局限性及适用场景分析

_春华秋实

在分布式存储领域,HBase、Elasticsearch 和 TiDB 是三种常见的技术,各自有独特的优势和局限性。以下是对它们的总结及适用场景分析,帮助你更好...

12820

搞懂数据最终一致性

写bug的高哈哈

今天我们来讨论一下数据最终一致性的相关问题。这个问题在分布式环境下非常典型,我们可以通过一个具体的业务场景来进行说明,下面是这个业务场景的示例图:

9810

解读Redis的四种企业级解决方案

后端小白

然而当我们在使用Redis时会遇到一些意外情况影响数据同步的一致性,从而影响到项目的数据查询的正确性;下面是使用Redis时的常见问题以及解决方案:

14300

Hadoop 2.0:主流开源云架构(一)

Francek Chen

  自从云计算的概念被提出,不断地有IT厂商推出自己的云计算平台,但它们都是商业性平台,对于想要继续研究和发展云计算技术的个人和科研团体来说,无法获得更多的...

6010

深入理解文件上传下载的原理及实现逻辑

Lion Long

文件上传的是根据 http 协议的规范和定义,完成请求消息体的封装和消息体的解析,然后将二进制内容保存到文件。

28510

加速分布式文件传输:掌握FastDFS-Nginx fast-mod扩展模块的关键技术要点

Lion Long

在每台storage服务器主机上部署nginx及FastDFS,由nginx模块对storage存储的文件提供http下载服务,仅当当前storage节点找不到...

6600

解锁效率:了解FastDFS文件同步机制

Lion Long

数据文件storage_groups.dat和storage_servers.dat中的记录之间以换行符(\n)分隔,字段之间以英文逗号(,)分隔。

18200

构建高可用文件存储:深入解析FastDFS集群部署的关键步骤

Lion Long

部署2个tracker server,两个storage server。 模拟测试时多个tracker可以部署在同一台机器上,但是storage不能部署在同一台...

11710

FastDFS的文件上传、下载原理以及负载均衡方法

Lion Long

高可用,通过冗余的方式提供服务。当集群中不止一个tracker服务时,由于tracker之间是对等的关系,客户端在上传文件时可以任意选择一个tracker。

13310

解密FastDFS:揭秘小文件存储的秘密

Lion Long

(1)Facebook存储了600亿张以上的图片,推出了专门针对海量小图片定制优化的Haystack进行存储。

12900

后端必考!一文读懂分布式存储架构背后的存储引擎原理

腾讯云开发者

很多应用都属于数据密集型应用,而非计算密集型;对于这类应用,CPU 往往不是第一限制性因素,关键在于数据量 、数据复杂度 和 数据的快速多变性;因此数据库的选型...

54020

如何优化DPU上存储协议(NVMe Over TCP)卸载的性能?

晓兵

NVMe-TCP 是一种基于 TCP 的高性能流水线存储协议,它抽象了对存储控制器的远程访问,为主机提供了本地存储的幻觉。在 NVMe-TCP 中,每个存储队列...

29410

分布式存储:为 StarTowerChain 数据治理保驾护航

Wbe3老于

在当今数据如黄金般珍贵的时代,数据治理对于 StarTowerChain 来说是重中之重。分布式存储作为一种先进的技术手段,正如同忠诚的卫士,为 StarTow...

6700

Kubernetes 使用Rook-Ceph作为持久化存储PV

繁华是客

在此之前,需要注意是,Ceph是分布式存储,如果你是3个节点,3个第二个硬盘。他是通过占用这3个硬盘,然后当成一个池子(Pool)来使用,他会通过内部算法来分片...

18110

DPU(IPU)使用 CXL 提升存储堆栈或服务工作流的软硬件处理流水线-INTEL

晓兵

• 使用 CXL 连接的设备内存(即 CXL.mem)作为 CPU+DPU 共享内存

21710

XPU - 利用 RAID 卸载重新定义数据冗余(部分功能卸载到SSD)

晓兵

XPU: xPU 代表一系列架构(即 CPU、GPU、FPGA 和其他加速器),具体取决于应用

25410
领券