首页
学习
活动
专区
圈层
工具
发布

#数据

一个问题,两张图看懂三大分布式文件系统:GFS、Ceph、3FS 的愿景、架构与技术取舍

早起的鸟儿有虫吃

从零开发分布式文件系统(四):一道经典面试题,深度对比 CephFS 与 3FS 的元数据架构优劣 写8千字解释

200

为啥 DeepSeek-3FS元数据无状态,CephFS 的 元数据 要搞得这么复杂?

早起的鸟儿有虫吃

系统架构:多个节点组成一个集群,一个集群划分不同模块 支持不同协议客户端,元数据节点,数据存储节点,监控协调节点,虽然相同模块但是后台实现完全不一样

600

从零开发分布式文件系统(四):一道经典面试题,深度对比 CephFS 与 3FS 的元数据架构优劣

早起的鸟儿有虫吃

在 3FS 中,元数据服务是无状态的,所有元数据存储都依赖于 FoundationDB 等分布式事务性键值数据库。

800

存储扫盲:从端到端一致性到云盘,你必须知道的5个概念

早起的鸟儿有虫吃

举例: 你在电商平台下单,系统写入订单数据。如果发生系统崩溃,但订单数据仍能完整写入数据库和存储,这就是端到端一致性保证的效果。

200

[答疑]BlueStore 延迟写:先写元数据,数据位置还不确定怎么办?

早起的鸟儿有虫吃

就需要设计一个用于组织磁盘数据(例如将对象中的一段逻辑数据映射到物理磁盘等)的数据结构

1000

BlueStore write先写数据 还是元数据 一面试就迷惑 ,乔哈里视窗模型帮你理清思路,从青铜秒变王者

早起的鸟儿有虫吃

RocksDBStore:封装了rocksdb。BlueStore中的元数据持久化到rocksdb,BlueStore的事物依赖rocksdb实现。

300

【答疑】Ceph统一存储:文件、对象、块如何存储到同一个系统中

早起的鸟儿有虫吃

所有文件的元信息(文件名、目录结构、权限、大小等)由**MDS(元数据服务器)**管理

500

一致性哈希这么完美?为何TiDB/Ceph/Redis/GPFS 集体弃用

早起的鸟儿有虫吃

支持范围查询(Range Scan):连续 Key 可以在一个 Region 内完成查询。

400

从零开发分布式文件系统(三) :JuiceFS|沧海|3FS 能相互替代吗?百万 OPS如何满足(1)(ceph 默认5 千)

早起的鸟儿有虫吃

3FS 整个系统由四个部分组成,分别是 Cluster Manager、Client、Meta Service、Storage Service。

1000

从零开发分布式文件系统(三) :JuiceFS|沧海|3FS 百万 OPS 答疑(2)(ceph 默认 5 千)

早起的鸟儿有虫吃

Close-to-Open (C2O) 一致性模型在 Ceph 中被明确采用,尤其在 CephFS 文件系统中作为核心可见性保障机制

600

AI驱动的企业级全链路测试平台落地案例

老_张

看板清晰展示了AI用例数量、采纳个数、采纳率、需求点个数、接口个数、MCP应用数量统计等指标,通过数据化看板实时呈现打通“生成-应用-优化”闭环,助力用例生成效...

300

AI生成测试用例的痛点问题及解决方案

老_张

目前市面上太多所谓企业级落地的AI测试产品,事实上绝大多数是Demo玩具,而且纯靠系统支撑,也无法真正在企业落地。

400

DeepSeek模型的基本原理与训练方法

老_张

模型的训练数据依赖高质量、大规模和来源多样化的数据,且训练过程需要严格遵守法律法规,确保合法合规性。

800

AI生成测试用例时的幻觉问题解决方案

老_张

通过数据工厂对接数据字典获取字段元数据(类型/范围/格式),根据字段特性自动生成合规测试数据并对生成数据施加业务规则约束,同时构建字段关联矩阵(如商品类目→可用...

200

高速机电 | 高速公路光纤智能监测系统的设计与功能

高速公路那点事儿

对从资管系统读取的资源数据进行校核,核查数据为统计表格需要使用的所有指标数据,包括区域、类型、规模、电源、ODF架、光缆路由。

300

机电运维 | 高速公路机电设备智能监测系统的设计

高速公路那点事儿

随着智慧高速的建设需求,高速公路运行管理精准化、平台化、科学化,高速公路要实现全面感知精准化,平台深度融合,以数据分析为基础,采用科学量化方式为交通管理和决策提...

900

高速机电 | 情报板信息发布安全系统,这类产品的市场还有吗?

高速公路那点事儿

数据风险:发布信息数据无法明确发送者身份标识,发布信息数据过程中遭到篡改,无完整性验证。

400

数字化转型 | 智慧服务区的常见系统组成介绍,一文了解全貌

高速公路那点事儿

运营管理平台采用数据驾驶舱模式,将多个图表、报表等组件内容整合在一个面板上进行综合显示功能模块。使数据展现和数据分析结果更为直观、易理解,为决策者掌握运营动态和...

800

数字化转型 | 高速公路收费站智能化应用探索与思考

高速公路那点事儿

例如针对收费站收费数据的辅助分析,可以盘活数据资产,为收费站引车上道、文明服务提供数据支撑。

900

智慧感知 | 高速公路全息化智能感知系统的建设必须涵盖那些方面的数据采集?

高速公路那点事儿

新技术背景下智慧交通公路以管理和服务为导向,强调对数据的应用和发布,为满足车路智慧交互场景的应用,一方面需要实时获取海量的交通流动态数据和道路运行环境数据,实现...

1100
领券