首页
学习
活动
专区
圈层
工具
发布
技术百科首页 >智算中心 >智算中心的存储系统架构是怎样的?

智算中心的存储系统架构是怎样的?

词条归属:智算中心

1. 分层存储体系

智算中心采用分层存储架构,满足不同性能与成本需求:

  • 热数据层:全闪存阵列(NVMe SSD),提供最高 IOPS 和最低延迟,用于模型参数存储和频繁访问的训练数据
  • 温数据层:大容量 NVMe 设备,存储预处理后的训练数据集
  • 冷数据层:高密度 HDD 或对象存储,归档原始数据和历史模型

2. 并行文件系统

并行文件系统是 AI 训练场景的核心存储组件,主流产品包括:

  • Lustre:开源、成熟、超大规模,并行 I/O 性能卓越,适合超算和大规模 AI 训练
  • GPFS(IBM Spectrum Scale):企业级、功能丰富,元数据性能优势显著,适合小文件随机读写场景
  • BeeGFS:轻量、易用、高性能,适合中小规模 AI 集群
  • 华为 OceanStor Pacific:全闪、高密、多协议,企业级 AI 和大数据场景

3. 存算分离架构

现代智算中心普遍采用存算分离设计:

  • 计算节点:专注 GPU 计算,通过 RDMA 网络访问远程存储
  • 存储节点:独立部署,支持弹性扩展
  • 优势:避免存储成为瓶颈,提升整体系统可靠性
相关文章
探访全球最美超算中心是一种怎样的体验?
在欧洲大陆最南端、地中海西岸的西班牙巴塞罗那,其实也有一处科技信徒必须“打卡”所在。
量子位
2019-04-23
8530
数据是架构的中心
二十年前似乎没有像现在这么热衷于谈架构。我想其中最主要的一个原因就是数据量不大。因为数据量不大,所以当数据在一个数据库中的时候没有什么问题。而一个数据
薛晓刚-
2024-12-24
5.7K0
MyBatis的功能架构是怎样的
API接口层:提供给外部使用的接口API,开发人员通过这些本地API来操纵数据库。接口层一接收到调用请求就会调用数据处理层来完成具体的数据处理。 数据处理层:负责具体的SQL查找、SQL解析、SQL执行和执行结果映射处理等。它主要的目的是根据调用的请求完成一次数据库操作。 基础支撑层:负责最基础的功能支撑,包括连接管理、事务管理、配置加载和缓存处理,这些都是共用的东西,将他们抽取出来作为最基础的组件。为上层的数据处理层提供最基础的支撑。
红目香薰
2022-11-29
3970
落户中国云都,智算中心挑起区域发展的大梁
得益于数字经济的蓬勃发展,以智算中心为代表的新型基础设施正在迅速兴起。最新《全球数字经济白皮书(2022年)》白皮书显示,中国数字经济规模达到7.1万亿美元,位居世界第二,增长速度远超传统经济。与此同时,全国一体化大数据中心也在年初完成总体设计布局,东数西算工程正式全面启动,智算中心再度成为焦点。
大数据在线
2022-12-13
8450
产业的尽头是AI,云南交投智算中心让智慧交通跑出加速度
这句流传已久的民间谚语,道出了一个朴素而深刻的道理:交通是激活区域经济、带动产业兴旺的引擎。
Alter聊科技
2025-06-30
5520
点击加载更多
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档
领券