首页
学习
活动
专区
圈层
工具
发布
首页标签分布式

#分布式

分布式系统(distributed system)是建立在网络之上的软件系统。由于软件的特性,分布式系统具有高度的内聚性和透明性。

从单点 AI 辅助到分布式 AI 研发部门:用一组 MacBook Air 组建"数字研发军团"的思考与尝试

无叶生花

过去一年,我和大多数人一样,把 AI 编程助手当成一个 IDE,架构设计、需求分析、研发代码、解释报错、写单测。它很好用,但本质是串行的:我一个人串起需求、前端...

2231

两地三中心双活怎么选?Shared-Disk与Shared-Nothing底层原理与压测对比

底层玩家老张

上个月帮客户做双活选型。核心交易系统要替换Oracle,数据量不大,两三百G。客户提了三个要求。两个机房同时对外服务,故障切换不能丢数据,容量要撑五年。供应商给...

7210

分布式数据库选型决策框架:数据量、一致性、运维能力三维度评估

这个DBA有点耶

去年,某能源集团的核心交易系统在业务高峰期遭遇了一次“惊魂时刻”——并发请求突破特定阈值后,单机架构的锁竞争导致响应延迟从50ms飙升到3秒以上,系统触发熔断,...

12310

金融核心业务数据库怎么选?5大硬指标 + 集中式/分布式路线全解析

数据库小学妹

先说一个常被搞混的概念。“金融数据库”和“金融数据终端”听起来像一回事,实际差着十万八千里。金融数据库是银行转账、基金清算背后那个管数据存取和交易的数据库管理系...

13310

集群与分布式区别:社区团购订单库三年升级,何时该升级

数据库小学妹

朋友小林做社区团购,他的订单库从一台破服务器,一路升级到分布式,整整用了三年。三年里,同一个问题他问了我三次:"集群与分布式,现在要不要上?"

15910

腾讯云服务器部署分布式爬虫对接代理IP实现百万级数据采集方案

永不掉线的小白

采用Master-Worker分布式架构+中心化代理IP调度,依托腾讯云弹性算力,实现任务拆分、分布式爬取、IP轮换、数据聚合存储,解决单机采集性能瓶颈。整体分...

14510

强化学习训练上云:分布式 GPU 集群的容器化实践

hollyx

分布式训练任务的性能不仅取决于单个节点的计算能力,还受到节点间网络拓扑的影响。TKE 针对分布式作业优化了资源分配和拓扑感知调度能力。当调度器为一个多节点训练任...

16010

国产化替代进入深水区:核心系统数据库替换的四个决策关卡

数据库小学妹

国产化替代,是通过自主创新实现技术和产品的自主可控,用国产软硬件体系替代被国外垄断的基础设施。芯片、操作系统、中间件、数据库这条链路,都要从"能用别人的"变成"...

23610

RDMA 高性能网络在 AI 训练中的应用:TKE 如何保障分布式训练效率

hollyx

RDMA 远程直接内存访问技术通过绕过 CPU 内核实现节点间高速数据传输,显著降低大规模 AI 分布式训练的通信延迟。腾讯云容器服务 TKE 提供统一 GID...

17910

微服务架构下的分布式日志追踪:从采集到根因定位

克劳德2048

摘要: 微服务架构中,一次用户请求可能跨越数十个服务节点,故障定位难度成倍增加。本文介绍如何通过 Trace ID 实现分布式日志关联追踪,结合 CLS 的检索...

14510

国产数据库选型实战:集中式/分布式/云原生路线对比与四步决策框架

数据库小学妹

前段时间公司要做国产数据库选型,领导让我负责一个政务系统的信创替换项目,从三四十款国产数据库里挑一个。翻遍了厂商官网,参数一个比一个好看,承诺一个比一个响亮,每...

24410

OceanBase三节点集群纯命令部署

用户8568070

官方推荐通过 OCP 部署 OceanBase 集群,或者使用 obd 来部署(类似于 tidb 的 tiup),由于 ocp 需要通过 OAT 或 obd ...

15210

深入内存优化:如何防止分布式爬虫在长时运行中导致的内存暴涨?

jackcode

重启,跑了一个小时,又炸了。看 Grafana 曲线,内存像楼梯一样一格格往上走,中间偶尔 GC 回落一点,但总体趋势是不回头地涨。我盯着那条曲线看了十分钟,心...

10510

集中式数据库选型避坑指南:缓冲池瓶颈排查、分布式事务代价与三年TCO对比

数据库小学妹

上周有个朋友找到我,说公司要上新系统,CTO拍板用分布式数据库,理由是"集中式太老了,迟早被淘汰"。我问他日均多少笔交易、数据量多大、需不需要跨地域部署,他愣了...

15310

壁仞科技首次推出NPO光互连、分布式解耦架构、最大1024卡超节点方案

芯智讯

7月17日-20日,2026世界人工智能大会(WAIC)正式在上海拉开帷幕,壁仞科技正式推出下一代NPO光互连、分布式解耦架构超节点方案,支持单个超节点1024...

47110

Python定时任务5种方法,从入门到精通

用户11081884

其实Python提供了5种处理定时任务的方法,从最基础到最专业,从简单脚本到分布式系统,总有一款适合你。

19310

Python 5个处理定时任务的方法,高效实用

用户11081884

Celery是一个强大的分布式任务队列系统,特别适合处理复杂的定时任务和异步任务。它支持多种消息代理(如Redis、RabbitMQ),能够实现任务的分布式执行...

18910
领券