作者 | 潘娟 伴随着互联网应用场景逐渐深入到生活的各个角落，为了确保前端用户的使用体验，对互联网产品的后端架构性能提出了更高的需求。如今，开发以及运维人员正在将工作重心和优化重点放在了后端基础设施的可用性、一致性、扩展性、弹性以及全面自动化管理等能够提升效率的技术能力层面。 1 背景：Kubernetes 环境中的微服务与数据库 应用部署的变化 一方面，在处处充斥着大数据以及高并发场景的今天，后台技术人员往往会花费更多精力在解决『大规模业务数据的存储与应用』等问题上，以确保数据库等基础设施能够
在过去几年间，“微服务架构”这个术语持续火热，它描述了一种将软件应用程序设计为可独立部署的服务套件的特定方式。尽管这种架构风格没有确切的定义，但围绕业务能力，自动化部署，网点智能以及语言和数据的分散控制等方面存在着某些共同特征。
随着数据存储需求的不断增加，分布式数据库成为了处理大规模数据的一种重要方式。分布式数据库可以将数据分散到多个计算节点上，并利用分布式计算的能力来提高数据处理的效率和可用性。然而，在使用分布式数据库的过程中，是否需要进行分库分表呢？
2019数据技术嘉年华于11月16日在京落下了帷幕。大会历时两天，来自全国各地上千名学术精英、数据库领袖人物、数据库专家、技术爱好者在这里汇聚一堂，围绕“开源 • 智能 • 云数据 － 自主驱动发展 创新引领未来”的大会主题，共享"开源自研，云和数据，智能运维，智能业务，数据前沿，用户实践"六大主题盛宴。
关系型数据库指的是使用关系模型（二维表格模型）来组织数据的数据库，由二维表及其之间的联系所组成的一个数据组织。
本项目由安超云投递并参与“数据猿年度金猿策划活动——2022大数据产业创新技术突破榜单及奖项”评选。
聊分布式数据库之前，先看看数据库的由来。我对数据库的最初认知来自于大学所学的一本书籍《数据库系统概论》(王珊 萨师煊版本)，下面开始聊聊数据管理。
“一个数据库包打天下的时代已经结束了”四川省农村信用社联合社信息科技中心高级工程师桂俊鸿在采访中表示。事务型、联机型、NoSQL、文档型、列式存储、时序数据库、图数据库……在近年来这些数据库热词背后，是数据库技术及产品在面向不同业务场景逐渐细化分类，发挥长处，最终助力企业实现数字化目标。由于传统数据库在扩展性、容量等方面不能满足日益增长的数字化需求，架构层面从集中式向分布式转型的分布式数据库及相关产品备受关注。
第一代的“存算一体”数据库是80年代的IBM大机，提供计算、数据库、存储、中间件，解决了核心交易场景对性能和可靠性的诉求，但他的缺点同样明显，贵！高昂的采购费用、封闭的硬件生态和高昂的售后维保价格，大机的垄断，即使是银行这类不差钱的企业也感到肉疼。大机有限的存储扩展能力，也限制了数据库的容量。
随着业务规模的扩大，传统数据库面临诸多限制，分布式数据库成为解决之道。本文 介绍了北京银行在数字化转型过程中对分布式数据库技术的探索，分享了 TiDB 在北京银行的应用历程和未来展望 。
在数字化时代，数据量呈现指数级增长，尤其是视频、图像、语音等数据急速积累。数据库，在整个数据价值体系中，承担着基石的作用。海啸一般的数据正在向我们迎面扑来，关于数据的整个计算、存储、应用技术体系，都必须经过大刀阔斧的改造，才能有效应对巨量的数据处理需求。那么，作为数据帝国的“重臣”，数据库该如何进化呢？答案是原生分布式数据库。
光大银行也是很有魄力的，拿出了一个重要的业务系统进行一次试点，做了一次这种分布式架构转型的项目。我有过十余年DBA相关的经验，不过之前接触比较多的主要还是传统的商用型数据库，所以能作为这次项目的推进人，也是我个人在这种新的架构下的一次学习的过程。
基于postgresql的内核，则这款数据库默认是可以将单机或集群的PostgreSQL 无缝（演讲者说的）迁移到TBASE。
历经300多个日夜，2021年8月，基于国产企业级分布式数据库腾讯云TDSQL打造的昆山农商银行新一代核心系统成功投产上线。它采用“微服务应用+国产分布式数据库”架构，该架构在同类银行中尚属首次。 新核心系统整体处理能力可以达到6300TPS（事务处理数/秒），可支持每日亿级交易量，在性能方面，高频帐户类交易平均响应时间在300毫秒之内，查询类交易平均交易响应时间在100毫秒之内，日终批量时间缩短至8分钟左右，季度结息17分钟左右，96秒完成10万笔社保代发，性能远超原核心系统，在全国同类型银行中处于
转载来源: https://www.cnblogs.com/ivan-uno/p/9051225.html
国际知名调研机构沙利文联合头豹研究院发布了《2021年中国分布式数据库市场报告》，报告显示：腾讯云数据库入选Frost Radar （弗若斯特雷达）领导者象限，增长指数排名第一。为帮助广大数据库爱好者进一步了解报告内容，洞察数据库发展趋势，腾讯云数据库邀请沙利文中国高级分析师胡竣杰解读最新报告。以下为解读视频及文字实录： 大家好，我是沙利文高级分析师胡竣杰，我将从四个方面的内容解读沙利文最新发布的2021年中国分布式数据库市场报告，分别为：中国分布式数据库的行业综述、分布式数据库技术发展概览、分布式数据库市
本文讨论了分布式数据库在在线扩容方面的挑战， 详细解释了一般分布式数据库和 TiDB 在扩容机制上的不同。 一般分布式数据库在进行在线扩容时，需要重新平衡数据分布，可能会影响系统的可用性和 IO 消耗。 相比之下，TiDB 的存算分离架构使得扩容对业务影响较小。
数据库部署架构是从容量、可用性、性能、成本等多方面权衡的结果，网商银行基础架构从建行之初满足快速业务响应的分布式架构，到单元化架构的落地，再到云原生时代，其中伴随着业务的快速发展，数据库的部署架构也经过多个版本的迭代发展。 容灾方面，从最初的“两地三中心”，具备机房级容灾，不具备全部的城市级容灾，经过扩容建设发展到现在的“三地五中心”。具体部署方式如图3-1-1所示，采用3-2-1的部署方式，任意一个城市的故障，通过选主（选择主库）实现主库的切换完成容灾。 图3-1-1 “三地五中心”架构 分布式业务
北京银行是一家城市商业银行，公司价值位列中国区域性发展银行的首位，依托于中国经济的大环境，北京银行的资产总量在全球千家大银行中名列第 61 位，连续六年跻身全球银行业百强。北京银行积极开辟多元化的业务经营，例如北京地区的社保缴纳和医保代发，都是由北京银行在提供服务，在你入职一家公司的时候，收到的医保折子就是来自北京银行。
1.分布式应用的概念和优势 分布式数据库是指利用高速网络将物理上分散的多个数据存储单元连接起来组成一个逻辑上统一的数据库。分布式数据库的基本思想是将原来集中式数据库中的数据分散存储到多个通过网络连接的数据存储节点上，以获得更大的存储容量和更高的并发访问量。近年来，随着数据量的增长，分布式数据库技术也得到了快速的发展，传统的关系型数据库开始从集中式模型向分布式存储，从集中式计算走向分布式计算。 分布式数据库系统的主要目的是容灾、异地数据备份，并且通过就近访问原则，用户可以就近访问数据库节点，这样就实现
分布式是指将一个业务拆分不同的子业务，分布在不同的机器上执行，集群是指多台服务器集中在一起，实现同一业务，可以视为一台计算机，一个云计算平台，就是通过一套软件系统把分布式部署的资源集中调度使用。要应对大并发，要实现高可用，既需要分布式，也离不开集群。
分布式是指将一个业务拆分不同的子业务，分布在不同的机器上执行，集群是指多台服务器集中在一起，实现同一业务，可以视为一台计算机，一个云计算平台，就是通过一套软件系统把分布式部署的资源集中调度使用。要应对
前两天 GitHub 的博客上发布了一篇题为「Partitioning GitHub’s relational databases to handle scale」[1] 讲述他们如何拆分自己的数据库。相关内容在 Hacker News[2] 上也引起了大家的关注。
水平拆分的概念随着分布式数据库的推广已为大部分人熟知，分库分表、异构索引、小表广播、这些功能几乎是产品功能需求标配。然而有些客户使用分布式数据库后的体验不尽如意。本文尝试从数据的角度总结分布式数据的复制（replication）和分区（partition）技术原理和方案，其中分区也有称为分片（sharding），希望能引起读者一些思考，在分布式数据库选型中能注意这些细节的区别，选择适合业务的数据水平拆分方案。
日前，TDSQL新敏态引擎正式发布，高度适配金融敏态业务。 该引擎完美解决对于敏态业务发展过程中业务形态、业务量的不可预知性，实现了EB级存储的Online DDL，能够大幅提升表结构变更过程中的数据库吞吐量，从而有效应对业务的变化。同时，腾讯独有的数据形态自动感知特性，可以使得数据能够根据业务负载情况自动迁移，打散热点，降低分布式事务比例，获得极致的扩展性和性能。 作为腾讯面向企业级应用场景的分布式数据库产品，目前TDSQL已在众多金融、政务、电商、社交等客户应用案例中奠定了金融级高可用、强一致、高性能
蚂蚁集团自研数据库OceanBase已经开源，这对国产分布式数据库来说，是一个重磅消息。一直以来OceanBase作为商业数据库，披露的技术细节并不多,以后又多了一个可以拿来研究的优秀分布式数据库。参考1[1]
2022年3月11日，重庆银行股份有限公司发布《2022年分布式数据库项目》招标公告，采购 260 万元。 货物规格型号及数量：分布式数据库*1套。 具体要求如下： 1、16节点的数据库物理服务器授权（按同城双中心部署架构，共4套独立集群，每套4节点，含数据复制或实时同步许可） 2、4套分布式群集管理配置许可（按同城双中心部署架构计算，含数据库群集管理模块或许可、运维工具、性能分析工具、监控工具） 3、一年原厂7*24维保服务；一年原厂DBA驻场服务及分布式数据库规划与设计服务（交付物包括不限于：《重庆银
分布式数据库是相对于集中式数据而言的，具备分布式数据管理能力的一种新型数据库软件产品。是面对高性能、大数据量业务系统，特别是无法进行大规模重构的业务系统，实现分布式能力引入的一种有效解决方案。分布式数据库具备数据分片管理、分布式事务、读写分离等关键分布式能力，能够为应用提供类似与集中数据库的使用方式，可以降低应用实施分布式改造的复杂度。近年来，各国产厂商都在积极推进分布式数据库产品的研发，技术已经逐步成熟，金融行业也已经有成功案例投入生产系统使用。本文尝试从多个角度，阐述金融行业分布式数据库转型所面临的问题及解决思考。
本文介绍了某超大型保险公司于 2023 年 11 月成功投产的全新核心保单系统，这是保险业首次采用全栈自主技术的核心业务系统。通过系统升级，该公司实现了从集中式到分布式架构的转变，借助国产 X86 服务器和 TiDB 分布式数据库显著提升了性能，为未来业务增长奠定了坚实基础。这一创新不仅在逻辑大集中的核心系统领域确立了新的标杆，同时也为金融行业关键系统的国产化建设提供了宝贵经验。
单体数据库时代，随着系统交易量的不断上升，数据库读写性能出现了严重下降。我们可以借助分库分表中间件，比如mycat、shardingjdbc来实现分库分表，缓解单库的读写性能。但是分库分表中间件并不支持事务，如果要保证数据一致性，就需要借助于分布式事务中间件，比如阿里巴巴的seata。后来分布式数据库逐渐成为解决数据一致性的选择，目前分布式数据库产品已经比较成熟，支持ACID事务，本文就来聊一聊分布式数据库。
在 2023 年 10 月 21 日，MySQL 5.7将达到其生命周期的终点（EOL,End of Life）。这意味着Oracle将不再为MySQL 5.7提供官方更新、错误修复或安全补丁。
随着全球经济下行压力增大，中美贸易摩擦愈演愈烈，美国一系列的经济制裁和技术封锁使得我们有种被扼住咽喉的感觉，数据库作为基础软件中的重要一环有着很深的技术含量，在这样的大背景下国产数据库厂商开始发力，这其中分布式数据库如雨后春笋般出现，良性的竞争环境使它们都得到了长足的发展，其中不乏优秀的产品，本文主要挑选目前几个相对成熟数据库进行架构特点介绍。
随着手机和互联网成为人们眼中的日常必需品，网站和商业服务每周接收数十亿次访问的情况已经司空见惯——这还只是一个侧面。
1.1 高并发，大流量 1.2 海量数据 存储及管理海量数据，需要大量服务器 1.3 高可用: 7 * 24 小时服务 1.4 用户分布广泛，网络环境复杂 1.5 安全环境恶劣 大型网站几乎每天都被黑客攻击 1.6 需求快速变更，发布频繁 1.7 渐进式发展
透明性：是指每一个数据库分布节点对用户的应用来说都是透明的，看不出是本地还是远程。
一、什么是分布式架构 分布式系统（distributed system） 是建立在网络之上的软件系统。 内聚性：是指每一个数据库分布节点高度自治，有本地的数据库管理系统。 透明性：是指每一个数据库
最近我问了很多Java开发人员关于最近12个月内他们使用的是什么大数据工具。 这是一个系列，主题为： 语言 web框架 应用服务器 SQL数据访问工具 SQL数据库 大数据 构建工具 云提供商 今天我
微信,说去测测 PolarDB for PostgreSQL , 业界大佬发话,岂敢不从. 下面是大佬给留下的问题,从这些问题看,都是对PG存在的一些问题的改进.
文章主要介绍了腾讯云分布式数据库DCDB的一些特性、架构、以及业务价值。DCDB可支持大容量、高并发的业务需求，同时具备高可用性、高性能、以及更优的TCO。在架构上，DCDB采用了全冗余、全解耦的设计，保证了高可用性。此外，DCDB还具备弹性扩展的能力，能够根据业务的需求自动调整计算资源。通过这些特性，DCDB能够满足金融行业对数据库的各种需求，包括高并发、高可用、高稳定性、以及低成本。
分布式存储的思想是将数据分散存储在多个节点上，以提高数据的可靠性、可扩展性和性能。它基于以下几个核心思想：
今天的话题有两层含义，第一层是说相对于我们所熟知的集中式数据库来说，分布式数据库是与之不同的。在做数据库选型的时候，我们要充分的了解其间的不同，才能做出较为科学的决策。我想很多数据库从业人员都了解其中的不同，不幸的是，他们不是数据库选型的决策者，大多数决策者并不了解这一点。
文章介绍了分布式数据库在项目中的使用场景，以及基于腾讯云DCDB的具体实现方案，包括分表、分库、负载均衡、高可用等方面的内容。
最近问了很多Java开发人员关于最近12个月内他们使用的是什么大数据工具。 这是一个系列，主题为： 语言 web框架 应用服务器 SQL数据访问工具 SQL数据库 大数据 构建工具 云提供商 今天我们
2022 年 1 月 6 日，由中国电子技术标准化研究院指导、 CSDN 主办、OceanBase 承办，InfoQ、木兰开源社区、开源中国、51CTO、思否、dbaplus、墨天轮、稀土掘金协办的【DC2021 分布式数据库开发者大会】正式开幕。受疫情影响，本场大会采用了线上的方式与数据库开发者共话当下最前沿的技术趋势，分析企业技术实践，共创“数聚未来”。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
腾讯会议
实时音视频
