在一个数据为王时代，数据安全视为一家企业命根子，因此如何保障企业数据安全尤为重要。本文主要从数据库容灾方案视角，基于当前客户业务并结合技术&产品，制定最佳容灾方案。...主要从以下三个方面来介绍： 方案设计要素 云上容灾方案 云上客户案例 1.方案设计要素 数据库容灾方案设计要素主要数据同步，数据一致性以及数据修复三个方面 。...平台容灾方案 客户业务场景最常用腾讯云数据产品主要是redis，cdb，mongoDB以及TDSQL。...数据产品 跨区容灾 就近访问 跨地容灾 CDB 支持 控制台自助配置 支持 跨AZ/跨地域RO实例 方案一：通过DTS支持，需要业务手工切换VIP 方案二：支持DTS双写能力，云上云下或多地域。...，对于2和3的诉求点，结合tdsql产品提供容灾建议。
随着云计算如火如茶的进行，IT资源可进行快速部署，弹性扩容及超高的性价比，这对于我们创建本地IDC机房数据库容灾提供极大的便利性。如何利用云数据库做容灾成为DBA的基本功。...（MySQL）的：同城同区灾备、同城不同区灾备、跨地域灾备。...同地域同可用区部署 云数据库 MySQL同可用区部署架构示意图 云数据库MySQL 普通实例架构(同个可用区) 同地域不同可用区部署 云数据库 MySQL 同城灾备实例架构...云数据库 MySQL 同城灾备实例架构（不同可用区） 说明：腾讯云数据库多可用区部署目前仅支持深圳金融专区，其他可用区的支持还在规划中。...跨地域部署 云数据库 MySQL 异地灾备实例架构 云数据库 MySQL 异地灾备实例架构 三、构建云上灾备环境 通过上面的介绍，我们基本了解云数据库 MySQL的架构，接下来我们来说说本地
随着云计算如火如茶的进行，IT资源可进行快速部署，弹性扩容及超高的性价比，这对于我们创建本地IDC机房数据库容灾提供极大的便利性。如何利用云数据库做容灾成为DBA的基本功。...，轻松来搭建数据库（MySQL）的：同城同区灾备、同城不同区灾备、跨地域灾备。...同地域同可用区部署 云数据库 MySQL同可用区部署架构示意图 云数据库MySQL 普通实例架构(同个可用区) 同地域不同可用区部署 云数据库 MySQL 同城灾备实例架构...云数据库 MySQL 同城灾备实例架构（不同可用区） 说明：腾讯云数据库多可用区部署目前仅支持深圳金融专区，其他可用区的支持还在规划中。...跨地域部署 云数据库 MySQL 异地灾备实例架构 云数据库 MySQL 异地灾备实例架构 三、构建云上灾备环境 通过上面的介绍，我们基本了解云数据库
我们来看一下数据中心防冻指南（非专业）： 数据中心中电子产品中的锂电池要避免暴露在低温中； 高温会引发故障，低温同样会。...在数据库层面，对于重要的业务系统构建灾备和冗余的高可用系统架构是必不可少的。...至少每一个数据中心的维护者，都应当考虑，在极端的情况下，如何从备份和灾备环境中生存下来。 当然，最重要的是，无论你需要的是数据恢复服务，还是灾备咨询实施服务，我们都可以为您提供专业的协助。...业务架构 电子渠道（网络销售）分析系统、数据治理 IT基础架构 分布式存储解决方案 | zData一体机 | 容灾环境建设 数据架构 Oracle DB2 MySQL NoSQL 专项服务：架构/安全/...容灾/优化/整合/升级/迁移 运维服务：运维服务 代维服务 人才培养：个人认证 企业内训 软件产品：SQL审核、监控、数据恢复 应用架构 应用软件和中间件：数据建模 | SQL审核和优化 | 中间件服务
中的数据, 所以Redis数据持久化是容灾恢复必备条件; Redis支持两种持久化方式: (1) RDB 持久化(默认支持): 该机制是指在指定的时间间隔内将内存中数据集写入到磁盘; (2) AOF 持久化...通过RDB文件可以方便的将redis数据恢复到某一历史时刻，可以提高数据安全性，避免宕机等意外对数据的影响。 3) 适合大规模的数据恢复, RDB的启动恢复效率高。...数据恢复完全依赖于磁盘持久化，如果rdb和aof上都没有数据，数据就无法恢复了。 Tips : 重点再记录、为保证数据容灾建议启用rdb与aof持久化机制，前者保证数据备份而后者保证数据的完整性。...rdbchecksum no Tips : 数据恢复到此结束，此方法只适合用于临时恢复和导出数据，数据完整性不敢保证。...也可以在两个redis之前同步数据并允许用户自定义同步服务来把redis数据同步到其他地方. ---- 0x01 备份容灾 一、备份 1.手动备份redis数据库 #!
大多数数据库实现都是静态的。部署后，将查询，更新，加载，卸载，重新组织数据库，并持续删除数据并从中插入数据。并且数据也可以定期复制到数据库和从数据库复制。...随着数据库的数据组成发生变化，存储需求也会发生变化。这意味着DBA必须在规划未来增长方面保持警惕。这涉及存储和容量监控。DBA必须密切关注数据量和访问数据的用户数量。...但它可能涉及额外的任务来支持其他数据和用户，包括： 重新设计应用程序 重新设计数据库 修改DBMS参数 重新配置硬件组件 调整软件界面 从中可以查看存储消耗的多个视角。...多个供应商提供存储管理和重组产品，可以随着时间的推移绘制数据库文件的增长和组织。通过警惕地监视数据库存储结构，明智的DBA可以从其数据库中收集模式并确定何时需要更多存储。...我的意思是，让我们面对现实吧，如果您不了解会增加需求并因此增加数据增长的新产品，您数据库的未来存储需求将超出您的理解能力。您的数据库将无法满足新业务的需求。
只有充分考虑了这些要素，才能确保数据库容量能够满足未来的需求。...这些要素共同决定了数据库的性能和效率，因此在选择数据库容量时，我们需要充分考虑这些要素，以确保数据库能够在各种应用场景中提供稳定、高效的服务。...这些因素直接影响着数据库的性能和效率，因此在规划数据库容量时，必须充分考虑这些要素，以确保数据库能够满足业务需求。...4、3备份方案 容灾备份方案，包括备份策略、备份位置、备份介质和备份恢复等方面。此外，定期进行容灾演练，可以检验备份方案的有效性。...备份策略：定期备份、实时备份、增量备份等 备份位置：本地备份、异地备份、云备份等 备份介质：硬盘、光盘、磁带等 备份恢复：数据恢复、系统恢复等 容灾演练：定期进行容灾演练，检验备份方案的有效性 以上先梳理出来各个大项的考虑因素
这里说的灾备测试主要指的是在我们测试过程中手工无法模拟，但是在用户使用产品的时候由于网络的原因又是会经常发生的情况，具体指的就是网络延时、请求失败、session失效等情况，下面我们就来看下针对这些情况我们该如何构造测试环境...续保确认失败"); } } } else { retMap.put("resultCode", "S0005"); retMap.put("resultMessage", "数据校验失败
是的，这是绝对的先决条件，因为您用于访问数据库层的内容将决定您需要扩展的灵活性。 能够分割读写 这是你需要做的事情，但不一定强制执行石头规则。...我想说的是，你必须熟悉你的系统和数据库特定的指标才能找出哪个部分是瓶颈。 你需要一个基线 始终确保您有可用的基本系统指标，以便至少在几周前可视化。...确定原始流量数量与使用容量的比率 这只是答案，“如果我们没有进行代码优化，有多少电子邮件/销售/在线用户/无论什么”我们可以使用我们现在拥有的数据库实例？...基于代码的性能瓶颈（来自最近部署的这个新查询实际上可以将其结果缓存在更便宜的东西中，并且不会超过数据库）。 你是怎样做的？您需要熟悉您的查询。...如果您可以采用选择性较低的采样，则需要检测应用程序与数据存储之间的整个对话。
本来准备着手讲一些实践，但是数据库部分没有讲到，部分实践会存在一些问题，于是就有了此篇以及后续——数据库容器化。...// 数据库容器化 // 什么是数据库？ 数据库，简而言之可视为电子化的文件柜——存储电子文件的处所，用户可以对文件中的数据运行新增、截取、更新、删除等操作。...） · Hypertable · Hadoop HBase 数据库容器化 随着Docker的流行，主流的数据库厂商均提供了相关的Docker镜像，因此我们能够非常方便的将数据库托管到容器之中，用于测试和开发环境...注意，现阶段我们不推荐在容器中托管正式环境的数据库，目前数据库容器化还存在一些问题、不适应性以及质疑，并且还缺乏成熟的案例和方案（已经有很多厂商在做这块的探索了，包括阿里、京东）。...数据库容器化绝不是一个伪命题，数据库容器化是值得我们来探索的一个方向，而且应是一种必然的趋势。在本篇中，我们不做过多探讨。 ? 接下来，笔者将逐步和大家分享如何将主流的数据库托管到容器之中。
本文重点介绍了美团数据库的容灾体系建设实践，主要内容包括业务架构、数据库容灾平台能力建设、演练体系建设以及这些建设取得的一些成果，最后也会分享一下容灾建设的未来思考。...整体架构如下图所示，业务上表现是多机房、多活形态，数据库采用这种主从架构，单机房处理写流量、多机房的负载均摊读流量。下面要讲“数据库容灾体系建设实践” 就是面向N+1架构的。...3 数据库容灾建设 | 3.1 面临的挑战 超大规模的集群带来的挑战：公司业务高速发展，服务器规模指数级增⻓，数据中心规模越来越大，大机房已有大几千数据库集群，上万个实例。...这些规则都会纳入容灾计算来确定集群的最终容灾等级。 在基础容灾数据建设中，会把上述规则代码化、计算流程化，通过近实时的方式做基础数据“保鲜”。...容灾数据是容灾管控平台上用于逃生切换和事中止损的基础数据，同时还会基于容灾数据建设风险隐患（即容灾不达标隐患），并通过一定的运营治理来消除这种隐患。
数据存储容灾建设主要从数据可靠性和业务稳定性两个维度阐述。这两者有哪些区别呢？...举个例子，业务数据存储在COS，如果该地域出现地震等极端灾难，COS所在机房被外力摧毁导致业务数据全部丢失，属于数据可靠性范畴；同样如果COS机房网络出现波动或者机器出现负载，导致客户端请求数据出现延时高或者中断...后台数据复制机制能在任何一个副本出现故障时迅速通过数据迁移等方式复制一个新副本，时刻确保有三个副本可用，避免单点故障引起的数据丢失等问题，提高数据的可靠性。...3.数据存储（cell）：主要是负责数据存储和副本复制功能。...1.2 对象存储（COS） COS将数据分散存储在城市中多个不同的数据中心，其中某数据中心故障了，多AZ存储架构依然可以为云上客户提供稳定可靠的数据服务，云上数据可靠性是12个9，即99.9999999999%
在数据库数量、容量和业务需求都没有爆发的情况下，更需要 DBA 做出极致的优化，更强调对数据库内核的掌握，10年前混过 ITPUB 的都知道，当时的 DBA 都是以写出极其复杂的 SQL 和掌握 Lock...同时，用户对于数据库运维自动化的要求越来越高，数据库即服务(DBaaS or RDS)的需求越来越强烈，AWS RDS 有个很精炼的总结： ?...数据如下： ?...同时模拟应用进行持续的数据更新操作，可以看到数据库服务在几次故障切换后始终可以保证更新有序，做到零数据丢失： ?...比如，修改数据库配置, 替换新的数据库版本，常见的做法就是DBA 人肉的一个节点一个节点的完成变更工作。下面将演示全自动滚动升级功能。
本来准备着手讲一些实践，但是数据库部分没有讲到，部分实践会存在一些问题，于是就有了此篇以及后续——数据库容器化。...数据库容器化 什么是数据库？ 数据库，简而言之可视为电子化的文件柜——存储电子文件的处所，用户可以对文件中的数据运行新增、截取、更新、删除等操作。...） · Hypertable · Hadoop HBase 数据库容器化 随着Docker的流行，主流的数据库厂商均提供了相关的Docker镜像，因此我们能够非常方便的将数据库托管到容器之中，用于测试和开发环境...注意，现阶段我们不推荐在容器中托管正式环境的数据库，目前数据库容器化还存在一些问题、不适应性以及质疑，并且还缺乏成熟的案例和方案（已经有很多厂商在做这块的探索了，包括阿里、京东）。...数据库容器化绝不是一个伪命题，数据库容器化是值得我们来探索的一个方向，而且应是一种必然的趋势。在本篇中，我们不做过多探讨。 ? 接下来，笔者将逐步和大家分享如何将主流的数据库托管到容器之中。
为了让企业能更好用好云平台的数据安全能力，本文重点云平台数据备份冷备能力，以腾讯云为例，主要从以下两个维度介绍：同城数据冷备能解决企业什么问题，达到怎么样业务容灾效果？...云平台对数据冷备能给予企业哪些帮助？1. 数据冷备介绍1.1 数据冷备概念数据冷备，业务数据文件在同地域或者跨地域定时做备份。...，数据备份存储在COS，具备地域级别容灾，RPO依赖于数据库备份周期以及时间。...本文小结同城冷备方案，在云平台的协助下，企业几乎0成本并拥有同城数据冷备能力来保障业务生命线。指标详细说明容灾能力具备同地域（不同可用区）数据备份能力，不具备不同地域的能力。...3.容灾演练能力建设，增加平时运维成本以及自动化工具开发功能。
异地数据备份挑战相对同城数据备份，异地数据冷备主要挑战是成本，主要是跨地域之数据传输带宽成本。...对于同城数据备份，对企业来说“零”成本，企业可以把所有数据都进行备份；而跨地域数据备份，需要对业务进行梳理，尤其数据量比较大的业务，来决策哪些业务需要异地数据备份。...异地数据冷备方案2.1 API实现方案数据备份：云平台的数据库数据备份均为同地域，因此需要将该备份数据上传到异地COS存储桶。...2.3 数据库备份服务数据库备份服务拥有一套完整的数据备份和数据恢复解决方案，具备实时增量备份以及快速的数据恢复能力，同时具备异地容灾能力。...2）配置数据库备份服务，主要包括备份数据源，备份规则配置。图片3）在北京地域新购同等规格的mysql数据库。4) 使用备份服务恢复在新购数据库恢复数据。注意恢复数据库要求为空库。图片3.
当前，市场上常见的容灾模式可分为同城容灾、异地容灾、双活数据中心、两地三中心几种。...同城容灾 同城容灾是在同城或相近区域内（≤200KM）建立两个数据中心:一个为数据中心，负责日常生产运行;另一个为灾难备份中心，负责在灾难发生后的应用系统运行。...异地容灾 异地容灾主备中心之间的距离较远（＞200KM)因此一般采用异步镜像，会有少量的数据丢失。异地灾难备份不仅可以防范火灾、建筑物破坏等可能遇到的风险隐患，还能够防范战争、地震、水灾等风险。...异地灾备中心是指在异地的城市建立一个备份的灾备中心，用于双中心的数据备份，当双中心出现自然灾害等原因而发生故障时，异地灾备中心可以用备份数据进行业务的恢复。...，所以称为“双活”和“多活”；后者是生产数据中心投入运行，灾备数据中心处在不工作状态，只有当灾难发生时，生产数据中心瘫痪，灾备中心才启动。
上一节我们讲述了SQL Server容器化实践（注意，SQL Server现在也支持跨平台），本节将讲述如何持久保存数据，并且接下来将逐步讲解其他数据库（MySql、Redis、Mongodb等等）的容器化实践...如何持久保存数据？ 默认情况下，在容器内创建的所有文件都存储在可写容器层中。这意味着： · 当该容器不再存在时，数据不会持久存在，并且如果另一个进程需要，则可能很难从容器中获取数据。...对于数据库(不仅仅是SQL Server)来说，了解 Docker 中的数据持久性至关重要！那么我们如何在docker中持久保存我们的数据呢，即使关联的容器已经删除的情况下？...使用数据卷持久保存数据库文件 卷是保存Docker容器中的数据的首选机制。虽然绑定挂载依赖于主机的目录结构，但卷完全由Docker管理。主要有如下好处： · 易于备份或迁移。...方式一，使用主机目录 首先，我们可以将主机目录加载为容器的数据卷，用来存储数据库文件。
业务数据备份采用热备方式，容灾指标RPO接近“零”；但是RTO指标还是依赖于业务部署测试自动化能力。业务会进一步需要，在数据热备技术架构下，在成本可控的情况下，是否能进一步提升RTO指标呢？...如果在灾备地域不仅仅部署数据节点，同时将接入层，服务层均进行部署。极端情况出现后，业务恢复省去资源购买，业务部署时间，大幅度缩减RTO耗时，从本质上可以提升RTO时间。...mysql采用数据同步方式做实时备份，这里未采用数据库自带灾备实例，主要是由于灾备实例为只读，不方便平时做容灾演练切换。...方案关键因素详细说明RPO/RTORPO接近为0；RTO分钟级别资源费用备份区实现最小化部署业务改造备份区业务需要适配数据资源地址数据备份依赖于云平台的数据备份能力，数据备份和恢复成本几乎为0。...业务恢复业务恢复成本较低，如果以下两个方面做的充分：1.灾备区日常业务验证能力，对于业务全面测试验证上线能力要求较高。2.容灾演练能力建设，增加平时运维成本以及自动化工具开发功能。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
腾讯会议
实时音视频
