企业业务敏感程度差异，对容灾指标RPO&RTO要求也不同。之前两篇文章主要介绍数据冷备，主要特点是数据备份存储非实时，备份系统存储数据通常昨天的数据，当灾难真正来临的时候，今天新产生的数据会丢失情况。对于企业核心业务来讲，业务恢复（RTO）可以接受小时级别，但是对于数据无法接受丢失，即RPO接近为“零”。结合腾讯云数据备份能力，本文重点介绍数据热备解决方案，旨在让客户上好云，用好云，管好云。
在一个数据为王时代，数据安全视为一家企业命根子，因此如何保障企业数据安全尤为重要。本文主要从数据库容灾方案视角，基于当前客户业务并结合技术&产品，制定最佳容灾方案。主要从以下三个方面来介绍：
1.通过工具DTS的设计器进行导入或导出 DTS的设计器功能强大，支持多任务，也是可视化界面，容易操作，但知道的人一般不多，如果只是进行SQL Server数据库中部分表的移动，用这种方法最好，当然，也可以进行全部表的移动。在SQL Server Enterprise Manager中，展开服务器左边的+，选择数据库，右击，选择All tasks/Import Data...(或All tasks/Export Data...)，进入向导模式，按提示一步一步走就行了，里面分得很细，可以灵活的在不同数据源之间复制数据，很方便的。而且可以另存成DTS包，如果以后还有相同的复制任务，直接运行DTS包就行，省时省力。也可以直接打开DTS设计器，方法是展开服务器名称下面的Data Transformation Services，选Local Packages，在右边的窗口中右击，选New Package，就打开了DTS设计器。值得注意的是：如果源数据库要拷贝的表有外键，注意移动的顺序，有时要分批移动，否则外键主键，索引可能丢失，移动的时候选项旁边的提示说的很明白，或者一次性的复制到目标数据库中，再重新建立外键，主键，索引。 其实建立数据库时，建立外键，主键，索引的文件应该和建表文件分开，而且用的数据文件也分开，并分别放在不同的驱动器上，有利于数据库的优化。 2. 利用Bcp工具 这种工具虽然在SQL Server7的版本中不推荐使用，但许多数据库管理员仍很喜欢用它，尤其是用过SQL Server早期版本的人。Bcp有局限性，首先它的界面不是图形化的，其次它只是在SQL Server的表（视图）与文本文件之间进行复制，但它的优点是性能好，开销小，占用内存少，速度快。有兴趣的朋友可以查参考手册。 3. 利用备份和恢复 先对源数据库进行完全备份，备份到一个设备（device）上，然后把备份文件复制到目的服务器上（恢复的速度快），进行数据库的恢复操作，在恢复的数据库名中填上源数据库的名字（名字必须相同），选择强制型恢复（可以覆盖以前数据库的选项），在选择从设备中进行恢复，浏览时选中备份的文件就行了。这种方法可以完全恢复数据库，包括外键，主键，索引。 4. 直接拷贝数据文件 把数据库的数据文件（*.mdf）和日志文件（*.ldf）都拷贝到目的服务器，在SQL Server Query Analyzer中用语句进行恢复： EXEC sp_attach_db @dbname = ’test’, @filename1 = ’d:mssql7data est_data.mdf’, @filename2 = ’d:mssql7data est_log.ldf’ 这样就把test数据库附加到SQL Server中，可以照常使用。如果不想用原来的日志文件，可以用如下的命令： EXEC sp_detach_db @dbname = ’test’ EXEC sp_attach_single_file_db @dbname = ’test’, @physname = ’d:mssql7data est_data.mdf’ 这个语句的作用是仅仅加载数据文件，日志文件可以由SQL Server数据库自动添加，但是原来的日志文件中记录的数据就丢失了。 5. 在应用程序中定制 可以在应用程序（PB、VB）中执行自己编写的程序，也可以在Query Analyzer中执行，这种方法比较灵活，其实是利用一个平台连接到数据库，在平台中用的主要时SQL语句，这种方法对数据库的影响小，但是如果用到远程链接服务器，要求网络之间的传输性能好，一般有两种语句： 1＞select ... into new_tablename where ... 2＞insert (into) old_tablename select ... from ... where ... 区别是前者把数据插入一个新表（先建立表，再插入数据），后者是把数据插入已经存在的一个表中，我个人喜欢后者，因为在编程的结构上，应用的范围上，第二条语句强于前者。 6.
注意： 不推荐把它用于其他数据比对场景， 因为它会转发经过它的全部指令到第二个数据源（也就是update insert delete也下发了，如果2个数据库有配置了数据复制，则可能造成复制链路的中断！ （当然如果配的第二个数据源的账号权限是只读的，那么也可以用ticmp来验证一些查询结果的差异性比对，但是这个结果的准确性会受到复制链路的延迟的很大的影响，仅供参考而已）
下方视频为邵宗文在未来大会演讲实录。每个行业对数据库有不一样的要求，云上数据库通过智能化运维，数据会越来越多，准确度也越来越高，模型也会越来越精准。腾讯云上数据库如何满足用户多样化的诉求？一起来听听吧。
通过上面的测试可以看出网络延迟较大时，对数据的写入及每秒执行的事务数都有较大影响；如果需要做性能测试及数据同步，尽量将压测工具或同步工具部署在同一个机房，避免网络延迟较大，对测试结果有影响。
数据传输服务 DTS 支持数据迁移功能，提供自建 MySQL 数据库到云数据库 TencentDB 的连续数据复制，用户可在不停服的情况下对数据进行在线热迁移，支持具有公网 IP/Port 或专线接入腾讯云的本地 IDC 或腾讯云 CVM 上 MySQL 数据库迁移。现已支持 MySQL 5.7 数据传输服务。
2023年3月25日，首届OceanBase开发者大会在北京举行。NineData 的首席架构师谭宇（茂七）受邀参加 OceanBase 数据管理与服务技术专场，发表了《NineData 多云数据管理》主题演讲。
随着国家对自主可控的日益重视，目前在各个行业和区域中面临越来越多的国产化，采用有自主知识产权的国产数据库正在成为主流。长期以来，作为拥有纯国产自研背景的 TapData，自是非常重视对于更多国产信创数据库的数据连接器支持，旗下产品已陆续与阿里云、华为云、麒麟软件、优炫数据库、Apache Doris、人大金仓、OceanBase 等国产数据库及操作系统完成产品生态集成认证或产品兼容互认证。
传统企业在建设数据库初期，不仅建设服务器，还要保证数据库能够稳定和可靠的运行。当业务数据增长到一定大小的时候，就需要增加服务器CPU及内存以及磁盘相关资源。为了保证服务器的稳定性，还需要制定相关制度及体系，定制数据库的架构，防止数据库被攻击，确保数据库安全稳定。搜索关注“腾讯云数据库”官方微信立得10元腾讯云无门槛代金券，体验移动端一键管理数据库，学习更多数据库技术实战教程。
传统企业在建设数据库初期，不仅建设服务器，还要保证数据库能够稳定和可靠的运行。当业务数据增长到一定大小的时候，就需要增加服务器CPU及内存以及磁盘相关资源。为了保证服务器的稳定性，还需要制定相关制度及体系，定制数据库的架构，防止数据库被攻击，确保数据库安全稳定。
随着业务发展越来越快，数据量越来越多，用户也越来越多，业务出现故障的几率也越来越大，而可用性是衡量一个系统的关键指标，application 由于是无状态的，可用性很好保证，当一个应用挂掉，直接切到另一个即可，最关键的是数据库的高可用，则是最复杂的。
生产上，有个需要从MySQL异构复制数据到PG中的需求。 数据同步组件用的是go-mysql-postgres （两位前同事基于社区开源的go-mysql-elasticsearch上做的PG功能补丁）。
https://pgcopydb.readthedocs.io/en/latest/
MySQL是世界上最流行的开源关系数据库，带货直播源码使用MySQL，可实现分钟级别的数据库部署和弹性扩展，不仅经济实惠，而且稳定可靠，易于运维。云数据库 MySQL 提供备份恢复、监控、容灾、快速扩容、数据传输等全套解决方案，简化了带货直播源码数据库运维工作，能更加专注于带货直播源码的业务发展。
点击上方蓝字每天学习数据库 现在经常会有各式各样的“删库到跑路”事件发生。不管是传统数据库还是云数据库，总会遇到一些问题，与数据迁移、数据风险安全、数据订阅等相关。今天，我们来谈谈云数据库的优势和腾讯云在这方面的努力。看看腾讯云怎么通过技术手段来确保数据库安全稳定，和快捷迁移，以及推动数据商业分析的。 传统数据库与云数据库 传统数据库 传统企业在建设数据库初期，不仅建设服务器，还要保证数据库能够稳定和可靠的运行。当业务数据增长到一定大小的时候，就需要增加服务器CPU及内存以及磁盘相关资源。为了保证服务器
2021年6月24日，由中国信息通信研究院（以下简称“信通院”）正式公布了第十二批“大数据产品能力评测”结果，腾讯云数据库成为国内首批通过四项数据库领域专业评测的服务商，包括分布式事务型数据库性能、数据库服务能力实施部署专项、数据库应用迁移服务能力和图数据库基础能力，这意味着企业级分布式数据库TDSQL、数据库迁移服务DTS-DBbridge、腾讯云数图TGDB等多项腾讯云数据库产品和服务再获国家级权威认可。 “中国信通院大数据产品能力测试”是国内首个面向大数据产品的权威评测体系，旨在从基础能力、性能、可
2、确保应用高可用性，消除计划外的停机时间，减少计划外的停机时间，提高业务连续性。
•当你使用了redis或者其他中间件做缓存的时候，经常发现缓存和数据库的数据不一致，只能通过定时任务或者缓存过期的方式去做一些限制。•当你使用了ES做搜索工具，使用双写的那一套方法，还在为ES和数据库不是一个事务而担忧。•当你需要迁移数据的时候，也还在使用双写的方法，如果是同一个数据库的还好，如果是不同数据库就不能保证事务，那么数据一致性也是个问题，就会写很多的修复Job和检查Job。
一个老表，随着业务量增大，考虑到分表，按照 user_id 做hash取模拆分，然后业务层面去做数据CRUD操作。
1月7日，一年一度的《PostgreSQL中国技术大会》将在线上召开，本次大会以“开源论道，创新驱动，共建数字化未来”为主题，重点围绕新场景、新技术、新应用等内容展开分享和讨论。 明天（本周六）上午）09：00-12：00，腾讯云数据库专场盛大开启，多位鹅厂顶级技术达人亮相，针对腾讯云PostgreSQL系列产品、技术亮点和创新实践案例做深入解读，6大主题畅游PG海洋。 腾讯云专场议程 议题一：TDSQL开源版的特性升级与演进（1月8日上午9：00-9：30） 分享嘉宾：陈再妮，腾讯云数据库高级工程师
数据库作为企业核心的数据存储引擎，在其提供服务的过程中，经常会因为各种各样的原因需要进行数据的迁移。数据库迁移作为一个古老的话题并不神秘，但因为迁移数据的重要性，以及业务对数据库可用性的高要求，导致数据库迁移的复杂度极高，一般都需要专业工具的协助才能完成。当前 ，市面上也已经提供了各种各样的数据库迁移工具。本文将介绍数据库迁移的步骤以及市面上常见的迁移工具。
小红书是一个社区属性为主的产品，它涵盖了各个领域的生活社区，并存储海量的社交网络关系。
当下，随着数字化技术不断深入，愈来愈多企业将核心业务搬到线上。业务系统高可用、可扩展、容灾能力决定企业系统的连续性，中间件作为构建企业核心系统的重要组成部分，其高可用容灾能力也将决定应用系统的。本文结合腾讯云中间件各PaaS产品的容灾能力及实践，以一个行业头部客户业务容灾实践举例，来展开说明基于腾讯云中间件PaaS层相关产品的实践。
2023-03-01：用moonfdd/ffmpeg-go库，将h264文件编码为mp4文件。
随着企业规模的扩大，对数据库可用性要求越来越高，更多企业采用两地三中心、异地多活的架构，以提高数据库的异常事件应对能力。 在数据库领域，我们常听的“两地三中心”、“异地多活”到底是什么呢？ “两地三中心”就是生产数据中心、同城灾备中心、异地灾备中心。这种模式下，两个地域的三个数据中心互联互通，当一个数据中心发生异常，其他数据中心可以正常运行并进行业务接管。 “异地多活”就是在多个地域建设多个数据中心， 业务数据能够在三个及以上的数据中心之间进行双向同步。异地多活架构具有更高的可用性，抗风险能力极强。 不
这些方案中不可或缺的就是mongoshake 组件，mongoshake是阿里云NOSQL团队TEAM 开发的一款针对与通用性服务平台的产品，通过对mongodb的oplog进行读取将源于目的的MOGNODB 数据库之间进行数据同步的方式。通过日志的抓取和重放的方式完成数据同步的任务，数据同步中通过通道来进行数据传输，其中包含了像rpc, file, tcp,以及直连等方式。通过选择不同的同步方式，可以对接不同的中间件，如kafka，通过发布和订阅的方式来进行数据的异步的灵活同步。
考虑支付重构的时候，自然想到原本属于一个本地事务中的处理，现在要跨应用了要怎么处理。拿充值订单举个栗子吧，假设：原本订单模块和账户模块是放在一起的，现在需要做服务拆分，拆分成订单服务，账户服务。原本收到充值回调后，可以将修改订单状态和增加金币放在一个mysql事务中完成的，但是呢，因为服务拆分了，就面临着需要协调2个服务才能完成这个事务
容错（fault tolerance）指的是， 单个组件发生故障时，业务还能继续运行。
之前在Android集成FFmpeg。主要还是基于命令行的方式进行操作。刚刚好最近又在研究推流相关的东西。看了一些博文。和做了一些实践。 就希望通过本文记录袭来。 本文的大体结构如下
最近对整体的DTS（数据传输系统）做了整体的开发设计，目前在做的是从数据库到大数据库侧的数据传输对接，先放出来一部分抛砖引玉。
同事在客户现场利用DTS工具，从A实例将数据迁移到B实例过程中，发现几乎稍大点的表在迁移完成后，目标端表空间大小差不多都是源端的3倍，也就是说表空间膨胀了2倍。
背景和价值 在实际业务中常常遇到需要从数据库中获取关键业务的数据变化信息，并将这些信息同步到下游业务进行订阅、获取和消费的场景。 如何快速搭建该实时处理链路，往往有一定的开发成本，同时由于业务要求，不同的下游也依赖不同处理逻辑，难以有一套通用的可复制方案。 目前，事件总线 EventBridge 已正式支持 DTS 数据订阅功能，腾讯云的 DTS 数据传输服务不仅解决上游数据库数据流出的问题，并且支持 MySQL、MariaDB、TDSQL 等多种关系型数据库数据订阅，方便用户搭建云数据库、完成异构系统之间
Device Tree 是目前嵌入式 Linux 系统最常用的设备解耦工具, 所以要玩转嵌入式 Linux , 这个东西必须掌握.
腾讯云提供了数据库迁移工具DTS， 使用DTS做数据库迁移时，DTS工具在迁移任务结束后，会做数据校验。
来源：juejin.im/post/5baa54e1f265da0ac2566fb2
前文提到异地多活的几种型态和基于OceanBase实现方案。这里再总结一下基于其他分布式数据库（MySQL）实现异地多活时要考虑的点。本文不讨论为什么做异地多活，可以参考末尾的文章。
IDC统计数据显示，2020年全球数据复制与保护市场规模为92亿美元，国内厂商入局较晚，近几年随着企业上云率不断增加，数据复制的内容从本地数据向云端数据加速迁移，2021年国内该市场规模达6.01亿美元（IDC），较2020年同期实现21.1%的大幅增长。其中，华为、戴尔科技、Veritas三大厂商占据超过60%的市场。
根据IDC的相关数据统计，2018年全球的数据复制存储市场规模就已经超过了500亿美金，而其中而作为数据复制技术重要应用场景的数据备份和恢复软件市场的规模也同样蔚为可观。今天，我们就来聊聊5种常见的数据复制技术。
在构建容灾系统所涉及的诸多要素中，数据复制技术是基础，只有保证了数据的安全可用，应用或是业务的恢复才有可能。正常情况下系统的各种应用在数据中心运行，数据存放在数据中心和灾难备份中心两地保存。当灾难发生时，使用备份数据对工作系统进行恢复或将应用切换到备份中心。
数据复制在企业信息化建设中是非常重要的一环，不管是建设数据仓库，还是搭建灾备系统，都需要确定数据复制策略。
1月19日，数据复制领域的龙头企业，成立于2011年的英方软件以发行价38.66元成功登陆上交所科创板。上市后英方软件股价立刻跳升超过100%，截至午间收市为止，上涨至105.48元，涨幅高达172.84%，市值达到88.08亿元。据悉，英方软件本次发行数量为2094.6737万股，预计募集资金约8.10亿元。
叶正盛，玖章算术科技公司CEO，原阿里云资深技术与产品专家，数据库产品管理与解决方案部总经理。20年软件研发经验，曾主导过多个工业控制软件、ERP、大型电力计费系统研发，见证与实践了阿里巴巴去IOE、异地多活、云计算多次技术变革。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
腾讯会议
实时音视频
