有没有办法让CDC从SQL Server(内部部署)复制到BigQuery .I可以在MySql、甲骨文和SAP的GCP文档中看到，我们可以使用数据流或数据融合来实现这一点。但我特别想找SQL Server to Big Query。 任何线索都会有帮助。 谢谢，丽兹
浏览 19提问于2021-10-05得票数 0
回答已采纳
我刚接触big Query，并且正在寻找将所有表结构从SQL Server迁移到Big query的方法。需要创建的表接近300个。有没有办法实现自动化，或者在更短的时间内完成。
浏览 20提问于2020-06-16得票数 1
对于RDS SQL Server，AWS DMS (数据库迁移服务)似乎不支持CDC (变更跟踪)。我正在尝试创建RDS SQL Server读-副本，以卸载主，用于报告。还需要一个从美国东海岸到西海岸不断复制RDS SQL Server跨区域的解决方案。
有什么解决办法或替代方案吗？
浏览 7提问于2016-05-29得票数 2
我正在尝试迁移数据从GCP cloud SQL server到AWS极光MySQL使用数据管理系统CDC，为此，我需要启用数据管理系统的源数据库云sql。根据亚马逊网络服务的文档，我需要通过执行"sp_cdc_enable_db“SP来启用CDC，为此我需要sysadmin访问权限，但是google cloud不支持sysadmin访问。那么，在这种情况下，如何启用CDC呢？ ?
浏览 17提问于2020-12-23得票数 0
1回答
嗨，我们想把数据从Mysql(源)复制到GoogleBigquery(目的)，我们采用了google文档描述的方法，并使用了链接中提到的数据融合复制管道。我们正在做的事情:在SQL中为CDC(变更数据捕获)启用bin日志，在数据融合中创建复制管道，启动管道并同步数据。我们能够成功地在comupute引擎中创建pipelinereplication数据并为CDC启用bin-log，并为automatically.But
浏览 5提问于2021-04-22得票数 0
3回答
我希望在server 2012上执行数据库还原，并将数据库复制到其他服务器。在原始数据库上启用CDC。我已设法将数据库与CDC数据一起复制，使用：from disk = 'C:\Program Files\Microsoft SQL Server\MSSQL11.SQLSERVER2012\MSSQL\Backup\dB1_backup.bak'
with move '
浏览 0提问于2014-09-29得票数 2
回答已采纳
1回答
我需要将数据库中的数据导出到BigQuery，以便进行一些数据分析和报告。我发现建议的方法是使用BigQuery Cloud联邦查询，但这不支持Server数据库，只支持Google服务中的MySql和Postgres。我正在寻找一种使用Google资源的方法，可能是批处理ETL工具，也可能是流工具。一个要求是BigQuery中的数据应该实时刷新或接近实时。我是Google Cloud的新手。看起来，安装的<
浏览 0提问于2021-07-02得票数 0
回答已采纳
我想创建连接器(类似于Kafka-Connect中的Debezium )来在BigQuery表中反映MySQL源数据库中的每个更改。有一个问题-源数据库每10分钟删除一次并重新创建-一些行是相同的，一些是更新的，还有一些是完全新的。所以我不能通过Debezium做到这一点，因为每隔10分钟我就会有Kafka中的所有记录。我希望只迁移到BQ表中的新值或更新值。“复制”整个源数据库，但删除重复记录的机制(这不是完全相同<
浏览 1提问于2021-02-09得票数 1
主要问题是：是否有手动过程来执行SSIS CDC控制任务自动完成的任务？在看到微软在S
浏览 0提问于2020-07-22得票数 1
回答已采纳
1回答
有人能告诉我如何使用CDC或变更跟踪在SQL Server on premise和AWS之间同步数据吗？我不确定，我可以使用SSIS进行集成吗？ 谢谢
浏览 42提问于2021-08-02得票数 1
回答已采纳
3回答
我们托管了许多客户SQL Server数据库，这些数据库需要在几乎实时的情况下复制到外部客户站点。我们的主要限制是，出于安全考虑，我们的数据库被部分包含，以确保客户A不能看到客户B的数据库。根据客户的大小，数据库的大小从5GB到200 5GB不等。在任何一天，通常都有多达5GB的更改。
其他的限制因素是我们的SQL服务器被保护在防火墙和DMZ后面
浏览 0提问于2021-04-26得票数 0
我正在寻找从云SQL (postgres)到bigQuery的流式数据库更改的推荐方法？我看到CDC流媒体似乎不适用于postgres，有人知道这个功能的时间线吗？乔纳森。
浏览 10提问于2022-07-26得票数 -5
3回答
我们可以使用哪种策略来同步位于不同主机上的DB2数据库和/或表？如果是一个工具，重要的是它是一个免费的工具。
浏览 7提问于2015-04-23得票数 0
从SQL 2005到SQL 2008r2的事务性复制。在SQL 2008r2端建立CDC。每天，这些表中有2到4个会丢失其CDC设置(即，sys.tables中的is_tracked_by_cdc从1移动到0，该表的所有CDC对象都消失了)是什么导致了这种情况?我如何防止它？
浏览 2提问于2011-06-02得票数 0
回答已采纳
我在Google BigQuery(GBQ)中有一个表，其中有近300万条记录(行)，这些记录(行)是根据每天来自MySQL db的数据创建的。这个数据插入到GBQ表中，使用Python大熊猫数据框架(.to_gbq())。
在这个方向上，用python同步从MySQL到GBQ更改的最佳方法是什么。
浏览 3提问于2018-05-21得票数 1
在Windows 10中，我让Debezium运行在一个位于Docker容器之外的实例上。我每390毫秒收到以下警告：
io.debezium.connector.sqlserver.SqlServerStreamingChangeEventSource我检查了Github上Debezium的代码，并在代码注释中找到了此警告状态，即只有在代理没有运行时才会引发此警告。我已经确认Server代理正在运行。注：
我目前<em
浏览 1提问于2020-04-08得票数 3
回答已采纳
我在尝试将数据库移动到BigQuery时遇到了麻烦。我已经将数据库备份从Cloud导出到了Cloud，但是当试图将其导入BigQuery时，我得到了错误：'Not : URI‘，用于gs://bucket-name/file-name
我想做的事有可能吗我希望以某种方式将Cloud数据直接上传到BigQuery。它是一个大表(>27‘t)，我一直有很多与Cloud的连接问题，所以导出为CSV或JSON并不是最好的选择。
浏览 4提问于2015-01-05得票数 1
回答已采纳
1回答
我正在将使用CDC的数据库从Server 2008 R2迁移到Server 2012。对象资源管理器中的“系统表”分支下有与CDC相关的表：cdc.lsn_time_mappingcdc.index_columnscdc.change_tables
在备份数据库并将其还原到另一台服务器上
浏览 0提问于2015-09-25得票数 6
回答已采纳
1回答
我是SQL Server、复制和CDC概念的新手。我为CDC做了一些入门教程。我的问题是-由于CDC生成了如此多的数据并占用了如此多的空间(内存)，我们需要提高它的效率。决定是将CDC表移到新的文件组中。以下是它的选项(所有选项都有可能破坏CDC)：ii) Alter table create语句
浏览 2提问于2012-04-03得票数 1
回答已采纳
Server管理不是我的强项。所以请耐心等待我的解释
SQL Server 2012 cluster使用第三方CDC实用程序参与Change data capture ( CDC )工作。要使其工作，需要打开复制，如果没有复制，CDC将无法工作。CDC从数据库Db1中的SQL Server中挖掘一些2000+奇数表。因此，我们从CDC</
浏览 3提问于2018-09-18得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
