你好，谷歌云和bigquery专家:-)
我在GCP中有一个cloudsql mysql数据库和一个BigQuery数据库，我需要使用类似于bigquery联合查询的机制删除cloudsql mysql数据库中的某些记录。它清楚地提到"external_database_query (string)：是外部数据库的SQL方言(MySQL或PostgreSQL)中的只读查询。因此，我似乎不能
浏览 9提问于2021-01-13得票数 0
我有一个一次性的用例，将现有的CloudSQL和BigQuery数据库的数据和模式从一个GCP项目复制到另一个项目。除了创建模式和数据库并编写脚本来复制所有现有数据之外，还有什么更好的方法来实现这一点吗？
浏览 21提问于2021-07-30得票数 0
我有一个基于gcp的环境。我在gcp BigQuery中使用标准SQL脚本，并对cloudsql MySql使用联邦查询。联邦查询从cloudsql mysql数据库中选择数据。我需要根据依赖于BigQuery中数据的条件从cloudsql mysql数据库中选择数据。我在gcp bigquery中使用标准sql脚本中的变量来存储从bigquery中选择的值。联邦查询从cl
浏览 75提问于2021-02-01得票数 1
回答已采纳
我需要在GCP BigQuery和GCP CloudSql之间执行定期数据清除和数据加载操作。这涉及到在GCP BigQuery和GCP cloud SQL中以预定的顺序运行多个查询，并在后续查询中使用早期查询的查询结果。选项2:我正在考虑的另一个选项是使用gcp计算linux引擎VM作为我的控制器，以执行跨gcp cloud、SQL、mysql数据库和G
浏览 2提问于2021-03-02得票数 0
根据GCP指南，设置数据库迁移包括使用向导1在控制台中创建迁移作业。向导创建一个新的CloudSQL实例，但我希望指定一个现有实例，以便我们可以通过版本控制(例如Terraform)管理目标实例。是否可以指定现有的CloudSQL实例作为GCP中数据库迁移服务的目标？如果是这样的话，是怎么做的？如果不是，版本控制的另一个解决方案是通过运行gcloud CLI/API命令的脚本创建迁移作业(可能还有目标实例)
浏览 0提问于2021-07-22得票数 0
我需要将数据从RDS迁移到BQ，这样我就可以在顶点AI上运行模型。我看到了烧烤数据传输服务工具，它能在这种情况下工作吗？我是否可以在触发时间的基础上迁移每个作业一个以上的表？
浏览 3提问于2021-12-24得票数 0
回答已采纳
我想从BigQuery迁移到CloudSQL，以节省成本。我的问题是，与BigQuery相比，带有PostgreSQL的CloudSQL非常非常慢。在BigQuery中，一个耗时1.5秒的查询几乎需要4.5分钟(！)和PostgreSQL一起在CloudSQL上。我将CloudSQL与PostgreSQL服务器配合使用，配置如下：我的数据库有一个包含16M行的主表(大约14 in的RAM)。这里的搜索条件
浏览 5提问于2021-11-10得票数 5
我正在使用GCP bigquery。我定义了一个外部连接"myconnectionid“。这种连接类型为“cloudsql - MySQL”，对于从bigquery到cloudsql实例运行的fedarated查询来说，它工作得很好，如下所示。EXTERNAL_QUERY("myconnectionid","SELECT CURDATE() from Dual;")
但是，当我试图声明一个SQL变量并将联邦查询的返回值分配给该变量(我假设这相当于b
浏览 7提问于2021-01-08得票数 3
回答已采纳
我正在计划从AWS MySQL实例到GCP BigQuery的数据迁移。我不想迁移每个MySQL数据库，因为最后我想使用BigQuery创建一个数据仓库。将AWS MySQL DB作为csv/json/avro导出到S3存储桶，然后传输到GCP存储桶是一个好的选择吗？此数据管道的最佳实践是什么？
浏览 37提问于2019-03-10得票数 0
回答已采纳
1回答
我正致力于将数据从数据存储转移到Cloud，我在任何地方搜索任何工具或进程，我得到的详细信息/链接如下：
你的帮助将不胜感激。
浏览 1提问于2017-10-17得票数 2
回答已采纳
1回答
我一直在想，GCP数据目录服务中是否有模式的版本？或者是关于模式更改时如何处理数据目录条目的建议(例如，在CloudSQL、GCS文件集、BigQuery中)，以及如果谷歌不支持历史，如何处理它？尝试调查数据目录API调用和日志记录后，条目被更新，但是，没有变化，没有历史。
我在AWS ()中发现了这个功能。在GCP社区中也存在未回答的问题：自定义工具(如Liquibase () )在这种情况下不适用，因为它们仅限于BigQuery (并非所有GCP服务)。
浏览 11提问于2022-11-16得票数 0
我正在尝试使用“外部数据源”将BigQuery连接到CloudSQL Postgres DB。建立连接后，我在BigQuery中看到以下错误：Connect to PostgreSQL server failed然后，我尝试在CloudSQL配置中启用“公共IP”连接，这似乎解决了沙箱中的问题。
我希望能够在不打开公网IP的情况下这样做，因为我只想将我的数据保存在我的内网中。是否可以像我所描述的那样通过BigQuery</e
浏览 2提问于2021-04-23得票数 0
我将以下GCP产品一起用于CRM系统：
Appengine使用JSON中未经修改的查询结果响应外部应用程序。在这种情况下，还有哪些其他GCP产品是有用的？记住，我需要从Appengine和CloudSQ
浏览 2提问于2022-04-16得票数 -4
回答已采纳
我最终能够成功地将它部署到GCP上，但我不断地得到在尝试访问应用程序时。cloud.google.com/go/bigquery@v1.4.0 requires
cloud.google.com/go@v0.52.0 requirescloud.google.com/go/bigquery@v1.0.1/go.mod: verifying module: cloud.google.com/go/bigquery@v1
浏览 42提问于2020-05-20得票数 0
2回答
在中使用时
、、
在用python测试和开发了一些Google模板几天之后，我想问自己，使用BigQuery是否适合我们的项目。
下面是我不确定应该使用哪些其他服务而不是BigQuery的地方：
每天使用Cloud并将数据
浏览 0提问于2018-12-05得票数 1
我们如何通过编程找到关于GCP基础设施的详细信息，如各种文件夹、项目、计算实例、数据集等，这有助于更好地了解GCP平台。Neeraj
浏览 3提问于2018-12-29得票数 2
我有一个App Engine调度作业，它每天运行，并在PostgreSQL表(托管在gcp中，而不是cloudsql中)中查找满足归档条件的行。如果满足条件，它将连接到BigQuery并将数据流式传输到大型查询。每天，有资格归档的记录很少，我们会写信给BigQuery。这是一种经济有效的方法吗?https://cloud.google.com/solutions/performing-etl-from-relational-database-into-bigquery</em
浏览 10提问于2020-01-31得票数 0
因此，现在我正在使用谷歌CloudSQL满足我的需要。因为我的表每天都变大，所以很难管理表中select查询的性能。所以我的问题是，如果我使用Google BigQuery来满足我的需要，我能得到更好的好处吗？
如果是的话，我该怎么做？因为Google BigQuery (如果我错了请原
浏览 0提问于2016-10-27得票数 2
回答已采纳
1回答
读取一种类型的所有实体
、、、
我需要将两百万行存储到数据库中，并将它们全部读回以进行bach处理(以json格式存储在磁盘上，每一百万行大约有200mb的数据)。
GCP数据存储适合这类工作吗？BigQuery看起来有点杀伤力。对于这类工作，CloudSQL是最好的吗？
浏览 16提问于2017-03-10得票数 0
寻找工具/流程/程序将数据从PostgreSQL 9.6迁移到GCP PostgreSQL(CloudSQL) 12.x。总数据量为30TB (分布在24个PostgreSQL集群中，2300DB)。我们正在考虑一种复制模式(CloudSQL作为从属)的迁移(直到切换到最小的停机时间)，以便我们可以继续在旧站点中运行，直到水印相同。
提前感谢！
浏览 0提问于2021-05-20得票数 0
云服务器
ICP备案
云直播
实时音视频
即时通信 IM
腾讯云开发者
