我在BigQuery中使用以下标准SQL查询，使用表元数据列出超过90天的表。TABLES__"; SET i = i + 1;
END WHILE; 我可以使用'#1‘查询得到最近一次修改日期的当前GCP当我试图使用项目数组获得相同的结果时，我得到了类似“查询错误:无法识别的名称:项目”(对于#2)和“查询错误:无法强制表达式”SELECT ARRAY
浏览 18提问于2021-08-30得票数 1
来自RDS的表需要尽可能快地出现在BQ上，并且主数据库和be副本之间的同步延迟很低。
我想要创建一个触发器，当RDS上的数据库被更新时，它将自动更新BQ数据库。我是否可以在触发时间的基础上迁移每个作业一个以上的表？
浏览 3提问于2021-12-24得票数 0
回答已采纳
我创建了一个google流作业，从PubSub读取并插入到BigQuery中。我使用JSON将STREAMING_INSERT数据插入到BiqQuery表中。我正面临插入问题，说明请求的大小超过了10 Mb的允许限制。数据流错误如下所示。根据我的理解，每个记录的大小是1-2Mb，根据我的理解，数据流作业将流数据插入到微批处理中，这导致了这一错误。来自worker的错误消息: java.lang.RuntimeException:我们观
浏览 6提问于2022-10-13得票数 0
回答已采纳
2回答
我有一个Cloud SQL数据库(作为PostreSQL)，我想向BigQuery传输一份副本。这代表了1TB的数据(使用云SQL存储)，超过100个表。
我想估算一下这种一次性的大数据传输的成本。当我阅读BigQuery和Cloud SQL定价的GCP文档时，我得到的印象是这是免费的: BigQuery导入是免费的，Cloud SQL网络出口到大陆内部的
浏览 2提问于2020-12-12得票数 0
我有几个客户项目，它们将分析事件写入BigQuery数据集。该设置的组织方式如下：bigquery</
浏览 1提问于2019-01-02得票数 3
回答已采纳
1回答
我在测试对bigquery寄予厚望的yaml时遇到了麻烦。我遵循了正式的文档，并获得了以下代码import great_expectations as ge
name: my_bigquery_datasource://<GCP_PROJECT_NAME>/<BIGQUERY_DATASET> d
浏览 10提问于2022-02-01得票数 0
我有一个角色为IAM的用户：BigQuery Data Editor在我的数据集中，Share dataset添加了具有Can Edit特权的用户。但是，当我运行访问BigQuery的脚本时，会出现错误403脚本仅从此数据集中的表中运行SELECT查询。我不明白为什么我必须授予BigQuery User才能让它起作用。根据文
浏览 0提问于2018-09-27得票数 5
回答已采纳
我已经设置了一个GCloud数据流管道，它使用来自Pub/Sub订阅的消息，将它们转换为表行，并将这些行写入相应的BigQuery表。表目的地是根据Pub/Sub消息的内容确定的，偶尔会导致表还不存在，必须先创建表的情况。为此，我使用create CREATE_IF_NEEDED，它工作得很好。但是，我注意到，如果在数据流作业仍在运行时手动删除BigQuery中
浏览 1提问于2020-03-21得票数 0
回答已采纳
我有一个BigQuery表(TableA)，从Google sheet (Sheet1)获取实时数据。当我尝试在Tableau数据源中直接连接Google工作表时，它正在连接。此外，当我将表格(TableA)直接拖放到数据源中的“Drag tables here”上时，它工作正常。Error Code: 015CFBE6
The Google BigQuery service was unable to process this request.
浏览 2提问于2020-08-27得票数 10
我有个问题：{'word':'string'，'table':'string'}tobq = (input
| 'write names to BigQuery
浏览 12提问于2021-03-08得票数 1
我在一个我不拥有的BigQuery表上共享，并且在包含该表的dataset上没有bigquery.jobs.create权限。我成功地列出了数据集中的所有表，但是当我试图使用以下代码查询表时： const url = `https://bigquery.googleapis.com/bigquery
浏览 11提问于2021-04-25得票数 0
回答已采纳
2回答
我正在使用云数据流将数据从发布/订阅消息导入到BigQuery表中。我使用DynamicDestinations，因为这些消息可以放入不同的表中。$DatasetServiceImpl.insertAll(BigQueryServicesImpl.java:765) at org.apache.beam.sdk.io.gcp.bigquery.BigQueryServicesImpl(StreamingWriteFn.java:131) at org.apache.beam.s
浏览 4提问于2019-02-16得票数 4
在GCP中，使用python，我的query选择要插入表BQ_table中的一些数据。BQ_table跟随schema。schema = [ bigquery.SchemaField("name", "STRING", mode="NULLABLE"),
bigquery.SchemaField("age", "
浏览 7提问于2020-11-08得票数 2
回答已采纳
在Google BigQuery Sink连接器中，如果autoCreateTables属性为true，则GCP将在主题名称字段中创建BigQuery表。如果autoCreateTables被赋予false，那么我们应该在GCP中手动创建以主题名作为表名的表。如果我们想要不同的表名而不是主题名呢？
浏览 1提问于2022-01-11得票数 0
我可以从“计费”部分看到我的BigQuery总成本。
上个月对该表的查询产生了多少成本？等。如果你能帮忙，我会很高兴的。我有太多的表格，无法根据各个表的尺寸来计算成本。
浏览 14提问于2022-06-04得票数 0
回答已采纳
我正在尝试确定是否可以创建多个服务帐户，并为每个服务帐户创建不同的策略(甚至是通用策略)。在此策略中，我要设置数据集/表的默认保留期。只有我(admin)可以在创建表后更改保留。
浏览 14提问于2019-11-12得票数 0
回答已采纳
我已经在bigquery中创建了一个模式和一个表，同时在GCP VM中配置jupyter notebook中访问该表的sql结果时，得到了"Request had authentication scopesimport pandas as pdclient = bigquery.Client()
sql = """ SELECT *FROM odsdata.
浏览 11提问于2020-01-29得票数 0
at org.apache.beam.sdk.io.gcp.bigquery.BigQueryHelpers$PendingJob.runJob ( org/apache.beam.sdk.io.gcp.bigquery( org/apache.beam.sdk.io.gcp.bigquery/BigQueryHelpers.java:153 )
at org.apache.beam.sdk.io.gcp.bigquery
浏览 11提问于2022-11-19得票数 2
回答已采纳
我们使用GCP (气流管理)作为管弦乐工具，使用BigQuery作为DB。我需要从另一个表(位于bigquery中的两个表)将数据推入表中，但是方法应该被重新插入。因此，我编写了一个使用marge更新或插入的sql脚本。 marge脚本位于GCP编写器桶中，如何从存储桶读取sql脚本?读取sql文件后的，如何在bigquery ?上运行查询？
浏览 10提问于2022-03-17得票数 0
回答已采纳
我在本地sql服务器和GCP之间建立了VPN连接。我需要将超过1000万行的数据从sql服务器加载到bigquery。有没有办法做到这一点？我可以使用SSIS将数据加载到bigquery吗？我的团队领导要求使用数据流将数据加载到bigquery，而不是使用SSIS。
浏览 12提问于2019-12-18得票数 0
云服务器
ICP备案
腾讯会议
云直播
对象存储
腾讯云开发者
