在BigQuery中，我创建了一个分区数据表(按小时分区)，当数据进入其中时，结果似乎没有_PARTITIONTIME伪列；当我这样做时 _PARTITIONTIME AS pt,* [my_dataset.my_partitioned_table] 1000
我获得了表中的所有常规列，但是每个条目的_PARTITIONTIME都为null。从对Go BigQuery
浏览 2提问于2016-07-15得票数 1
回答已采纳
1回答
我目前正在将数据仓库迁移到BigQuery中。我一直试图去美化数据库，因为我已经读到它可以带来更高效、更便宜的查询。然而，这导致了许多嵌套表。如果每个嵌套表都有一个列"created_at“和"last_modified_at"，那么是否可以使用这些值中的任何一个来对表进行分区？
浏览 3提问于2021-12-02得票数 1
回答已采纳
我们知道google什么时候会在BIGQUERY表中启用整数列分区吗？我们可以在创建BIGQUERY表之后对其进行分区，还是必须在创建BIGQUERY表的同时对其进行分区？
非常感谢。
浏览 2提问于2019-11-26得票数 1
回答已采纳
对于流插入，我想使用一个模板表(带有用户id后缀)，它本身就是一个分区表。这样，我就可以使我的表比仅仅使用分区表更小，从而使我的查询更具成本效益。而且，无论我的系统中有多少用户，我的每个用户的查询成本都保持不变。根据的文档
若要按日期创建较小的数据集，请使用时间分区表.若要
浏览 0提问于2018-07-24得票数 3
回答已采纳
我在BigQuery中有一个名为"rawdata“的未分区表。那个表变得很大了，我想对它进行分区。我没有找到任何对原始表进行分区的方法，但根据的说法，我可以运行一个命令行，使用查询将未分区的“原始数据”推送到已分区的</e
浏览 1提问于2016-08-17得票数 2
如标题所述，是否存在使用存储读取API构造的读取流读取数据的排序顺序？如我所知，分区和聚类键是否有任何排序，如果使用群集，则分区中的数据存储在集群块中？
浏览 9提问于2022-06-09得票数 1
1回答
我正在尝试使用Google Bigquery中的分区功能。进入表的日志显示为延迟反映在table.If中日志发生在13点，table.Is上将存在大约15分钟的差异有没有办法对已分区的表应用实时？
浏览 11提问于2017-03-08得票数 0
3回答
目前我使用如下查询: SELECT ID，Key FROM mydataset.mytable where ID = 100077113
and Key='06019‘ID -唯一Key -可以有大约10,000个密钥
如果我知道，查找ID的关键字可以在大约10,000行上完成，并且工作速度更快，处理的数据也更少。如何使用BigQuery中的新集群功能对字段键进行分区？
浏览 57提问于2018-08-12得票数 1
回答已采纳
我们有一个日期分区表，其中包含5年(每天递增的负载)数据，运行到数百万条记录。为了提高性能，考虑根据非日期字段(Id)拆分表，因为所有查询都将包含该列(Id)上的where子句。并且用日期分区对每个拆分表进行分区，这样我们就可以在具有日期范围的较小的数据集上进行查询。我们将不会使用通配符<em
浏览 0提问于2019-05-20得票数 0
1回答
比如说，在Dataflow/Apache程序中，我正在尝试读取数据呈指数增长的表。我想提高阅读的性能。dataset.tablename")BigQueryIO.Read.fromQuery("SELECT A, B FROM [projectid:dataset.tablename]")
如果我只是在表中选择所需的列，而不是上面的整个表，那么我的读取性能会提高吗？
浏览 1提问于2019-01-29得票数 4
回答已采纳
我的团队正在使用Google平台开发数据平台。我们将公司的数据上传到上，并尝试在Bigquery上创建数据集市。但是，为了节省GCP的使用成本，我们考虑将所有数据从gcs加载到bigquery，或者在bigquery上创建外部表。
哪种方式更符合成本效益？
浏览 6提问于2022-02-25得票数 1
回答已采纳
5回答
我有一个用例，其中我们在BigQuery中有几个表。现在，我想在BigQuery表中的一个列上实现一个索引。但我找不到足够的文件来做这件事。我发现一些博客和帖子提到BigQuery不支持索引。请帮我找到一个博客或帖子，可以帮助我在BigQuery上实现索引。提前谢谢。
浏览 3提问于2015-02-19得票数 18
回答已采纳
google文档只讨论每日分区。但是，模型中有没有什么东西阻止人们用其他时间段(例如，小时或周)来填充表中的分区呢？
将分区放在一个“小”表中有什么限制或缺点吗？
浏览 0提问于2017-01-12得票数 11
我有一个分区/集群表如下：当我运行这个查询时： projectId `projectId.dataset.tables`为了确保分区具有相同的大小，我计算了每个分区中的projectId数。分区的行数比前两天还要少。
SELECT projectId FROM `proj
浏览 3提问于2019-03-17得票数 4
回答已采纳
1回答
我在BigQuery中有很多表是分日期的，包括几年的数据。最近有人告诉我，这是一种旧的优化方法，而且日期分区要快得多。
这是正确的吗？我一直在寻找方法来提高对这些数据的查询速度，如果日期分区允许更快的查询，我应该重新构建所有的日期分割GA表作为日期分区吗？我应该两者都做吗？我可以期望看到什么样的</em
浏览 0提问于2019-04-18得票数 1
我正在进行一个分析项目，该项目运行查询并每月在表A中处理结果并存储在BigQuery中。因为BigQuery不能用作事务性查询，因此我们必须将结果显示给我们的用户，所以我们决定将结果保存回on-prem SQl Server relationalDB (我们决定现在使用CloudSQL会很昂贵然而，我似乎不知道，因为这是一个每月的过程，每个月的数据被附加到TableA，我如何知道从哪里开始，从下一次
浏览 3提问于2020-10-15得票数 0
回答已采纳
我一直试图向BigQuery表中添加多个分区列，但它似乎只包含一个字段，即使我在查询参数中添加了多个分区字段。有什么想法吗，会很感激吗？
浏览 1提问于2020-07-14得票数 9
回答已采纳
在尝试执行MERGE语句时，BigQuery仅扫描请求的分区，直到添加了DELETE语句，此时它将恢复为扫描整个数据集(在本例中从1 1GB扩展到>1TB )。有没有一种方法可以使用合并的全部功能，包括删除，而不产生额外的成本？与我的工作相匹配的通用示例如下： MERGE target_table AS t *## All Dates, partitioned on
USING source_t
浏览 54提问于2019-02-08得票数 2
我有一个表，该表按日使用模式中的时间戳字段my_partition_field (而不是摄入时间_PARTITIONTIME)进行分区。执行以下查询时：BigQuery告诉我，“此查询将在运行时处理XX MB”。处理的数据量与该字段不是分区字段相同。但是，如果有相同的表按摄入时间<
浏览 2提问于2021-10-27得票数 0
回答已采纳
云服务器
ICP备案
云直播
实时音视频
即时通信 IM
腾讯云开发者
