1回答
我已经看到了数据的问题，我正在尝试找到插入到不同日期分区上的重复数据，现在的问题是我想保留较旧日期的数据并删除最新摄取的数据。 例如:- ? 在屏幕截图中，你可以看到两行中的数据是相同的，但由于一些问题，相同的数据也被插入到了2021-04-28中，现在我想删除2021-04-28分区中的所有这样的记录。并保留04-27数据和04-28
浏览 16提问于2021-04-30得票数 0
回答已采纳
我有按插入时间划分的烧烤桌。我在试着从桌子上删除副本。这些是真正的重复:对于两个重复的行，所有列都是相等的-当然，拥有唯一的键可能会有帮助:-(SELECT
* EXCEPT(row_number，但是创建了一个不包含分区数据的新表--因此不好。我看到了这个，它声明保留分区的唯一方法是使用上面的查询逐个检查分区，
浏览 0提问于2018-12-06得票数 7
回答已采纳
注意:这几乎是的重复，区别是在本例中源表是日期分区的，而目标表还不存在。而且，这个问题的公认解决方案在这种情况下是行不通的。我正在尝试将一天的数据从一个日期分区表复制到一个我还没有创建的新的日期分区表中。我希望BigQuery能够像通常对非日期分区的情况一样，为我创建日期分区的目标表。使用BigQuery CLI，下面是我<em
浏览 7提问于2017-06-16得票数 5
回答已采纳
我们已经开始迁移到使用BigQuery中的分区表。我们注意到复制分区表比非分区表花费的时间要长得多--在任何情况下都是如此。我相信这是有一个很好的理由的，例如因为BigQuery的底层体系结构&分区表。例如(在同一个项目中复制和复制到相同的数据集)：
作业id：
浏览 6提问于2017-04-04得票数 2
回答已采纳
1回答
如何在BigQuery WebUI中创建Bigquery分区表。我知道我们可以从gcloud和api创建。我搜索了WebUI，但没有找到从webUI创建分区表的任何选项。
谢谢,
浏览 4提问于2016-09-11得票数 1
我刚刚看到我可以在custom partitioned中创建一个BigQuery表。意思是由任何timestamp列进行分区。
浏览 0提问于2018-02-15得票数 1
回答已采纳
1回答
在BigQuery中，不能对分区表使用create or replace table语句。我可以将表导出到GCS，但是BigQuery会生成多个无法一次性导入到表中的JSON文件。有没有一种从分区表中删除列的安全方法？我使用BigQuery的web界面。
浏览 1提问于2020-09-23得票数 0
我希望将bigquery非分区表(2TB)中的数据作为日期分区文件导出到。因此，我可以轻松地将大的非分区表转换为分区表。
浏览 2提问于2017-07-10得票数 1
回答已采纳
当我有潜在的重复行时，应该如何每天导入BigQuery中的数据？我能否构建一个sql查询，以便每天从重复行中清除我的表？或者在导入副本之前就可以检测副本(例如，在我的
浏览 0提问于2018-02-27得票数 4
回答已采纳
我正在开发BigQuery，而且我还是个新手。使用其中的_partitiontime字段创建新的未分区表。从具有精确结构的分区表from BigQuery.Create 导出表结构(日期上的已分区表)。
将这个问题标记到java以获得更多的可见性。
浏览 1提问于2016-09-22得票数 0
1回答
我目前正在将数据仓库迁移到BigQuery中。我一直试图去美化数据库，因为我已经读到它可以带来更高效、更便宜的查询。然而，这导致了许多嵌套表。如果每个嵌套表都有一个列"created_at“和"last_modified_at"，那么是否可以使用这些值中的任何一个来对表进行分区？
浏览 3提问于2021-12-02得票数 1
回答已采纳
我有一个BigQuery 日期分区表，我想将该表转换为摄取时间分区表(在_PARTITIONTIME上进行分区)，使用当前的日期分区将其输入_PARTITIONTIME。我该怎么做？
为什么？，因为只有摄入分区表才能增量加载到使用BigQuery的预定查询功能(通过使用@rundate参数作为分区装饰器)
浏览 3提问于2018-10-17得票数 2
我有以下模式和设置： job_config = bigquery.LoadJobConfig(schema = [bigquery.SchemaField("Timestamp", "TIMESTAMP"),bigquery.Sch
浏览 10提问于2019-12-21得票数 0
回答已采纳
2回答
我正在尝试使用数据流来流到BQ分区表中。文件说：
在将行插入日期分区表中时，我可以看到这种情况。是否有一种方法可以设置要插入的行的分区时间，以便BigQuery可以推断正确的分区？
浏览 1提问于2016-07-28得票数 1
回答已采纳
基于Google BigQuery文档，BigQuery有以下限制()：每个分区表的最大分区数- 20,000
谢谢!
浏览 2提问于2020-05-25得票数 2
在google文档中，我可以看到关于分区表的以下几点:流到分区表中您可以将数据流到在过去5年和未来1年之间的日期或时间戳列上分区的表中。超出此范围的数据将被拒绝。https://cloud.google.com/bigquery/streaming-data-into-bigquery 在一个地方写着:你可以在过去的1年到未来的</e
浏览 16提问于2020-09-16得票数 0
回答已采纳
我想要将CSV数据加载到包含不同分区BigQuery的table.My CSV文件中，我可以将整个CSV文件加载到BigQuery分区表中，以便将特定的csv分区数据分配到BigQuery中的各个分区。
浏览 5提问于2017-04-17得票数 0
回答已采纳
我有一个表，该表按日使用模式中的时间戳字段my_partition_field (而不是摄入时间_PARTITIONTIME)进行分区。执行以下查询时：BigQuery告诉我，“此查询将在运行时处理XX MB”。处理的数据量与该字段不是分区字段相同。但是，如果有相同的表按摄入时间进行分区，并且运行以下查询：BigQuery告诉
浏览 2提问于2021-10-27得票数 0
回答已采纳
我想要将一个大型csv导入到一个bigquery分区表中，该表具有一个timestamp类型的列，该列实际上是某个事务的日期，问题是当我加载数据时，它会将所有内容都导入到今天日期的一个分区中。是否可以使用我自己的时间戳值对其进行分区？我怎么能做到这一点。
浏览 0提问于2016-07-05得票数 1
有没有一种方法可以用一条命令提取完整的BigQuery分区表，以便将每个分区的数据提取到一个单独的文件夹中，格式为part_col=date_yyyy-mm-dd 既然Bigquery分区表可以从hive类型的分区目录中读取文件，那么是否有一种方法可以以类似的方式提取数据。我可以单独提取每个分区，但是当我提取大量分区时，这是非常麻烦的
浏览 25提问于2019-07-02得票数 5
回答已采纳
云服务器
ICP备案
云直播
实时音视频
即时通信 IM
腾讯云开发者
