我是谷歌BigQuery的新手，所以我正在努力理解如何最好地完成我的用例。
我有每天的客户访问数据存储在BigQuery中，我希望用我用python编写的一些算法来分析这些数据。由于有多个脚本使用日常数据的子集，我想知道获取和临时存储数据的最佳方法是什么。此外，脚本以顺序的方式运行。每个脚本修改数据</
浏览 3提问于2018-01-30得票数 0
在提供WHERE子句的情况下，为什么BigQuery要对SELECT *执行全表扫描？SELECT *WHERE login='__ThisUserDoesNotExist__'
该查询执行全表扫描，即使它实际上只需要对login列进行完整扫描，以确定没有要返回的记录。有兴趣参考BQ文档的相关章节以及关于柱状数据库的查询规划的
浏览 1提问于2021-01-18得票数 0
我正在寻找一个像ALTER TABLE TABLE_NAME DROP COLUMN_NAME这样从我的BigQuery表中删除列的选项-但我在online中找到的所有内容都是，删除旧表并创建一个新表。我只是想知道，在BigQuery中没有这个选项有什么逻辑上的原因吗？
浏览 3提问于2017-08-22得票数 8
我正在尝试将Google JSON文件加载到200k+ BigQuery中。数据集是出纳员数据，在一些交易中使用一张折扣凭证，在一些交易中使用一张以上的凭证，而在其他交易中不使用凭证。因此，一些字段在一个文件中是可重复的，但在另一个文件中为空。加载时，我得到一个错误：'***': Inv
浏览 2提问于2017-05-04得票数 0
我正在尝试测量数据流管道的持续时间，数据流管道从发布/订阅中提取消息并将其加载到BigQuery表中。我找不到如何在BigQuery表中获取行的最后修改时间，尽管有表的最后修改日期时间。谁知道如何将上次修改的日期时间设置为BigQuery表
浏览 2提问于2018-11-07得票数 0
我在BigQuery中有一个表，希望将列的模式从NULLABLE更改为REQUIRED。根据修改BigQuery表模式的Google文档，唯一的方法是：“您可以手动更改列的模式，方法是将表数据导出到云存储中，然后用模式定义将数据加载到一个新表中，该定义指定列的</em
浏览 9提问于2020-10-27得票数 1
我一直在尝试在线搜索，但我只能看到如何添加、删除、更改表中的列。基本上，我需要在BigQuery中遍历电子邮件地址的整个列，并在每行中添加第二个电子邮件地址。address.com5 |Name5|email5@address.com
6 |Name6|email6@address.com 我正在寻找的是一些脚本，它将通过一个列</e
浏览 21提问于2020-09-03得票数 0
回答已采纳
我正在尝试将一个文件从GCS加载到BigQuery，它的模式是从GCS中的文件自动生成的。我使用Apache气流来做同样的事情，我遇到的问题是当我使用自动从文件中检测模式时，BigQuery根据大约100个初始值创建模式。例如，在我的例子中有一个列，比如X，X中的值大多是Integer类型，但是有一些值是String类型的，所以bq load会因
浏览 2提问于2019-12-27得票数 0
1回答
我使用Java和SQL将数据移动到一个新表。我想：
不幸的是，一些旧数据遵循不同的模式。一些旧表可能有从一个到几百个缺失的列(字段)。我没有任何可靠的方法来生成或
浏览 0提问于2019-01-28得票数 0
回答已采纳
我是BigQuery的新手，而且还在努力奋斗。在SQL中，ALTER可以添加、删除列。但在BigQuery中，它表明我无法修改外部表(从驱动器导入)。有人能帮忙吗？如何更改外部表？
试图使用。
浏览 3提问于2022-11-09得票数 1
我们有移动平台(iOS和Android)和网络平台，将事件流传输到Firebase，然后将其导出到BigQuery。然而，BigQuery对待user_properties的方式在移动平台和web平台之间是不同的。我理解在Firebase中，所有的用户属性都是字符串。在移动平台中，一个特定的user_property显示为字符串，而在web平台上，它被转换为整数(user_property.value.string_value vs user_property.value.int_val
浏览 1提问于2020-07-02得票数 0
回答已采纳
因此，在发布到公共子主题之后，我会得到消息ID的响应，该消息ID已经发布： "messageIds": [ ]之后如何跟踪这个messageId发生了什么：非常感谢!
浏览 5提问于2022-10-28得票数 0
回答已采纳
BigQuery和Google之间的双向沟通是可能的吗？换句话说，如果在Google中添加一行或修改条目，它将反映在BigQuery中相应的表中，反之亦然(没有模式更改)。
浏览 5提问于2020-10-29得票数 0
回答已采纳
3回答
我们正在进行一个涉及大量数据的项目。现在我们最近读到了Google BigQuery的内容。但是我们如何将数据导出到这个平台呢？我们已经看到了将日志导入Google BigQuery的示例。但这不包含有关更新和删除数据的信息(仅插入数据)。
所以我们的对象能够更新它们的数据。而且我们对BigQuery表
浏览 3提问于2017-04-06得票数 3
回答已采纳
我的同事问是否可以颠倒集群中数据的顺序。所以它看起来就像下面这样。正常集群|反向集群||-|-||1|2||1|1||2|1 我说过，我记得我读过，数据是像二叉树一样搜索的，所以它是否颠倒并不重要。但现在我找不到任何提到它是如何在集群中实际搜索的东西。 BigQuery实际上如何在集群/分区中搜索特定值？
浏览 10提问于2021-11-03得票数 1
我有一个bigQuery表，它有大约200万行从JSON文件中加载。JSON文件中的实际字段为10，但表中有7列与初始DDL相同。现在，我修改了表，并添加了其余三列。更改后，新添加的列中的值将被填充为NULL。
现在，我想在现有的200万行中回填数据，但只有这三个新添加的列具有来自json文件
浏览 3提问于2021-08-27得票数 0
回答已采纳
我有一个分区/集群表如下：当我运行这个查询时： projectId `projectId.dataset.tables`为了确保分区具有相同的大小，我计算了每个分区中的projectId数。在加法中，我尝试使用此查询查询流缓冲区，该查询没有返回任何结果。SELECT projectId FROM `projectId.dataset
浏览 3提问于2019-03-17得票数 4
回答已采纳
我们有以下三个JSON，它们的数据应该加载在同一个表中：{ "name": "joe", "customValues": {是一个数组字典，其中我们的一个表的模式中的每个数组。如果上面的3个JSON中的每
浏览 41提问于2022-02-16得票数 2
回答已采纳
我试图通过连接的工作表在大查询生成的提取列之间插入一个手动列。基本上，我已经有一个Google连接表，它通过SQL从大型查询中提取出来。但是，每当我试图在查询生成的列之间插入手动列时，它就会自动将手动列移到右侧的末尾或左侧的末尾。我不想要这个。我希望能够在Google表中生成的大型查询列之间插入一个手动列。
难
浏览 6提问于2022-08-26得票数 1
对于流插入，我想使用一个模板表(带有用户id后缀)，它本身就是一个分区表。这样，我就可以使我的表比仅仅使用分区表更小，从而使我的查询更具成本效益。而且，无论我的系统中有多少用户，我的每个用户的查询成本都保持不变。根据的文档
若要按日期创建较小的数据集，请使用时间分区表.若要创建不基于日期的较小表，请使用模板表
浏览 0提问于2018-07-24得票数 3
回答已采纳
云服务器
ICP备案
云直播
即时通信 IM
实时音视频
腾讯云开发者
