1回答
我是bigquery新手，需要对其进行一些测试。纵观bigquery文档，我找不到任何关于创建和调度工作的方法。
浏览 1提问于2019-02-16得票数 0
回答已采纳
1回答
我想每天晚上自动将谷歌BigQuery查询的结果导出到S3存储桶中。BigQuery是否支持任何类型的自动查询运行？
这在某种程度上与相反。
浏览 1提问于2014-11-01得票数 2
1回答
运行一次运行一个
、、、
我们的AppEngine是用BigQuery编写的，它有条件地从BigQuery表读取并写入另一个BigQuery源表。请问我们如何克服上述问题？
我们期望一次运行一个作业
浏览 13提问于2022-10-29得票数 0
我有一个BQ查询，它会产生很多数据，我通常会将这些数据保存为一个新表。是否可以将此过程安排为每天进行？如果可能，推荐的方法是什么？
浏览 0提问于2018-06-28得票数 0
有些人离开了公司，却没有给我留下任何关于他已经制作的每个作业调度程序的线索，一些连接到datastudio的作业停止工作。有没有办法可以找到连接到表的作业调度程序？
浏览 9提问于2021-05-24得票数 0
我们有一个非常简单的管道，从GCS读取，执行一个简单的ParDo，然后将结果写入BigQuery。这是自动标度多达50个VM，运行在GCP上，不做任何花哨的事情。但是，当它到达BigQuery写(使用BigQueryIO)时，它就会慢下来--尽管它只需要写大约100万条记录(~60 1M )。单是这一步就需要20米。除了对BigQuery的缓慢写入之外，图表还显示该步骤是“停止”的，尽管它是成功的(尽管非常慢)。对于一个简单的BigQuery写操作来说，这个步骤看起来也太复杂了(见下图)。数据流Java SDK: 2.0.
浏览 4提问于2017-08-25得票数 2
目前，我们在为BigQuery活动管理器调度DoubleClick数据传输方面有很多请求。因此，我们按照这里的指示使用数据传输V2.0。它需要手动设置和使用用户帐户的权限。我正在寻找"bigquery数据传输服务“的python客户端库，特别是如何启动BigQuery作业来运行或调度回填以将DCM数据加载到bigquery。如何使用服务帐户自动设置"bigquery数据传输“，而不是用用户帐户手动设置？
谢谢!
浏览 0提问于2017-11-02得票数 1
在我的云函数中，我有一个查询，我正在执行该查询，并将作业结果写入新的bigquery表。我希望我的查询应该是基于一些单位值的动态的(使用外部动态参数)，我是从google云调度器(它包含身体部分的一些参数值(使用post方法和http调用)触发这个云功能)，谁能建议如何将这个参数值从云调度器的在云调度器的主体部分传递某些参数，但不知道如何在云功能中使用这些参数。云调度器的主体：'unit':
浏览 3提问于2019-09-19得票数 2
回答已采纳
2回答
我正在创建一个bigquery表，在该表中，我从其他几个bigquery表中加入和转换数据。它都是用sql编写的，整个查询大约需要20分钟才能运行，并且由几个sql脚本组成。现在，我想让上面的查询更加健壮，并对其进行调度，我无法决定该工具。我在考虑其他选择。
对于什么是首选的解决方案，有什么建议吗？
浏览 14提问于2020-10-23得票数 0
在过去的一周左右，我们在交互模式下向BigQuery提交的SQL子集(每天几千个数字中的个位数)开始花费几个小时而不是几秒时间。超时作业的SQL似乎是非常特殊的情况。我能够从BigQuery控制台再现这两个作业的行为：Job ID bluecore-qa:US.bquijob_4e0e4662_1639a278fcf
Creation是否有一种方法可以获得有关作业的更多信息，以查看第二个作业是否在BigQuery调度队列
浏览 1提问于2018-05-29得票数 0
回答已采纳
首先，我对Firebase和BigQuery...so相对来说有点幼稚.背景
我正在做一个项目，在这个项目中，我们有许多不同的移动应用程序--每个国家一个，每个操作系统(iOS，Android) --所有原始事件数据都被推入生活在同一个项目中的BigQuery数据集中。我的目标是利用使用BigQuery嵌套结构的能力，并维护原始Firebase表中的原始嵌套字段。
浏览 1提问于2018-04-03得票数 1
我在Google中阅读了很多关于将查询调度到外部存储位置的文章和解决方案，但它们似乎并不那么清晰。
注意:我的公司只订阅Google，而不订阅完整的云服务(Google平台)。
浏览 0提问于2019-03-15得票数 0
回答已采纳
有一个BQ表，其中调度了多个数据加载/更新/删除作业。由于这是自动作业，其中许多作业由于并发更新问题而失败。我需要知道我们是否在BigQuery中提供了检查表是否已被DML操作锁定的规定，以及我们是否可以序列化查询以避免作业失败
浏览 12提问于2019-05-22得票数 3
每次我通过看到烧烤作业状态时，当作业运行时，它总是返回waitMsAvg的0。它是有意的行为，还是一个bug？
在作业运行时，如何查看值？
浏览 1提问于2022-05-26得票数 0
回答已采纳
我正在使用BI工具查看Bigquery中的数据。数据分布在多个表中，因此在查询中有几个联接，以获得所需格式的数据。由于处理所有这些数据花费了一分钟时间，而且我希望有一种实时的体验，所以我创建了一个调度的查询来运行这个查询，它可以连接并将输出保存到一个表中。表中的数据每30分钟从ETL工具中输入(增量负载)。这将创建Bigquery来加载数据。我在调度查询中禁用了调度，因此它只能在API调用期间运行。在python中是否有任何
浏览 1提问于2020-01-30得票数 0
回答已采纳
1回答
我有一个要求加载100的表从谷歌云存储到BigQuery (全球通信系统->临时表->主表)。我已经创建了一个python进程来将数据加载到BigQuery中，并在AppEngine中进行调度。我已经在异步模式下提交了作业，并在稍后的时间点检查作业状态。由于我有100个表，需要创建一个监控系统来检查作业加载的状态。操作过程并不复杂。
浏览 1提问于2016-10-03得票数 0
我们希望使用预定的查询在BigQuery上执行测试。
测试从数据集中检索表，并基本上将其复制到另一个项目中的另一个数据集(我们作为所有者有权限)。到目前为止，我们在实例中使用R中针对BigQuery API编写的脚本成功地做到了这一点，但是我们希望/需要使用BigQuery中的预定查询来实现这一点。如果我只是编写一个查询来检索初始表数据，并尝试对其进行调度，我会看到有一个项目选择器，但它是禁用的，因此，我似乎被绑定到了与我登录的用户的项目中。
浏览 1提问于2019-05-22得票数 2
回答已采纳
我昨天在谷歌云存储和BigQuery之间设置了一个传输作业，在UTC时间凌晨3:30运行。不幸的是，今天早上当我检查日志时，这项工作并没有开始。还有人有这个问题吗？我已经在谷歌上搜索过了，似乎还没有人遇到过这个问题。
浏览 2提问于2018-12-12得票数 0
我正在尝试使用查询调度程序在Google bigquery中安排每月的数据导出。field_delimiter=';') as
select id from `project.database.table`; 这在我运行查询时运行得很好，但在我将其保存为计划查询时失败(错误:无法在带有EXPORT语句的作业中设置目标表) 如果不指定结果表，则无法使用调度器。
浏览 22提问于2021-01-23得票数 0
回答已采纳
我已经在BigQuery中成功地安排了我的查询，结果被保存为数据集中的表。我看到了很多关于将在中传输到BigQuery或Cloud的信息，但我还没有发现任何关于将导出从( BigQuery表)调度到云存储( Cloud )的信息。是否有可能安排将BigQuery表导出到云存储，以便我可以进一步安排通过Google数据传输服务将其发送给我？
浏览 6提问于2020-01-10得票数 3
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
云直播
对象存储
腾讯会议活动推荐
腾讯云开发者
