腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(72)
视频
沙龙
3
回答
@
google-
Cloud
/
bigquery
查询
接口
在
云
函数
中使
用时
返
回空
Promise
、
、
我正在尝试使用'@ Google -
Cloud
/
BigQuery
‘库从Google
Cloud
函数
中
查询
BigQuery
。当
Promise
返回时,我得到的只是一个Array,其中包含另一个空Array,尽管当我从Big query控制台运行相同的
查询
时,我得到了一个非空的响应。我尝试使用异步
函数
而不是
promise
函数
,但没有成功。我还给了我的服务帐户"
B
浏览 19
提问于2019-05-28
得票数 1
2
回答
如何安排从
BigQuery
表到
云
存储的导出?
、
、
我已经
在
BigQuery
中成功地安排了我的
查询
,结果被保存为数据集中的表。我看到了很多关于将在中传输到
BigQuery
或
Cloud
的信息,但我还没有发现任何关于将导出从(
BigQuery
表)调度到
云
存储(
Cloud
)的信息。是否有可能安排将
BigQuery
表导出到
云
存储,以便我可以进一步安排通过Google数据传输服务将其发送给我?
浏览 6
提问于2020-01-10
得票数 3
2
回答
是否可以使用自定义
函数
从
BigQuery
中读取gcs对象的元数据
、
、
我正在从GCS对象(使用csv和json文件类型(
在
单独的表中))向
BigQuery
表中摄取数据,我想执行数据验证,因此
在
将文件上传到GCS期间,我已经
在
文件元数据中存储了行数,现在在摄取完成后,我想验证摄取表中的行数是否与文件元数据中的行数匹配注意:我想过
在
UDF中利用js的可用性,但它不允许我们使用外部库 更新: 根据medium上的这篇文章,他们说我们可以通过将编译后的js包作为.js文件发布到
云
存储并使用自定义
函数
中的选项来调用它,从而使用外部库https:
浏览 40
提问于2021-06-16
得票数 0
1
回答
使用list_transfer_configs查看大
查询
中计划
查询
的状态
、
、
、
我正在尝试创建一个
云
函数
,它将检查某些预定
查询
的状态,以便触发另一个进程。我正尝试
在
main.py
中使
用下面的代码from google.
cloud
import
bigquery
_datatransferconfigs:") print(f"\tID: {config.name}
浏览 0
提问于2021-02-16
得票数 0
1
回答
如何在google
云
功能
中使
用在google
云
调度器(Python)中定义的身体参数?
、
、
、
在
我的
云
函数
中,我有一个
查询
,我正在执行该
查询
,并将作业结果写入新的
bigquery
表。我希望我的
查询
应该是基于一些单位值的动态的(使用外部动态参数),我是从google
云
调度器(它包含身体部分的一些参数值(使用post方法和http调用)触发这个
云
功能),谁能建议如何将这个参数值从
云
调度器的Body部分使用到我的
云
函数
中,使我的
查询
动态化?
在
<
浏览 3
提问于2019-09-19
得票数 2
回答已采纳
1
回答
集成
BigQuery
、SubPub和
云
功能
、
、
、
我
在
一个项目中,我们需要使用
BigQuery
、PubSub、Logs和
云
函数
。一旦我
在
我的表中有了这个新的
查询
,我就需要读取这些列并获得
在
云
函数
中使
用的值。我想要创建一个
云
函数
,每当一个新的日志出现时就触发它,在这个
函数
中,我想访问包含在日志中的信息,
浏览 0
提问于2021-01-05
得票数 0
回答已采纳
1
回答
使用
BigQuery
的Angular10,获取访问被拒绝:
BigQuery
BigQuery
:获取驱动器凭据时权限被拒绝
、
、
我正在使用“@google-
cloud
/
BigQuery
”将Angular10、Firebase和
bigquery
集成在一起。我
在
我的项目中创建了一个
函数
文件夹,并在其中添加了关键的json文件,该文件是
在
Google
Cloud
控制台上生成服务帐户json后获得的。我的谷歌仪表板中有两个数据集,它们的源是
BigQuery
Drive.But,当我试图
查询
这些表时,我遇到了错误。
在
我的function文件
浏览 15
提问于2021-06-11
得票数 0
1
回答
Google
函数
:用非标准键将GCS文件加载到
BigQuery
中
、
、
、
、
我有一个Google桶,一个遗留系统将需要加载到NEW_LINE_DELIMITED_JSON中的
BigQuery
文件放在其中。我编写了Google
函数
,它接受JSON文件并将其加载到
BigQuery
。该
函数
可以很好地处理示例JSON文件--问题是遗留系统正在生成一个带有非标准密钥的JSON: "id": 12345, ...当然,"@address“键会抛出所有内容,而
云
浏览 7
提问于2018-01-12
得票数 1
回答已采纳
1
回答
使用
云
函数
将数据加载到大
查询
表中,它是附加到表中的,我需要它来替换
、
、
、
我有一个
云
函数
,它目前将获取一个
在
云
存储上登陆的.csv文件,并将该文件加载到一个大
查询
表中。问题是它是附加到它上面的,我需要它来覆盖它,我找到了一种使用命令行的方法--替换,但不确定如何在.json
中使
用
云
函数
来完成它。= require('@google-
cloud
/
bigquery
'); const Storage = require('@google-
clo
浏览 8
提问于2018-03-05
得票数 3
回答已采纳
4
回答
如何将本地数据工作流迁移到Google
Cloud
?
、
我们有一个
在
我们的服务器上运行的Python数据管道。它从各种来源获取数据,聚合数据并将数据写入sqlite数据库。每天的运行时间只有1小时,网络可能最多100mb。我们有哪些选择将其迁移到Google
Cloud
?我们希望有更可靠的调度,
云
数据库和更好的数据分析选项,从数据(强大的仪表板和可视化)和易于开发。我们应该选择无服务器还是服务器?
浏览 1
提问于2019-12-11
得票数 0
1
回答
google
函数
:错误:超出内存限制。
函数
调用被中断,但工作正常。
、
我创建了一个新的python
函数
,它每10分钟
在
BigQuery
中安排一个
查询
,我测试它,它就能工作了。
在
云
调度程序
中使
用http触发器,我得到了错误消息状态: 503的失败,但我再次看到,
在
BigQuery
控制台中,它正在按预期运行编
浏览 5
提问于2020-12-02
得票数 0
回答已采纳
2
回答
云
函数
运行速度慢,超出可用内存
、
、
、
我正在使用
Cloud
Functions
在
BigQuery
中运行一个跨分区表的
查询
。该表的大小为1 1GB。该脚本提取与id匹配的所有数据,并将每个数据流到Google
Cloud
Storage存储桶中。它对表中的所有It执行此操作(大约100次)。脚本正在运行,但是运行速度很慢,
在
云
函数
耗尽内存之前,它只拉出了9个商家。
在
build菜单中增加内存不会有任何效果。 有没有办法加速这个操作并减少它每次使用的内存量?const { <e
浏览 78
提问于2021-10-20
得票数 0
1
回答
从发布订阅用
BigQuery
编写
查询
、
、
我正在接收包含PubSub主题中数据的消息,我需要在
BigQuery
中插入从消息中获得的数据,并使用后台
云
函数
(发布/订阅)进行
查询
…… 我设法做到的是: /** const
bigquery
= new <em
浏览 6
提问于2021-01-11
得票数 0
回答已采纳
1
回答
通过Python实现
云
存储到
BigQuery
、
、
、
、
我每天都会收到一个数据到我的GCS存储桶中,并有一个
云
函数
将这些csv数据移动到一个
BigQuery
表中(参见下面的代码)。google.
cloud
import
bigquery
# Construct a
BigQuery
client object.,数据带有2天的回顾,导致
BigQuery
表中的重复数据。有没有办法让我更新这个
云
函数
,使其只
在
csv被删除后才从csv中拉入最近的日期?这样,我就可以很
浏览 5
提问于2021-06-04
得票数 1
3
回答
自动将Google存储文件导入Google表
、
、
、
、
目前,我
在
GCS桶中有一个CSV,它每天都由Google托管的管道进行更新。我使用这个CSV通过特性
在
MySQL数据库中填充一个表,没有问题。我想要做的是每天
在
指定的时间运行这个导入程序来更新表数据,因为我的管道将更新我的CSV。我看不出有什么UI特性可以这样做,也不知道如果不这样做,最好的方法是什么。与其说我是一个SWE,不如说我是一个数据分析员,所以试图破译像
云
运行这样的功能有点棘手…
浏览 6
提问于2021-05-04
得票数 0
回答已采纳
2
回答
计划
云
函数
内部的HTTP POST请求不起作用
、
、
、
在这个
函数
中,我尝试从对apple的HTTP调用的响应中检索验证数据,但它不能正常工作。有时它会起作用,一些数据会更新。我不确定为什么会发生这种情况,也不知道我在这里遗漏了什么。
浏览 17
提问于2020-01-06
得票数 1
1
回答
使用Java和
BigQuery
的全局搜索功能
、
、
、
我的应用程序有一个搜索文本框,用户输入应该提供建议(预测搜索),当用户选择其中一个建议时,我必须从
BigQuery
中的多个表中提取数据。Google
云
搜索自动完成功能(SearchApplication API)可与
BigQuery
?一起使用。谢谢 我是我
在
使用REGEX_CONTAINS()搜索预测搜索API在所有表中搜索。
浏览 17
提问于2022-12-03
得票数 0
回答已采纳
1
回答
通过
BigQuery
python
查询
联邦表(Google )
、
、
(这里有很多类似的线程,但不幸的是,我在任何地方或在Goolge上都找不到我错误的答案)之后,当我尝试使
用时
,会得到以下错误: “禁止访问:403个访问被拒绝:
BigQuery
BigQuery
:访问未配置驱动器API以前未在项目764086051850
中使
浏览 2
提问于2018-02-07
得票数 3
2
回答
我想列出在谷歌云
中使
用python
函数
的组织中的所有资源
、
、
我浏览了google
cloud
的官方文档,但我不知道如何通过提供组织id来使用这些文档来列出特定组织的资源。
浏览 0
提问于2020-01-26
得票数 0
3
回答
使用Google
云
调度程序运行BQ命令
我想每天
在
协调世界时00:00运行bq命令一次。我可以使用Google调度程序来调度这个命令吗?
浏览 19
提问于2022-10-25
得票数 0
回答已采纳
点击加载更多
热门
标签
更多标签
云服务器
ICP备案
腾讯会议
云直播
对象存储
活动推荐
运营活动
广告
关闭
领券