刚接触Python和GCP，但试图为云函数编写一个HTTPGet请求，其中它使用特定的client_Id到达Biqguery，在一个表中查找值以从连接表中返回值。在BQ中工作，当没有连接时，但当我将连接放入函数中时，它就会中断。在云函数中使用Python 3.7。 提前谢谢。'audience-cookie.sometable.cardholder.customerId'
QUERY = ('SELECT '+column+&
浏览 13提问于2020-08-08得票数 0
日志查看器
未知误差图像
在GCP (Python)中执行云函数时，我遇到了一个未知的错误。步骤：
运行云函数的Storage.Running 从BigQuery DataStore中检索数据，并将CSV文件保存在GCP Storage.Running云函数中，从BigQuery DataStore中检索数据，并将CSV文件保存到GCP Storage
浏览 5提问于2020-04-18得票数 2
回答已采纳
我正在与一位使用谷歌BigQuery的客户合作，我们正试图对他们的模型进行逆向工程。问题是，连接需要FQDN形式的项目Id，这通常是mydomain.com:myProject提供的
我对BigQuery一点也不熟悉，在用户仪表板里有没有地方可以找到这个？我们浏览过的所有内容似乎只给了我们项目ID。
浏览 2提问于2020-04-14得票数 0
为了从Google Cloud函数连接到存在于不同GCP项目中的Google Cloud BigQuery，我创建了BigQuery客户端，如下所示： const {BigQuery} = require('@google-cloud/bigquery'); keyFilename: 'path/to/service_account.json',
p
浏览 15提问于2020-01-22得票数 1
回答已采纳
是否可以使用云函数将带有json输出的rest api中的数据直接插入/流式传输到gcp中的bigquery？做了一些研究，但它总是要求放在GCS存储桶中，然后创建云函数将数据加载到bigquery。 提前谢谢。
浏览 19提问于2020-06-25得票数 1
当新数据被导入到BigQuery表中时，我希望触发一个云函数。理想情况下，我希望提取插入的所有行(其中一列是ISIN)。
这是可能的吗?怎么可能？
浏览 0提问于2019-02-20得票数 14
回答已采纳
我已经编写了一个部署管理器模板，它将在新项目中部署云调度器、pubsub、bigquery、桶、云构建、云功能。因此，当我们第一次部署时，它会出现一个错误，因为默认情况下，在新项目中，这些服务的API是禁用的。那么，我的问题是如何使用部署管理器在GCP中启用云调度器API、pubsub、bigquery、桶API、云构建API和云函数？
提前谢谢。
浏览 4提问于2022-06-13得票数 2
回答已采纳
2回答
我正在使用下面的ETL管道将数据输入BigQuery。数据源是.csv & .xls文件，来自每日下午3点发布的网址云调度程序在下午3:05向云发布/子主题发布消息Pub/Sub推送/触发订阅者-云函数在触发时，这些云函数(python )从URL下载文件，执行转换(清理、格式化、聚合和过滤)并将其上传到BigQuery。在GCP中是否有一种更干净的方法可以根据
浏览 4提问于2022-07-27得票数 1
我正在编写一个新的云功能，并使用在上宣布的新Google日志库。from flask import Requestfrom datetime import datetimequ
浏览 10提问于2022-03-06得票数 3
回答已采纳
1回答
在gcp中，每当文件( json、xml等多种格式)上传到存储桶中时，我都需要更新bigquery表。我有两个选择，但不确定每一个的优缺点。有人能建议一下哪个是更好的解决方案吗?为什么？方法1：方法2：
上传到存储桶的文件-->触发云函数(触发数据流作业) --> dataflow --&g
浏览 9提问于2018-09-01得票数 2
回答已采纳
我希望在GCP中创建一个云函数，它接收一个带有参数的HTTP请求，获取参数并在SQL语句中将它们传递给Bigquery，然后返回一个我可以传递回网站的结果。当我点击它但无法获得从BQ返回的值以在浏览器上显示时。
到目前为止，这是我的函数，感谢您在此之前的帮助。i
浏览 2提问于2020-06-12得票数 0
这涉及到在GCP BigQuery和GCP cloud SQL中以预定的顺序运行多个查询，并在后续查询中使用早期查询的查询结果。这是很好的，因为在gcp cloud SQL数据库中触发“只读”查询，并在gcp BiqQuery中运行多个查询。但是，由于我的操作涉及从GCP云SQL中清除数据，因此联邦查询被排除在外。选项2:我正在考虑的另一个选项是使用gcp计算li
浏览 2提问于2021-03-02得票数 0
我目前在GCP中有一个管道，它使用云函数摄取数据，将其存入PubSub，在数据流中进行处理，最后将其插入到BigQuery中。我正在尝试计算平均消息从云函数摄取到BigQuery需要多长时间(包括插入时间)。
我了解Stackdriver指标/仪表板以及GCP的API仪表板。我很想简单地将每个服务的所有延迟值相加，但我不确定它是否涵盖了我无法控制的延迟值(例如，插入到BQ，从数据流推送到p
浏览 2提问于2019-11-21得票数 0
我正在做一个自定进度的教程，当我第一次登录它的时候，它指导我将数据加载到存储桶中，并从那里将数据复制到BigQuery中，等等。我刷新了页面，它消失了，我一直无法找到恢复它的方法。你知道如何回到我正在学习的教程吗？
浏览 1提问于2020-10-20得票数 0
Firebase云函数日志的保质期似乎很短，无法更改。所以我在想如何存储较旧的日志。我试着在bigquery中添加一个接收器，但似乎不起作用，因为尽管设置了接收器，但在bigquery中无法看到/访问任何地方的任何日志。有没有人遇到过在某个地方自动存储所有firebase日志的简单方法？它不一定是bigquery，只要在需要时可以很容易地查找旧的函数日志即可。
浏览 9提问于2020-01-09得票数 0
1回答
当从服务帐户运行Dataflow作业时，我设想使用设置的服务帐户将被传播到Dataflow在后台使用的辅助VM。没有提到任何这一点，但是他们确实提到了凭据用于对GCP服务进行身份验证。因此，我们为用户提供对项目B中的BigQuery数据集的访问权限，以及上面描述的第二种方式使用的服务帐户。该服务帐户还将在项目A中具有jobUser和dataViewer for 的角色。现在，问题是，在这两种情况下，我们似乎都需要为默认的</e
浏览 0提问于2018-12-05得票数 3
我正在尝试确定是否可以创建多个服务帐户，并为每个服务帐户创建不同的策略(甚至是通用策略)。在此策略中，我要设置数据集/表的默认保留期。只有我(admin)可以在创建表后更改保留。
浏览 14提问于2019-11-12得票数 0
回答已采纳
我希望通过GCP中的云函数创建到BigQuery的HTTPrequest，其中请求传递一个值，该值被传递给查询，然后从连接表返回另一个值。SQL在BQ中工作，但在我将其应用于Cloud函数时，获取返回值时出现问题。from google.cloud import bigquery
def cors_enabled_function(reques
浏览 2提问于2020-07-29得票数 0
我正在研究如何使用GCP，特别是大数据和分析函数，我不太确定它们的功能。我做了一些映射来理解这些组件。你能帮我查一下我的理解吗？云Pub/Sub: Apache Kafka
云</e
浏览 3提问于2019-02-10得票数 0
云服务器
ICP备案
云直播
腾讯会议
实时音视频
腾讯云开发者
