如何在colab上设置Google环境变量
如何在colab上设置Google环境变量
提问于 2022-01-19 22:10:03
我计划创建一个脚本来从Bigquery中提取数据，但我不知道如何设置环境变量。
下面是官方文档中的一个实例：
from google.cloud import bigquery
# Construct a BigQuery client object.
client = bigquery.Client()
query = """
SELECT name, SUM(number) as total_people
FROM `bigquery-public-data.usa_names.usa_1910_2013`
WHERE state = 'TX'
GROUP BY name, state
ORDER BY total_people DESC
LIMIT 20
"""
query_job = client.query(query) # Make an API request.
print("The query data:")
for row in query_job:
# Row values can be accessed by field name or index.
print("name={}, count={}".format(row[0], row["total_people"]))我运行它，但返回一个错误：
DefaultCredentialsError: Could not automatically determine credentials. Please set GOOGLE_APPLICATION_CREDENTIALS or explicitly create credentials and re-run the application. For more information, please see https://cloud.google.com/docs/authentication/getting-started我遵循官方医生，但我遇到了一个问题:第二步是设置环境变量，但它只是在Windows和Linux上提供实例。那么，如何在Colab上设置环境变量呢？
另外，我注意到实例要求我提供关键路径。在本地机器上是可以的，但是我不认为上传我的密钥文件并在我的代码在线通过它的链接是一个想法。
回答 2
Stack Overflow用户
回答已采纳
发布于 2022-01-20 02:02:23
与设置环境变量或直接上传到Colab不同，您可以在Google上上传您的密钥，并在那里应用必要的限制。在您的代码中，您可以将Google挂载到Colab，使用Drive位置作为关键文件路径进行身份验证。
from google.cloud import bigquery
from google.oauth2 import service_account
from google.colab import drive
import json
# Construct a BigQuery client object.
drive.mount('/content/drive/') # Mount to google drive
# Define full path from Google Drive.
# This example, key is in /MyDrive/Auth/
key_path = '/content/drive/MyDrive/Auth/your_key.json'
credentials = service_account.Credentials.from_service_account_file(
filename=key_path, scopes=["https://www.googleapis.com/auth/cloud-platform"],
)
client = bigquery.Client(credentials=credentials, project=credentials.project_id,)
query = """
SELECT name, SUM(number) as total_people
FROM `bigquery-public-data.usa_names.usa_1910_2013`
WHERE state = 'TX'
GROUP BY name, state
ORDER BY total_people DESC
LIMIT 20
"""
query_job = client.query(query) # Make an API request.
print("The query data:")
for row in query_job:
# Row values can be accessed by field name or index.
print("name={}, count={}".format(row[0], row["total_people"]))输出：
Stack Overflow用户
发布于 2022-01-20 21:57:19
我问了这个问题，我认为Ricco D的解决方案可以很好地解决我的问题。
不过，我查看了谷歌官方文档，发现它提供了从BigQuery提取数据的几种方法：
- 通过magics使用BigQuery (%bigquery--)
- 通过google BigQuery使用bigquery(使用client.query())
- 通过熊猫使用BigQuery -gbq(使用pd.io.gbq.read_gbq())
实例和参数设置(参见这里 )
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/70778399
复制相关文章
相似问题
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号