腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(3072)
视频
沙龙
1
回答
如何
使用
R
将
Google
Cloud
Datalab
输出
保
存到
BigQuery
中
、
、
、
我在
Google
Cloud
Datalab
中
使用
R
,我想将我的
输出
保
存到
BigQuery
。我知道有一种方法可以通过
使用
bqr_create_table在Python
中
做到这一点,所以我正在寻找
R
中
的等价物。
浏览 26
提问于2019-01-25
得票数 1
回答已采纳
1
回答
将
数据从iOS推送到
Google
、
、
、
、
我对
Google
Cloud
Platforms并不熟悉,对整个体系结构也不太确定,但我试图实现的是
将
一些数据从iOS application中保
存到
Google
Cloud
中
,并
使用
Google
Cloud
Products对这些数据做一些分析工作,例如:Dataproc和
Datalab
。从我目前所读到的情况来看,我需要在
Google
Cloud
BigQ
浏览 5
提问于2017-05-15
得票数 1
1
回答
在
google
云vm实例(不是
datalab
实例)中
使用
pydatalab
是否可以
使用
安装在常规
google
cloud
vm实例
中
的jupyter集中的包,而不是运行容器的
datalab
实例?如果是这样,那么我无法弄清楚
如何
正确设置凭据来访问
google
云服务。我已经按照上的说明安装了
datalab
并启用了jupyter扩展。一切似乎都很顺利,但我无法连接到任何谷歌云服务,例如
bigquery
。from
google
.
datalab
import Context con
浏览 1
提问于2017-11-21
得票数 1
2
回答
有没有办法从
Google
Cloud
Datalab
运行
BigQuery
脚本?
、
%%bq querySELECT 3;import
google
.
datalab
.
bigquery
as bqSELECT 2;'''我认为问题出在python API不知道
如何
处理返回的多个结果集。
浏览 20
提问于2020-04-10
得票数 0
1
回答
未能将大数据从
Google
BigQuery
导入到
Google
Cloud
DataLab
、
、
为了
使用
Tensorflow进行机器学习,我尝试了两种方法,在
Google
中将大约5000万行( 18GB )的大表导入到
BigQuery
中
。首先,我
使用
(所需的所有模块都是导入的):data = pd.read_gbq(query='SELECT {ABOUT_30_COLUMNS...}我也找不到
如何
在allowLargeResults (
浏览 1
提问于2017-07-02
得票数 3
3
回答
-bash:
datalab
:找不到命令
我通过运行gcloud components install
datalab
安装了
cloud
datalab
组件-bash:
datalab
: command not found当我运行gcloud components list时,我发现我已经正确安装了
datalab
,如下图所示: 你知道会出什么问题吗?
浏览 0
提问于2017-07-20
得票数 3
2
回答
ValueError:安装DBtypes以
使用
此函数
、
、
、
我第一次
使用
BigQuery
。client.list_rows(table, max_results = 5).to_dataframe();ValueError:我发现类似的问题(几乎完全相同),但我不明白
如何
实现他们提出的解决方案。
浏览 27
提问于2022-06-06
得票数 13
回答已采纳
1
回答
如何
在本地运行python代码,但
使用
云计算资源来执行?
、
、
我有一个有点重的python笔记本,我想在GCP上运行,但在库破坏等问题上遇到了一些问题,我
将
慢慢地逐渐减少。同时,我想知道(如果可能的话)
如何
在我的本地机器上运行我的笔记本,同时
将
执行的工作负载放在一些云计算资源上?这样,我的代码就可以像在本地机器上设置的那样被调用。一个简单的解决方案是上传我本地windows机器的自定义镜像,但你不能在GCP免费试用
中
做到这一点,而且我是一个严格的学生!
浏览 1
提问于2020-07-07
得票数 0
1
回答
在
BigQuery
笔记本中
使用
Dataproc和Spark
BigQuery
连接器时出错
、
、
、
、
能够
使用
正确的TCP防火墙权限在
Google
中
运行
Google
(笔记本)。
使用
简单的脚本,这将启动最新的星火集群(
使用
Dataproc启动3个工作人员的1个主服务器)。首先,我们在spark-submit
中
测试下面的代码,然后在启动
DataLab
之后,我不知道
如何
修复下面的错误。<YOUR IP>:8080 第4步:在
Google
中
使用
启动
DataLab
,您将看到<e
浏览 1
提问于2019-01-12
得票数 3
回答已采纳
1
回答
通过pandas_gbq
将
联邦数据源读入云
datalab
时遇到的问题
、
、
、
我在
google
中有数据,我已经将其设置为一个
google
BigQuery
联邦数据源(外部数据源)。我想
使用
pandas_gbq在云
datalab
中导入这些数据 我试着遵循马特姆在帖子
中
的指示:“我遇到了完全相同的问题,我必须为该项目启用两个驱动程序接口(除了
BigQuery
API),并
浏览 2
提问于2017-09-11
得票数 4
9
回答
将
Pandas DataFrame写到或
BigQuery
、
、
、
我正在
Google
平台/
Datalab
中
开发一个木星笔记本。我已经创建了一个Pandas DataFrame,并且希望
将
这个DataFrame写到(GCS)和/或
BigQuery
中
。bucket_path = bucket_name bucket.exists() 我尝试过基于
Google
浏览 14
提问于2016-03-30
得票数 47
回答已采纳
1
回答
Datalab
BigQuery
数据到Dataproc Hadoop字数
、
、
、
、
我目前在
Google
BigQuery
上有一些reddit数据,我想对选择的subreddits上的所有评论做一个单词计数。查询大约是90GiB,因此不可能直接加载到
DataLab
中
并转换为数据帧。有人建议我
使用
DataProc
中
的Hadoop或Spark作业来创建字数统计,并设置一个连接器
将
BigQuery
数据导入到DataProc
中
,以便DataProc可以进行字数统计。我
如何
在
DataLab
<
浏览 33
提问于2021-10-25
得票数 1
1
回答
更新apach梁数据流和
google
云-
bigquery
的指南
、
、
、
、
我想
使用
最新的
google
bigquery
和dataflow sdk,它可用于python 2.7。* keywords=[** license="Apache Software License",** '
google
-
cloud
-
bigquery
浏览 1
提问于2019-11-19
得票数 0
1
回答
为什么我不能创建一个同时安装了Jupyter和
DataLab
的
Google
DataProc集群?
、
、
我想在DataProc
中
创建一个同时安装了Jupyter和
DataLab
的集群(我知道它们非常相似,但团队成员有不同的偏好)。我可以用它们
中
的任何一个来创建集群:
使用
Jupyter的集群: gcloud dataproc clusters create $DATAPROC_CLUSTER_NAME_JUPYTER \--scopes
cloud
-platform,
bigquery
而且两者都工作得很好。=$JUPYT
浏览 36
提问于2019-04-05
得票数 1
回答已采纳
2
回答
Dataproc +
BigQuery
示例-有可用的吗?
、
、
根据Dataproc ,它具有“与
BigQuery
的本地和自动集成”。它们有任何Dataproc +
BigQ
浏览 3
提问于2015-10-06
得票数 11
回答已采纳
1
回答
使用
Java
将
Array<T>保存在
BigQuery
中
、
我试图
使用
Spark连接器
将
数据保
存到
大型查询
中
。ToStringpublic class TagList { private List<String> s2;现在,当我试图
将
这个Pojo保
存到
大型查询
中
时,它会将我抛到错误下面 Caused by: com.
google
.
cloud
.spark.
bigquery
.repack
浏览 0
提问于2020-11-26
得票数 0
回答已采纳
2
回答
如何
在
Google
的
Datalab
中
运行cron作业
中
的python程序?
、
我是
google
的
Datalab
的新用户。我正在评估
将
Datalab
用于生产数据管道的可能性。这意味着我希望能够作为python程序运行我的数据处理程序,而不是作为一个交互式笔记本。
Datalab
似乎是为交互式jupyter笔记本的
使用
而设计的。但我记得在注册过程中看到了一个屏幕,显示用户可以运行他们的整个数据管道。但是,所有的文档只涉及交互式数据分析,而没有提到方案数据分析。我还想在cron作业
中
定期运行脚本。因此,我需要两件事: 1)
如何
在
浏览 5
提问于2016-03-10
得票数 1
4
回答
从本地木星笔记本
中
访问
Google
BigQuery
数据
、
、
、
我在
DataLab
上买了几本笔记本电脑。出于各种原因,我想从我的机器上的一个本地木星笔记本
中
获取相同的数据。from gcloud import
bigquery
给我一个堆栈跟踪,其中最后一行: ContextualVersionConflict从本地木星笔记本
中
访问
BigQuery
数据源的最佳方法是什么?
浏览 10
提问于2016-05-17
得票数 7
回答已采纳
1
回答
将
木星与文件共享或挂载文件夹一起
使用
、
、
、
、
如何
在jupyter服务和其他服务(
Google
或git存储库)之间同步笔记本?目前,我正在从谷歌的
Datalab
移动到我自己的容器。我的动机是更多地控制数据区域(
Datalab
只在美国提供)和软件包,因为我想
使用
当前的Tensorflow版本。谷歌
使用
node.js服务器
将
GIT与
datalab
实例同步--然而,我无法在欧盟的一个自部署容器
中
运行该服务器。 第二次尝试是GCSFuse driver。-
浏览 1
提问于2016-04-21
得票数 1
1
回答
设置BiqQuery环境变量错误
我在跟踪
Google
的
BigQuery
页面,了解
如何
设置凭据,但是仍然有不正确的地方。以下是我遵循的步骤: from
google
.
浏览 20
提问于2020-07-28
得票数 0
点击加载更多
热门
标签
更多标签
云服务器
ICP备案
云直播
腾讯会议
实时音视频
活动推荐
运营活动
广告
关闭
领券