2回答
如果这种问题不能用火花解决的话，我很惊讶：# in this format: YYYY-MM-DD (year, month, day) ... ...我收到这个错误：
Error: org.apache.spark
浏览 4提问于2016-10-27得票数 3
回答已采纳
1回答
我正在使用sparklyr，并且有一个spark数据帧，它有一个包含单词的列word，其中一些单词包含我想要删除的特殊字符。, ''))
现在我想删除\。
浏览 11提问于2018-09-03得票数 2
回答已采纳
问题有Scala、PySpark和SparkR的答案，但没有sparklyr的答案。我一直不知道如何让sparklyr中的inner_join将join列中的NULL值视为相等。有人知道如何在sparklyr中做到这一点吗？
浏览 0提问于2019-01-03得票数 2
2回答
我可以很容易地在pyspark和sparkr中找到这个函数，但是sparklyr中似乎没有这样的函数。
有人知道如何在sparklyr中重新划分星火数据吗？
浏览 3提问于2017-05-29得票数 2
回答已采纳
1回答
Spark提供了一些很棒的流媒体功能。最近， R通过使用结构化流的sparklyR获得了流功能。如何在sparklyR中使用这些窗口功能？withWatermark("timestamp", "10 minutes")，在哪里可以找到window($"timestamp", "10 minutes", "5 minutes"),如何将移植到spa
浏览 0提问于2019-04-10得票数 0
2回答
我正在尝试使用regexp_replace清理sparklyr中的表中的字符串。我需要删除单词之间的多个空格和特定的整个单词。pharms <- spark_read_parquet(sc, 'pharms', 's3/path/to/pharms', infer_schema = TRUE, memory = FALSE) 要清理的向量我想
浏览 19提问于2020-07-17得票数 0
我的环境是Databricks。seed = 12345)
错误(函数(类、fdef、mtable)：无法为函数‘sampleBy’找到用于签名‘“tbl_spark”、“字符”、“列表”、“数字”的继承方法
浏览 0提问于2019-09-03得票数 1
回答已采纳
2回答
在google计算集群中，我正在尝试使用sparklyr包将csv文件读取到strudio中。配置如下：install.packages("sparklyr")
spark_installsc <- spark_connect(master = "yarn-client", config=config ,version = &q
浏览 1提问于2017-04-05得票数 0
2回答
我想在sparklyr数据帧上填充值(用以前的值替换NAs )，该字段保存字符串。我想改变这一点： ID, String2 NaN4 NaN 要这样做： ID, String2 a4 b 有没有办法在sparklyr中做到这一点？
浏览 29提问于2019-01-18得票数 2
问题 我有一个巨大的Spark Dataframe，叫做x。我正在使用databricks。X有数十亿条记录，太大了，不能收集到一台机器上。我要怎么做才能让它正常工作？： dplyr::summarize_all(x,mean) 更多信息 这是我目前收到的错误消息： Error in UseMethod("tbl_vars") :
no applicable method"SparkDataFrame“attr(，"package") 1 "SparkR” Mastering Spark wi
浏览 17提问于2020-09-24得票数 2
回答已采纳
1回答
我使用sparklyr的spark_write_table函数将表写入到HDFS中，并使用partition_by参数定义如何存储它们： spark_write_table在Hadoop-SQL中，我会这样做：PARTITION (col1 = 'my_partition')
VALUES (myvalues..)在sparklyr中是否有相应的
浏览 0提问于2018-01-26得票数 2
1回答
如何将SparkR中的SparkDataFrame转换为sparklyr中的tbl_spark有什么建议可以解决这个问题吗？
谢谢!
浏览 6提问于2020-11-06得票数 2
1回答
R火花包作为火花的前端有多快？
、、、、
我还看到了不同前端之间的比较，得出的结论是R太慢，以至于测试人员放弃了测试它的性能(；虽然这是对用户定义的函数的专门测试，并且可能没有使用sparklyr包)。我还知道sparklyr现在有了arrow集成，这导致了用户定义函数的性能改进，以及将数据复制到集群或从集群复制数据，如所示。我的问题是:与Python/Scala相比，sparklyr 的速度有多快？主要对标准<
浏览 3提问于2019-09-29得票数 3
我正在学习一个关于web (Adobe)分析的教程，在那里我想要构建一个马尔可夫链模型。()。我的问题是:是否有其他方法可以访问concat_ws()函数？不幸的是没有结果。
函数的目标是什
浏览 0提问于2018-10-12得票数 2
回答已采纳
1回答
删除闪烁栏中的NA列
、、、
我有一个有75列的数据表，其中12列有全部NA，有些列有70% NA，我想删除具有>=70% NA的列。df[,!apply( df , 2 , function(x) all(is.na(x)) )
df[= nrow(df)]df[, colSums(is.na(df)) < nrow(df)]
colSums<e
浏览 2提问于2017-03-23得票数 2
回答已采纳
有没有办法在sparklyr中禁用hive支持？sparkR.session(master="local[*]", enableHiveSupport=FALSE)
浏览 9提问于2017-01-10得票数 5
回答已采纳
2回答
我需要使用sparklyr根据另一列中的重复项删除在一列中重复的行。基R法iris_order = iris[order(iris[,'Sepal.Lengthduplicated(iris_order$Sep
浏览 7提问于2020-01-12得票数 1
回答已采纳
1回答
希望将一些R代码转换为Sparklyr，函数如lmtest::coeftest()和三明治：：三明治()。尝试开始使用Sparklyr扩展，但对Spark非常陌生，并且有问题:(第一步是使用linalg库创建一个对象：
library(sparklyrjava.lang.Exception: No matched constructor found for class org.apache.spark.mllib.linalg.Dens
浏览 2提问于2017-06-17得票数 14
回答已采纳
我试图在DSX上使用来自的RStudio火花，但是我遇到了以下错误：> sc <- spark_connect(master = "CS-DSX")
所以我看了一下SPARK_HOME[1] "/opt/spark"更新
浏览 9提问于2017-02-16得票数 0
1回答
与Kerberos的连接
、、、
我能够通过Livy服务连接到非Kerberized集群，而不会出现来自远程Rstudio桌面(windows)的问题。但是，如果启用了Kerberos安全性，则连接将失败：sc <- spark_connect("http://host:8998", method = "livy"Try spark_connect with config = livy_config()
使用sparklyr_0.5.6-9002和进行身份验证。另一方面，
浏览 1提问于2017-06-23得票数 5
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
