我正在使用Spark Mllib做一个关于零售业的链接分析项目。PurchaseQuantity - Int PurchaseAmount - Doublescala> import org.apache.spark._ at org.apache.spark.rdd.RDDOperationScope$.withS
浏览 10提问于2016-08-24得票数 1
回答已采纳
我注意到SparkML中有两个LinearRegressionModel类，一个在ML包(spark.ml)中，另一个在MLLib (spark.mllib)包中。这两个实现方式截然不同--例如，来自MLLib的一个实现了Serializable，而另一个则没有。为什么有两个类？哪一个是“正确”的？有没有办法把它们转换成另一种呢？
浏览 9提问于2016-08-09得票数 50
回答已采纳
https://spark.apache.org/docs/2.2.0/mllib-feature-extraction.html#word2vec https://spark.apache.org/docs/2.2.0/ml-features.html#word2vec这里
浏览 0提问于2018-12-12得票数 6
回答已采纳
1回答
我是Scala和Spark的新手。我使用以下代码进行回归(基于此链接)：import org.apache.spark.mllib.regression.LinearRegressionModelimport org.apache.spark.mllib.regression.LinearRegression
浏览 0提问于2016-12-06得票数 1
我试图用FPGrowth对交易数据进行MLlib的基本市场篮子分析。我已将交易编码为相同的格式： res632: Array[Array[String]] = Array(Array(7976503128), Array(10)
fpg: org.apache.spark.mllib.fpm.FPGrowth = org.apache.
浏览 0提问于2016-09-21得票数 1
回答已采纳
val r = DenseVector(rvec.split(',').map(_.toDouble))}Name: Compile Error val l = Dens
浏览 1提问于2017-10-26得票数 0
回答已采纳
1回答
我想像下面的代码一样使用Spark的org.apache.spark.mllib.tree.DecisionTree，但是编译失败。import org.apache.spark.mllib.tree.DecisionTree
import org.apache.spark.mllib.tree.model.DecisionTreeModelimport org.apache.spark.mllib.util.MLU
浏览 4提问于2017-05-22得票数 0
1回答
我正在尝试使用java和ApacheSpark1.0.0版本来实现决策树分类器的简单演示。我基于。到目前为止，我已经编写了下面列出的代码。按照下面的代码，我得到了错误：
org.apache.spark.mllib.tree.impurity.Impurity impurity = new org.apache.spark.mllib.tree.impurity.Entropyorg.apache.spark.mllib</e
浏览 5提问于2014-06-28得票数 6
回答已采纳
1回答
我一直在使用Spark MLlib和scala编写一段简单的代码。但是，当我运行代码时，我得到了错误(在线程"main“java.lang.NoClassDefFoundError: java.lang.NoClassDefFoundError中的异常)。是什么导致了这个错误？
IDE工具(IntelliJ)告诉我，"LinearRegressionWithSGD是不推荐的“，我安装了spark版本的2.2.0和s
浏览 2提问于2017-12-07得票数 1
回答已采纳
我理解摒弃了许多MapReduce算法，它将基于Apache或Spark或其他引擎，比如h2o (基于"Apache : Beyond MapReduce“的介绍)。我想尝试一些推荐算法，但我不太确定什么是新的，什么是“不推荐的”。我看到了以下链接，
指spark-rowsimilarity和spark-itemsimilarity。同时，Apache (或者它是星火MLLib?)实现推
浏览 5提问于2016-05-14得票数 0
回答已采纳
3回答
这是我第一次使用PySpark (Spark2)，我正在尝试为Logit模型创建一个玩具数据帧。我成功地运行了，并希望将我自己的数据传递给它。我试过了：import numpy as npfrom pyspark.mllib.regression1000)-2]).reshape(1000,-1)
df = map(lambda x: LabeledPoint(x[0], Vectors.dense(x[1:])), df
浏览 0提问于2017-07-13得票数 17
回答已采纳
我正在尝试在eclipse中使用Scala语言中的Spark MLlib算法。在编译过程中没有问题，并且在运行时出现错误"NoSuchMethodError“。下面是我的代码# codeimport org.apache.spark.SparkContext
import org.apache.spark.mllib.linalg.Vectorsimpor
浏览 0提问于2015-03-19得票数 1
1回答
下面是基于的分解(注意，注释来自于文档示例)import org.apache.spark.mllib.linalg.SingularValueDecompositionimport org.apache.spark.mllib.linalg.Vector
import org.apache.spark.mllib.linalg
浏览 0提问于2016-11-26得票数 3
我试图在星火中使用平方距离函数，但似乎没有任何效果。我尝试了Vector.sqdist，但是得到了这个错误"sqdist不是scala.collections的成员.“(但文档显示它是我导入的org.apache.spark.mllib.linalg.Vector ()的一个成员)。org.apache.spark.SparkConf
import org.apache.spark.mllib.linalg
浏览 2提问于2015-11-15得票数 0
回答已采纳
我试图使用SVMWithSGD来训练我的模型，但是我在尝试访问我的培训时遇到了ClassCastException。$$anonfun$take$1.apply(RDD.scala:1364) at org.apache.spark.rdd.RDD.take(RDD.scala:1337)
at
浏览 5提问于2020-07-01得票数 0
回答已采纳
1回答
这是我正在使用的代码。在这里，它在没有data.take的情况下运行得很好，但是在python中使用时会出现错误。")ratings = pData.map(lambda l: l.split(','))\
.map(lambda l: Rating(int(l[0])谢谢你的帮助!\spark-3.0.0-preview2-bin-hadoop2.7\python\pyspark\ml
浏览 0提问于2020-04-19得票数 0
3回答
我无法为scala项目在Intellij中导入spark mllib库。我得到了一个决议例外。下面是我的sbt.build
libraryDependencies+= "org.apache.spark" %% "spark-core" % "2
浏览 0提问于2018-07-16得票数 0
我使用Scala (2.10.4版本)和Spark -我已经迁移到Spark 1.0.1。版本，并注意到我的一个脚本现在不能正常工作。它以以下方式使用MLlib库中的k-means方法。假设我有一个名为KMeansModel的clusters对象res8: String = org.apache.spark.mllib.clustering.KMeansModel@689eab53
下面是我<e
浏览 2提问于2014-07-25得票数 0
回答已采纳
1回答
我现在使用的是用实现的ALS。在目录/org/apache/spark/中有两个不同的包。这两个包中的每个包都有子文件夹recommendation，并且在这个文件夹中有类ALS.scala (mllib还有其他的MatrixFactorizationModel.scala)
我的问题是，ml目录和mllib目录有什么不同？例如，我在网上找到了Apache Spark的
浏览 7提问于2016-09-12得票数 2
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
云直播
对象存储
腾讯会议活动推荐
腾讯云开发者
