我目前正在测试Mleap解决方案，以便对Spark模型进行预测。为了做到这一点，我首先实现了这里描述的线性回归的Spark示例：https://spark.apache.org/docs/2.3.0/ml-classification-regression.html#linear-regression我已经能够将模型保存在Mleap捆绑包中，并在另一个Spark上下文中重用。现在，我想在Mlea
浏览 29提问于2019-06-07得票数 1
我创建了自己的自定义转换器(将字符串添加到列值的简单模型)来测试Mleap序列化，但是在为Mleap和Spark序列化编写Op文件时，我不能指定转换器的名称。.ops += my.domain.mleap.spark.ops
ml.combust.mleap.spark.registry.v21.ops += my.domain.mleap.spark.ops+= my.domai
浏览 4提问于2018-04-10得票数 1
1回答
是否可以使用VertexAI自定义容器模型构建来训练spark/pyspark ML库模型？我在vertex ai文档中找不到任何关于spark模型训练的参考。对于分布式处理模型构建，可用的选项只有PyTorch或TensorFlow。
浏览 30提问于2021-09-03得票数 0
1回答
我使用Spark2.1.0和Scala2.11.8。当我不使用mleap运行模型时，一切都很顺利。只有当我尝试以mleap的序列化格式保存模型时才会出现问题，以便以后可以使用mleap为模型服务。DataLocation") .asInstanceOf[String]
var data = sqlCon
浏览 2提问于2017-05-22得票数 0
回答已采纳
我正在使用pyarrow从s3读取拼图数据，我希望能够解析模式并将其转换为适合在Spark外部运行mLeap序列化模型的格式。 这需要解析模式。如果我有一个Pyspark数据帧，我可以这样做： test_df = spark.read.parquet(test_data_path)
schema = [ { "name" : field.simpleString此外，对于Spark数据帧，我可以通过执行以下操作来获得适当格式的行，以
浏览 47提问于2018-12-20得票数 0
我在弄清楚如何在真实的生产环境中使用火花的机器学习能力时遇到了一些困难。我想做的是：
假设ml的培训过程由笔记本电脑处理，一旦满足了模型要求我知道我可以编写一个长时间运行的spark应用程序，该应用程序公开api并在我的spark集群上运行，但我认为这并不是一种可伸缩的方法，因为即使数
浏览 5提问于2017-04-21得票数 1
(与apache协作过滤) AlsModel是在一个完全独立的环境中训练的，这不适合于生产用例。我们有方法将存储在hdfs中的文件或数据传输到我们的服务层(作为文件或在sql数据库中传输数据)。在我看来，这一过程如下：
享受春靴吧，这是神奇的，让一切都变得容易;-)
浏览 0提问于2019-06-08得票数 2
回答已采纳
4回答
我正在为基于ML的生产应用程序评估工具，我们的选择之一是Spark，但是我有一些关于如何在模型经过培训后提供服务的问题？例如，在Azure ML中，一旦经过培训，模型就会公开为一个web服务，可以从任何应用程序中使用，这与Amazon类似。
如何在Apache中服务/部署ML模型？
浏览 6提问于2016-11-10得票数 45
回答已采纳
我已经训练了一个检测模型，当嵌入tensorflow示例应用程序时，它做得很好。阅读的答案，在一个类似的问题上失去准确性，我想尝试tflite_diff_example_test在tensorflow对接机。由于文档目前还没有那么发展，所以我构建了引用的工具
使用：bazel build tensorflow/contrib/lite/testing/tflite_diff_example_test.cc，运行平稳在计算出所有需要的输入参数之后，我使用以下命令尝试了
浏览 0提问于2018-09-10得票数 0
回答已采纳
1回答
有谁能用简单的语言解释一下，在预测过程中，不依赖星团的星火模型是如何工作的？我的意思是，如果我们在ML管道中使用像ml.feature.stopwordremover这样的Spark函数并导出它--比如说，PMML格式--那么在没有Spark安装的生产环境中如何重新生成这个函数
浏览 0提问于2018-11-27得票数 0
回答已采纳
我正在将.vcproj从VS2005转换为VS2010，但是在转换之后会出现下面提到的错误。附加信息:混合模式程序集是根据运行库的版本“v2.0.50727”构建的，如果没有附加的配置information.Additional信息，则无法在4.0运行时中加载:混合模式程序集是根据运行时的版本“v2.0.50727”构建的，如果没有其他配置信息，则无法在4.0运行
浏览 1提问于2010-08-16得票数 32
3回答
我对在python中部署机器学习模型感兴趣，因此可以通过对服务器的请求进行预测。
我将创建一个Cloudera集群，并利用Spark开发这些模型，使用这个库pyspark。我想知道如何保存模型以便在服务器上使用它。我已经看到不同的算法都有.save函数(就像本文中的所回答的那样)，但是由于服务器将位于不同的机器上，而不是在Cloudera集群中，所以我不知道是否可以使用它们的.load和.predict函数。或者，为了保存模型并将其用于其他地方，我是否需要进行任何<em
浏览 11提问于2016-11-21得票数 14
回答已采纳
我想通过将spark java/scala api转换为dll文件来从C#运行apache spark源代码。我已经引用ikvm/ikvmc将spark jar文件转换为dll文件，但无法获得正确的结果。有没有办法在C#中运行火花源？
请指导我解决这个问题？Apache spark支持Java、Scala、R、Python语言来运行Spark。
浏览 1提问于2015-06-25得票数 15
2回答
PMML、Mleap、PFA目前只支持基于行的转换。它们都不支持基于框架的转换，比如聚合、groupby或join。导出包含这些操作的spark管道的推荐方式是什么？
浏览 28提问于2018-11-20得票数 3
我在一个函数中调用一个导入函数，但是在edmx.cs内部，我在调用行上收到了一个错误：
return ((IObjectContextAdapter)this).ObjectContext.ExecuteFunction
浏览 2提问于2014-02-12得票数 0
回答已采纳
1回答
我们最近在我们的应用程序中将spark升级到了2.2.0，这在运行时引入了Jackson 2.6.5Jars。因此，在运行时中加载了两个版本的Jackson jars，而spark选择了一个错误的版本(从lib文件夹中选择2.8.6，而不是从自己的jars文件夹中选择2.6.5 )。在windows上，选择的版本是正确的，尽管这两个版本仍然在运行时加载。我们如何解决这个问题？
浏览 3提问于2017-09-22得票数 3
我正在运行Spark独立集群，在提交应用程序时，spark驱动程序停止并显示以下错误。16/01/12 23:26:14 ERROR FileAppender: Error writing stream to file /spark/spark-1.4.1/work/app-20160112232613(FileAppender.scala:70)
at org.apache.spark.uti
浏览 1提问于2016-01-13得票数 8
在解决方案文件夹中，我可以看到所有对话框文件都是带有文件格式.dialog的JSON格式。我在github链接下面找到了关于如何使用.NET SDK开发一个自适应对话框的链接。我还找到了Bot作曲家的样本
，但是否有任何工具可以将Bot ".dialog“文件JSON转换为与AdaptiveDialog SDK代码.兼容的自适应对话框.CS文件？
浏览 3提问于2021-05-25得票数 0
我将一个项目从VS2008转换为VS2010，现在我正在运行时获得：
未处理异常: System.IO.FileLoadException:混合模式程序集是针对运行时的版本“v2.0.50727”构建的，如果没有其他配置信息，则无法在4.0运行时中加载。在搜索错误时，您似乎可以强制与旧程序集与useLegacyV2RuntimeActivationPolicy兼容，但这不是我想要的--我想在4.0运行时构建一个令人不
浏览 5提问于2011-09-12得票数 1
回答已采纳
1回答
我正在尝试实现一个DSL，它必须转换为一个已经实现的模型。DSL将描述来自给定模型的类的实例，因此使用DSLGenerator将DSL解析为java文件是不合适的。从体系结构的角度来看，我需要一个DSL-Loader类来将DSL转换为实例化语句，并将实例加载到java运行时中。使用提供的DSLGenerator可以做到这一点。然而，它看起来真的很丑陋。在这种情况下，是否存在将AST处理为实例模型的其他更合适的可能性？
浏览 0提问于2014-10-31得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
