DOCTYPE html>";我对使用Scala、Spring或Hadoop重新构建应用程序很感兴趣-非常热衷于通过链接和教程来讨论这一点，以帮助开发快速而安全的api。因此，我热衷于使用reactjs构建前端-并让Java应用程序提供API服务。我预测，启动一个新的Scala、
浏览 14提问于2017-08-24得票数 0
1回答
我正在尝试从Spark在集群模式下执行的scala脚本内部执行一个特定于HDFS的命令。scala> val cmd = Seq("hdfs","dfs","-copyToLocal","/tmp/file_landing_area/file.dat","/tmp/local_file_areaSeq[String] = List(hdfs, dfs, -copyToLocal, /tmp/fi
浏览 60提问于2019-06-03得票数 1
1回答
我有一项任务要在我的webapp中使用Spark作为Cache，我查看了它文档中共享的示例java代码，并能够独立运行它。但是当我在我的webapp (在servlet init()中)中初始化它时，也尝试在spring上下文中初始化它，但是不管是哪种方式，它都失败了。我正在使用ApacheSpark1.1.0使用Hadoop2.4的预构建包(火花-程序集- 1.1.0 -hadoop2.4.0.jar)init() {
System.out.printlnOffending class
浏览 1提问于2014-11-11得票数 1
回答已采纳
我跟随作为模板。本文中的代码使用作业设置来调用ParquetOutputFormat API的方法。scala> import org.apache.hadoop.mapreduce.Job java.lang.IllegalStateException: Job in state DEFINE instead of RUNNING
at org.apache.hadoop.mapreduce.Job.ensu
浏览 0提问于2014-12-19得票数 5
回答已采纳
2回答
我创建了一个星星体集群，ssh进入主服务器，并启动shell： org.apache.spark.api.python.PythonWorkerFactory.createThroughDaemon(PythonWorkerFactory.scala:78)
org.apache.spark.api.python.PythonWorkerFactory.create(Py
浏览 0提问于2014-11-13得票数 1
回答已采纳
1回答
我尝试将GOOGLE_APPLICATION_CREDENTIALS设置为服务帐户密钥文件，该文件允许访问帐户A中的必要桶。但是，如果启动spark-shell，则会出现以下错误。by: at com.google.cloud.hadoop<
浏览 1提问于2019-08-11得票数 5
1回答
(Shell.java:547) ~[hadoop-client-api-3.3.2.jar:na] at org.apache.hadoop.util.Shell.getQualifiedBin(Shell.java:591) ~[hadoop-client
浏览 18提问于2022-10-10得票数 0
回答已采纳
我使用bdutil在Hadoop (2.6)集群上部署了Spark (1.3.1)和spark，默认情况下，这些实例是用短暂的外部ips创建的，到目前为止火花工作得很好。出于一些安全方面的考虑，假设集群仅被内部访问，我从实例中删除了外部ips；之后，星火外壳甚至无法运行，似乎无法与Yarn/Hadoop通信，只是无限期地停留在其中。
浏览 2提问于2015-06-26得票数 0
回答已采纳
1回答
我正在使用Apache Spark运行一个独立的应用程序，当我将所有数据作为文本文件加载到RDD时，我得到了以下错误： at org.apache.spark.rdd.RDD.iterator(RDD.scala:230) at org.apache.spark.<
浏览 10提问于2015-02-28得票数 0
在Win10中，在IntelliJ中，此路径(“C:/hive/Orders_0-9*.csv”)在作为独立java spark作业运行时工作良好。但不是作为Spring Boot spark工作。spring boot似乎没有检测到本机文件系统。不确定如何解决此问题。org.apache.hadoop.fs.FileUtil.canRead(FileUtil.java:1230)
at org.apache.hadoop.fs.FileUtil.list(a
浏览 3提问于2019-09-05得票数 0
1回答
Hbase客户端连接失败
、、、
我正在尝试建立一个远程hbase服务器和一个简单的web java应用程序之间的简单连接。[error] at scala.Option.map(Option.scala:146)
[error] at play.
浏览 0提问于2015-10-09得票数 3
2回答
卡桑德拉输入/输出火花
、、、
实现是使用Spring与数据库的集成。return new CassandraTemplate(session().getObject());DataProcessor.main方法：
// Initialize spring
浏览 3提问于2014-06-27得票数 8
回答已采纳
4回答
它使用Spring框架吗？另外，请大家分享链接/材料，以更多地了解它的架构，技术等？技术： Spring、JSF (FrontEnd)、REST Web服务？用户界面：产品驾驶舱，CMS驾驶舱，打印驾驶舱，管理驾驶舱，HMC应用服务器：海布里斯服务器，Oracle，，JBossIMP:为Spring REST提供SAP Hybr
浏览 8提问于2016-12-12得票数 1
回答已采纳
1回答
我试图使用org.apache.directory.api创建到LDAP服务的连接，并将其作为Spark应用程序的一部分进行查询。当我将LDAP用作Java应用程序的一部分时，用于连接和查询LDAP的Scala代码可以正常工作，但作为Spark应用程序的一部分执行时，它会产生如下错误消息：[INFO] | | +- org.apache.hadoop
浏览 2提问于2020-05-05得票数 1
回答已采纳
1回答
$IvySbt$$action$1(Ivy.scala:70)[error] at xsbt.boot.Using$.withResource(Using.scala:12)(Locks.scala:119)
[error] at xsbt.boot.Lock
浏览 234提问于2021-09-18得票数 1
回答已采纳
$$anonfun$getCurrentUserName$1.apply(Utils.scala:2430) at org.apache.spark.api.java.JavaSparkContext.版本：1.1.51和1.2.15区域:全球工作类型:火花
Jar文件:gs://b
浏览 10提问于2017-12-21得票数 5
回答已采纳
1回答
服务帐户具有完全访问权限，我能够使用同一个服务帐户在同一个executor容器上使用gsutil获取文件。这似乎排除了网络或权限问题。at scala.collection.AbstractIterator.foreach(Iterator.scala:1334)
at org.apache.spark.api.python.PythonRDDat scala.collection.AbstractIterator.foreach(Iterator.scala<
浏览 3提问于2019-07-12得票数 2
at org.apache.hadoop.mapred.FileInputFormat.listStatus(FileInputFormat，无法获得主Kerberos作为续订者的( org.apache.hadoop.mapred.FileInputFormat.getSplits) at org.apache.spark.api.python.PythonRDD.getPartitions(PythonRDD.scala:46) at org.apache.spark.rdd.RDD(SparkCon
浏览 1提问于2014-04-23得票数 7
回答已采纳
数据可以是任何类型(纯文本、csv、json、xml或任何包含关系表的数据库)和任何大小(1kb -几gb)。:87) at org.apache.spark.sql.api.r.SQLUtils$.loadDF(SQLUtils.scala:156)
at org.apache.spark.sql.api.r.SQLUtils.loadD
浏览 6提问于2015-09-15得票数 5
云服务器
ICP备案
云直播
即时通信 IM
实时音视频
腾讯云开发者
