我尝试在上针对Apache Hadoop basic集群的BigInsights执行。workflow.xml如下所示： <start to='spark-node' /> <spark
浏览 9提问于2016-08-11得票数 0
回答已采纳
1回答
我试图通过它的Web服务API (Oozie 4.1.0-cdh5.15.2)执行Oozie作业。在此之前，该作业是通过Oozie命令行API成功执行的，大多数参数都是作为命令参数提供的。workflow.xml当前在HDFS上，所以我只是尝试以中指定的方式发送作业属性Content-Type: application/xml;charset=UTF&g
浏览 0提问于2019-03-06得票数 0
回答已采纳
如果上下文和配置可以运行作业，返回spark.jobserver.SparkJobValid将让作业执行，否则返回spark.jobserver.SparkJobInvalid(原因)将阻止作业运行，并提供传递失败原因的方法在这种情况下，调用立即返回HTTP/1.1 400坏请求状态代码。验证有助于防止因配置丢失或错误而最终失败的作业，并节省时间和资源。如果我在valid
浏览 2提问于2016-04-06得票数 0
回答已采纳
4回答
昨天我启动了一个oozie工作流程。它启动了两个工作，这两个工作停滞了一整天。我今天早上杀了他们，做了一个我现在想要测试的更改。在杀死这两个作业之后，就像是工作流变得松散，现在正在进行中。我想终止工作流，这样它就不会一直启动新的作业来替换我删除的作业。我如何在oozie命令行中做到这一点？
浏览 0提问于2012-08-24得票数 6
回答已采纳
我在Oozie中遇到过几个SparkAction作业的例子，其中大多数都是用Java语言编写的。' />
<spark xmlns="uri:oozie:spark-action:0.1">oozie.wf.application.path=${nameNo
浏览 2提问于2015-07-16得票数 1
2回答
我正在运行一个星火作业通过oozie火花行动。火花作业使用hivecontext来执行某些要求。集群配置了kerberos。当我使用星火提交表单控制台提交作业时，它正在成功运行。但是当我从oozie运行作业时，最后会出现以下错误。-- Bash script to do the spark-submit.. -->
<action name="Analysis"
浏览 0提问于2018-03-18得票数 3
回答已采纳
1回答
我正在努力实现的是构建和安装Oozie 4.2.0，这将使我能够提交星火作业到一个纱线集群。我通过执行：oozie-4.2.0/bin/mkdistro.sh -Puber -Phadoop-2 -DskipTests构建发行版。它创建了oozie-4.2.0-distro.tar.gz包，在里面我可以找到oozie-4.2.0-sharelib.tar.gz。然而，许多教程在线声明，我应该使用oozie-4.2.0-shareli
浏览 3提问于2015-10-29得票数 6
我正在尝试在Yarn集群中安排1000个作业。我想运行超过1000个工作每天在同一时间和纱线来管理资源。对于来自hdfs的1000个不同类别的文件，我尝试从python创建spark提交命令并执行。但是我得到了内存溢出错误，因为火花提交使用驱动程序内存。
如何在星火纱线集群中调度1000个作业？我甚至尝试过oozie作业调度框架和spark，它在HDP上并没有像预期的那样工作。
浏览 10提问于2016-08-28得票数 1
我有一个spark2程序，我想从一个oozie工作流提交。thintest.sh:
spark2-submit
浏览 0提问于2018-06-14得票数 0
1回答
当我通过oozie运行火花作业时，它总是被困在被接受的状态。我遵循设置spark2库。/user/oozie/share/lib/lib_20180116141700/oozie/okhttp-2.4.0.jar
/user/oozie
浏览 0提问于2018-09-20得票数 0
我正在尝试使用oozie执行sqoop任务。代码结构如下所示namenode=hdfs://servername:8020queuename=default
oozie.wf.application.path=${namenode}/user/username/
浏览 5提问于2013-10-23得票数 0
回答已采纳
我在用户"runner“下提交了oozie协调员作业，当我尝试杀死或挂起时，我收到以下错误消息：是否有任何提示/技巧，或者我是否错误配置了明显的东西？
更新:我正在使用的
浏览 2提问于2014-07-25得票数 3
我对Oozie很陌生，我正在尝试安装和安装Oozie。我正在遵循Apache站点上提供的说明："“。我完成了以下工作：
oozied.sh启动
没有错误报告，只有打印的变量值。.Http11Protocol init INFO:初始化Coyote HTTP/<
浏览 0提问于2013-10-16得票数 2
(){ WSAStartup(MAKEWORD(2,2),&WSA) ;
char Response[2000] ;
printf("%s\n", R
浏览 2提问于2021-04-14得票数 0
回答已采纳
我正在开发一个安卓应用程序，我用DownloadManager下载文件。它能够成功地下载某些文件(例如。MP3)，但它对其他人来说并不成功(例如。( PDF)。我不确定这和文件类型有关。在onReceive()回调中，我查询DownloadManager以查找失败的原因，但它只是给出了一个"400"，这不是一个记录在案的原因。int reason = cursor.getInt(columnReason); // the value of
浏览 2提问于2015-08-31得票数 3
回答已采纳
2回答
我一直试图运行一个python脚本在spark(1.3.1.2.3)，我正在使用oozie计划火花作业。我使用Ambari2.1.1安装了一个运行HDP 2.3的3节点集群。我在执行作业时遇到以下错误。,spark.yarn.historyServer.address=http://node1.analytics.tardis:18088,spark.eventLog.enabled=true&l
浏览 4提问于2015-09-18得票数 1
回答已采纳
我正在使用rapidminer从大数据集中提取规则。Radoop是对hadoop生态系统的扩展，sparkRM操作符允许进行fp-growth，从从hive检索数据到探索分析。我正在开发：-windows 8.1 -hadoop 6.2 -spark 1.5 -hive 2.1我已经将spark-default-conf配置如下：# spark.serializer org.apache.spark
浏览 10提问于2018-12-17得票数 0
我通过REST接口提交了火花作业，并提供了以下细节， "sparkProperties": { "",}17/1
浏览 1提问于2017-12-18得票数 2
回答已采纳
1回答
我正在尝试安装oozie 3.3.0，但在$OOZIE_Home/bin下运行mkDistro.sh -DskipTests时遇到以下错误[INFO] Apache Oozie Hadoop Distcp 1.0.1.oozie-3.3.0 ......SKIPPED
[INFO] Apache Oozie Hadoo
浏览 3提问于2013-05-09得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
