腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(347)
视频
沙龙
2
回答
如何将
Nifi
模板
作为
DH
摄取
流程
的
一部分
运行
、
、
我们有一个
nifi
模板
,用于从关系SQL Server DB中提取数据,并将表
的
每一行
作为
Marklogic中
的
文档进行
摄取
。现在,我们希望在组合中添加
DH
,并将
nifi
模板
作为
注入流
的
一部分
运行
,以填充staging DB。将
nifi
模板
作为
摄取
流
的
一部分
浏览 24
提问于2021-04-07
得票数 0
1
回答
替换正在
运行
的
NIFI
模板
我通过api上传了一个
模板
,并删除了旧
模板
,但我如何替换当前正在
运行
的
模板
。我知道你可以删除flow.xml,但这需要重新启动。有没有其他方法可以用新
的
模板
替换当前
运行
的
模板
。
浏览 0
提问于2017-09-19
得票数 0
1
回答
Apache
Nifi
:我想将我
的
数据CSV
摄取
到Elasticsearch,而不是使用apache
nifi
将其流式传输到其他处理器
、
、
、
我正在尝试设置一个简单
的
过程来修改我
的
CSV文件,并使用Apache
Nifi
将其
摄取
到elasticsearch DB。我不想在将文件从一个处理器传递到另一个处理器时,在Stdout上流式传输我
的
CSV文件。 我已经做了两个
流程
。我
的
第一个
流程
是使用python处理器获取我
的
CSV文件,使用ExecuteStreamCommand对其进行定制,我在其中
运行
我
的
GetFile脚本来读取、修改和保存我
浏览 2
提问于2019-08-06
得票数 0
1
回答
Apache在单个流中从多个表中读取数据
我计划使用Apache
作为
数据
摄取
用例。源可以是平面文件和Teradata数据库,输出接收器可以是Oracle数据库。我们预测源系统将来可能会发生变化,我注意到
Nifi
中
的
处理器可以用来支持这些源。 现在,我
的
问题是,是否可以在一个
Nifi
流中从Teradata读取多个表并将数据加载到oracle数据库中
的
多个表中?我已经为每一张表建立了单独
的
流程
,它似乎
运行
得很好。
浏览 4
提问于2017-03-02
得票数 2
回答已采纳
1
回答
卡夫卡引发
的
NiFi
工作流瓶颈
、
、
、
、
我正在Apache
NiFi
中创建一个数据
摄取
工作流,使用Kafka
作为
缓冲系统。我设置了一个3节点集群,
运行
相同
的
工作流,每个节点有4个核心。我依赖于几个将数据移入和移出不同Kafka主题
的
实例,这是工作
流程
中最慢
的
部分,并且在性能方面非常不一致,因为两个相同
的
测试可以增加高达100%
的
持续时间。我们
的
发布和消费Kafka处理器在所有三个节点上
运行
,并且我们
的
K
浏览 16
提问于2017-08-15
得票数 1
回答已采纳
1
回答
在MySQL DB中
NiFi
中
摄取
CSV数据
、
、
我正在尝试将CSV文件
的
数据
摄取
到MySQL Db中。我
的
CSV文件有一个名为'MeasurementTime‘值
的
字段,名为2018-06-27 11:14.50。我
的
流程
将该字段
作为
字符串,因此PutSQL会产生错误。我使用
的
模板
与此相同,但不使用InferAvro处理器,因为我已经有了预定义
的
模式。这是网站
如何将
日期时间字段
作为
正确
的
数据类型而不
浏览 0
提问于2018-09-26
得票数 2
1
回答
调试复杂
NiFi
数据流
的
理想方法
、
、
据我所知,在使用
NiFi
构建了一些DB
摄取
PoCs之后,整个数据流
作为
流文件
运行
。并且在任何特定时间,执行控制可以同时在一个或多个处理器上。因此,我真的很困惑如何调试一个复杂
的
数据流,以防止任何故障。当我们使用生产用例时,它可能会变得比这复杂得多。所以我有几个问题要问。 如何了解数据流
的
状态。假设10个分叉
的
流文件中有4个因为数据库池错误而在GenerateTableFetc
浏览 80
提问于2018-09-13
得票数 2
1
回答
使用我自己
的
ID创建
NiFi
进程组
背景POST /process-groups/{id}/process-groups "revision": {但是,通过测试,我意识到创建
的
浏览 4
提问于2020-07-23
得票数 1
回答已采纳
1
回答
Nifi
: java.lang.NoClassDefFoundError: com/google/api/client/http/httptransport.com
、
、
我们在集群上
运行
了一个
NIFI
实例(版本1.7.1)。我正在尝试建立一个简单
的
工作流,在这里我需要从GCS桶中读取一些文件并将其写入某个目的地。工作
流程
作为
第一步
的
一部分
,我添加了一个简单
的
工作流,其中添加了一个ListGCSBucket处理器,并将其附加到LogAttribute处理器中。
作为
GCPCredentialsControllerService
的
一部分
,我还添加了一个ListG
浏览 0
提问于2019-06-20
得票数 1
2
回答
NiFi
如何在下游
流程
完成之前释放流文件
我正在使用
NiFi
设计一个数据
摄取
模式。一个进程需要停止释放
流程
文件,直到下游
流程
完成处理为止。我试图使用等待和通知,但没有取得任何成功。我希望能在几个处理器之间设置队列大小和背压。类似地,如果有一种实现逻辑
的
方法:如果当前在多个处理器之间有一个处理,则不要允许流文件进入。
浏览 6
提问于2019-12-04
得票数 0
回答已采纳
1
回答
如何发送带有上次在VSTS中生成
的
工作项
的
html电子邮件?
、
我试图通过使用VSTS管道来自动化发布工作
流程
,我需要交付
的
组件基本上是一个库。VSTS管道现在正在构建Visual Studio解决方案,并在工件文件夹中生成二进制文件,但我需要向QA团队发送一封电子邮件,其中包含已
作为
版本
一部分
交付
的
工作项列表。我在marketplace中发现了一个VSTS任务,它使用MD文件生成发行说明: 然而,我需要
的
是一个基于可定制
的
HTML
模板
的
任务,并在附件中发送一个ZIP文件与工件文件夹
的<
浏览 0
提问于2019-10-03
得票数 0
1
回答
如何确定在使用Webhook调用Zap时是否关闭了Zap?
我有一个来自.Net Web应用程序
的
工作
的
Zapier Webhook调用。但是,即使Zap关闭,我也总是收到“成功”
的
消息。我认为这是有道理
的
--“成功”与webhook本身有关,而不是Zap。 在我
的
.Net网络应用程序中,如果zap被关闭,我想引发一个异常。如何确定Zap是否已关闭?我想这个答案可能在一些Zapier文档中,但我看不到有什么用(我是Zapier
的
新手)。
浏览 4
提问于2019-10-01
得票数 0
5
回答
如何将
/编辑/
运行
/保存文本文件(.py)加载到IPython笔记本单元中?
、
、
、
我最近转向使用IPython笔记本
作为
我工作
流程
的
一部分
。但是,我没有找到将.py文件导入打开
的
IPython笔记本
的
单个单元格
的
方法,以便它们能够编辑、
运行
并保存。这能办到吗?我在文档中找到了,它告诉我
如何将
.py文件
作为
新
的
笔记本导入,但这与我想要实现
的
目标相去甚远。 如有任何建议,将不胜感激。
浏览 1
提问于2014-01-10
得票数 263
回答已采纳
1
回答
可能
的
塔式工作流作业
模板
、
、
、
、
我有两个作业
模板
,
作为
我
的
工作流作业
模板
的
一部分
。
如何将
工作流中以前
运行
的
作业
模板
中
的
数据/变量/事实传
浏览 0
提问于2017-04-08
得票数 0
4
回答
Sharepoint
作为
模板
应用程序
、
、
我们有一个站点需要(
作为
我们
流程
的
一部分
)生成一个文档(例如,Word docx文档),该文档是从我们
的
应用程序中
的
数据与
模板
文档合并而来
的
。生成此文档后,用户可以在
运行
时对其进行编辑。我们知道我们正在寻找一个类似CMS
的
系统(因为用户将需要能够编辑/创建新
的
模板
),但我想知道Sharepoint是否可以更好地使用(因为我们不需要传统CMS系统
的
大量开销
浏览 0
提问于2008-12-23
得票数 0
回答已采纳
2
回答
如何定期向hadoop提供数据
、
我
的
公司每天产生大约600万条记录,我看到hadoop是处理大量数据
的
一个很好
的
解决方案。我发现了如何从mysql加载数据,但它正在导出完整
的
数据库,有没有办法保持我
的
mysql DB和Hadoop之间
的
数据同步?
浏览 2
提问于2020-03-07
得票数 1
2
回答
将编辑后
的
数据
作为
数据集物化
的
铸造场景
、
是否有可能将
作为
场景
一部分
的
编辑具体化到铸造中
的
数据集中?编辑及详细信息: 问题是,我并不是对对象类型
的
对象进行实际编辑,我不想应用它。我测试了"
浏览 8
提问于2022-06-01
得票数 1
1
回答
在SSIS中执行包装
的
java应用程序
、
、
、
、
但是如果我把它
作为
SSIS
流程
的
一部分
(在Execute process Task中),它不会产生任何影响。SSIS将它标记为在开始后几毫秒执行,而它应该至少持续10秒。我已经用Execute Process Task解压了7-zip格式
的
文件,效果很好。
如何将
java应用程序
作为
SSIS过程
的
一部分
运行
?编辑:现在我认为我
的
应用程序正在执行,但ssis不会等待它结束,而是在java应用程序执行<
浏览 1
提问于2013-12-12
得票数 0
1
回答
数据流/波束
模板
、生产、初始化和ValueProviders
、
、
我有一个
运行
在Google Cloud Dataflow上
的
Apache光束作业,
作为
其初始化
的
一部分
,它需要对服务、发布/订阅订阅、GCS blob等
运行
一些基本
的
健全性/可用性检查。这是一个旨在无限
运行
ad
的
流水线,可以处理数十万条发布/订阅消息。
模板
是我想要做
的
事情
的
正确方法吗?我如何才能真正实现这一点呢?应该(可以吗?)我用maven编译成一个
浏览 5
提问于2017-07-27
得票数 1
回答已采纳
1
回答
如何在
运行
MySQL my.cnf之后提供S2I
、
在红帽软件集合MySQL容器中,我看到可以将MYSQL_DEFAULTS_FILE设置为指示一个完全不同
的
my.cnf文件
的
路径。在OpenShift中使用时,我不知道如何在磁盘上获得这样
的
配置文件,因为它们
的
S2I脚本已经
作为
mysql-persistent
模板
的
一部分
运行
了。
如何将
这样
的
文件注入到预先构建
的
图像中?我能够使用MySQL提供
的
模板</em
浏览 0
提问于2018-05-27
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Apache NiFi介绍及使用体验
10分钟了解Apache Nifi在物联网的使用
成功从 Hadoop 迁移到 Lakehouse 架构的 5 个关键步骤
公共安全领域 Kafka 应用实践
深度学习在基于日志分析的系统异常检测中的应用
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券