腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
如何
使用
java
在
kafka
上
设置
动态
配额
配置
、
我尝试将所有客户端的默认
配额
设置
为0,以便在覆盖
配额
配置
之前,它们最初不应发送/
使用
任何消息。./bin/
kafka
-configs.sh --alter --add-config 'producer_byte_rate=0,consumer_byte_rate=0'
浏览 12
提问于2018-03-02
得票数 0
1
回答
ClientQuotaCallback
在
卡夫卡客户端有什么用途?
我
在
它的评论中找到了这一行:“代理的
配额
回调接口,它支持客户
配额
计算的定制”--.but--它没有任何子类,为什么?我搜索了它,但找不到一个例子。
浏览 0
提问于2018-08-28
得票数 1
回答已采纳
1
回答
确保发行者/订阅者模式中的公平
、
、
我
如何
确保Pub/Sub模式中的公平性,例如
kafka
,当一个出版商生成数千条消息,而所有其他生产者的信息数字都很低的时候?谁的生产活动会很高,这是不可预测的。在这种情况下,多个分区也不能很好地工作,或者我可以看到它是
如何
工作的。
浏览 3
提问于2021-06-10
得票数 0
回答已采纳
1
回答
卡夫卡对客户和用户的
配额
、
我对卡夫卡非常陌生,我想了解卡夫卡的
配额
制是
如何
运作的。到目前为止,我一直在跟踪文档 我还
使用
以下命令来度量
Kafka
主题的吞吐量
浏览 2
提问于2017-03-13
得票数 2
1
回答
如何
管理Bitnami
Kafka
Helm图表中的存储/持久性溢出?
、
、
、
我
在
使用
Terraform的AWS上部署Bitanmi
Kafka
Helm图表。我发现文档存储和持久性分配非常令人费解。据我从文档中了解到的;日志是主题中的消息块,当超过可
配置
的字节、消息或时间
配额
时,日志会被刷新到存储中的文件中。我能否
配置
一个故障安全,即
配置
Kafka
以保留所有内容,并在超出
配额
的情况下删除旧日志文件?
如何
检索持久化日志?
使用
者是否可以要求早期偏移量中的主题消息,并导致延迟或失
浏览 0
提问于2021-05-30
得票数 0
1
回答
解析
Kafka
消息创建XML文件
、
、
我是Apache
Kafka
的新手,我希望创建一个小的微服务/程序(可能是用
Java
编写的)来
使用
来自
Kafka
的消息并解析它们来构建XML文件。我已经有消息出现在我的单个
Kafka
主题中(发布者是第三方应用程序),但我需要实时解析它们(所以我认为某种bash脚本可能是不可能的)。 我也有很少的
Java
知识,但目前正在努力学习基础知识。最终,我们将构建XML文件,然后
使用
curl发出POST请求,将文件发送到HTTPS网关。我的工作和现有的知识只是围绕着将消息
浏览 0
提问于2021-09-27
得票数 0
1
回答
Docker容器中的Spark不读取
Kafka
输入结构流
、
、
、
、
当Spark作业
在
没有Docker的情况下通过spark-submit
在
本地运行时,一切工作正常。但是,
在
停靠容器
上
运行会导致不生成任何输出。为了查看
Kafka
本身是否正常工作,我将
Kafka
提取到Spark worker容器
上
,并让控制台
使用
者监听相同的主机、端口和主题(
kafka
:9092,crypto_topic),它们工作正常并显示输出: image: wurstmeister/
kafka</
浏览 21
提问于2020-09-11
得票数 0
1
回答
如何
在
Kafka
中获取生产者客户端id或实体名称列表
我想为每个生产者和消费者设定
配额
。例如,
使用
以下命令
设置
配额
: --alter --add-config 'producer_byte_rate=1048,consumer_byte_rate=2097'我的问题是:
如何
获取实体名称?因为现在有成百上千的生产者
浏览 35
提问于2018-06-24
得票数 0
回答已采纳
2
回答
如何
在AWS集群上将auto.create.topics.enable
设置
为默认
配置
、
、
我试图
在
代理上
设置
此
配置
,但我无法
设置
,因为
配置
是用于
动态
更新的read-only。$
kafka
-configs --bootstrap-server $
KAFKA
_BROKER --entity-type brokers --entity-default --alter --add-config--entity-type brokers --entity-default --alter --add-config auto.create.topics
浏览 0
提问于2019-04-26
得票数 9
回答已采纳
1
回答
使用
KafkaPublish处理器写入
kafka
主题时未能发送SSL关闭消息
、
、
、
我
使用
KafkaPublish处理器将消息发布到
使用
SASL_SSL安全协议保护的
kafka
主题(我们不
使用
Kerberos)。(KafkaChannel.
java
:61) at org.apache.
kafka
.common.network
浏览 0
提问于2018-09-11
得票数 1
回答已采纳
2
回答
Spring 5.X web
Kafka
集成
使用
xml
配置
(而不是Spring boot)
、
我正在尝试
使用
xml
配置
在
遗留web应用程序
上
设置
kafka
使用
者,该应用程序运行的是Spring5.2发布项目(它不是Spring引导项目)。
在
查找之后,我发现了一个
使用
xml
配置
设置
kafka
消费者的项目,如下所示 https://docs.spring.io/spring-
kafka
/docs/1.3.11.
浏览 26
提问于2020-11-08
得票数 1
回答已采纳
3
回答
如何
将kubernetes服务端IP传给
KAFKA
广告听众
、
我想在库伯奈特斯
配置
卡夫卡经纪人。我
使用
的对接图像是confluentinc/cp-
kafka
:latest。如果我
使用
的是来自kubectl get endpoints -l app=
kafka
的服务端点IP,这是可行的,但是每次
使用
一些审计脚本
设置
这个
动态
值是很小的开销。我想知道是否有更好的方法可以
在
Kubernetes yaml文件中
动态
设置
这个值,所以我不需要每次都以编程方式<em
浏览 1
提问于2018-04-29
得票数 3
2
回答
卡夫卡对出版商的信息限制?
我们正在
使用
kafka
0.10.x,我正在寻找,如果有办法阻止发行商
kafka
停止发送消息后,某些消息/限制是
在
一个小时内达到。这里的目标是限制用户只发送特定数量的消息和小时/天?
浏览 2
提问于2017-08-06
得票数 3
2
回答
kafka
broker
配置
动态
更改
、
我正在
使用
kafka
_2.9.2-0.8.1.1和zookeeper 3.4.6。bin/
kafka
-topics.sh --zookeeper zookeeper01.mysite.com --config
浏览 0
提问于2015-03-26
得票数 1
回答已采纳
6
回答
如何
为
Kafka
设置
Java
选项?
、
我一直
在
试验
Kafka
,并从主站点的文档中看到,您可以为jvm
设置
不同的选项,比如堆大小和它
使用
的垃圾收集器: 然而,它没有说的是
如何
/在哪里
设置
这些选项。该应用程序附带了一个/config目录,其中包含了许多用于
配置
目的的文件,但没有一个是用于
Java
的。它还附带了一个/bin目录,其中包含一堆用于
Kafka
的脚本,但是,没有真正指明
如何
配置
Java</em
浏览 13
提问于2014-12-28
得票数 51
回答已采纳
1
回答
如何
在
Kafka
REST代理中
配置
生产者和消费者?
、
、
我
如何
在
Kafka
REST代理中建立一个生产者和消费者?如果我
使用
kafka
-clients.jar并在
java
中实现它,我可以轻松地进行所有
设置
。acks,提交方法,等等。我知道,基础可以
设置
在
汇合-4.1.1/ etc /
kafka
-rest。参考资料:
浏览 2
提问于2018-07-02
得票数 0
2
回答
卡夫卡和mongoDB连接器的发件箱模式
、
、
我想在我们的微服务中实现发件箱模式,
使用
Mongo连接器,
在
发件箱( MongoDB集合)中,我
使用
以下字段存储主题数据:
kafka
_topic、
kafka
_key、
kafka
_value、
kafka
_header_keys、
kafka
_header_values。但是,我应该
如何
配置
mongo连接器来
动态
地从
kafka
_topic字段中选择主题,以及
如何
从其他发
浏览 3
提问于2020-12-25
得票数 2
2
回答
使用
Kafka
和ELK堆栈的集中式日志记录
、
、
、
有超过50个
Java
应用程序(它们不是微服务,所以我们不必担心服务的多个实例)。现在,我的架构师设计了一个解决方案,获取日志文件并提供给
kafka
主题,然后从
kafka
提供给logstash并推送到elastic search,这样我们就可以
在
kibana中查看日志。现在我对
Kafka
和ELK stack是个新手。谁能给我指出
如何
完成这项任务的正确方向?我了解到可以
配置
Log4J和SLF4J将日志推送到
kafka
主题。1.现在
如何
从<
浏览 5
提问于2019-07-18
得票数 1
1
回答
卡夫卡上空没有春云探测痕迹
、
dependency> <artifactId>spring-integration-
java
-dsl<scope>test</scope> </dependency>
浏览 0
提问于2018-02-12
得票数 1
回答已采纳
1
回答
无法启动动物园管理员,因此阿帕奇卡夫卡
、
、
当我尝试
使用
下面的命令启动动物园管理员时,我得到了下面的错误。zookeeper-server-start.bat config/zookeeper.properties error missing 'server' jvm at 'C:\Program Files <x86>\
Java
浏览 2
提问于2018-08-17
得票数 0
点击加载更多
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
活动推荐
运营活动
广告
关闭
领券