前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Kafka:集群部署

Kafka:集群部署

作者头像
栗筝i
发布2022-12-01 08:57:08
4230
发布2022-12-01 08:57:08
举报
文章被收录于专栏:迁移内容

0、环境准备

  • 安装jdk,配置环境
  • 提前安装zookeeper

1、解压安装

  • 将tar压缩包上传
  • tar -zxvf kafka_2.12-2.5.0.tgz

2、配置变量环境

  • vi /etc/profile
代码语言:javascript
复制
#kafka
export KAFKA_HOME=/usr/local/apps/kafka_2.12-2.5.0
export PATH=$PATH:$KAFKA_HOME/bin
  • source /etc/profile

3、修改配置文件

  • cd config/
  • vim server.properties 输入以下内容
代码语言:javascript
复制
#broker的全局唯一编号,不能重复
# 不同机器不能重复
broker.id=0     
#删除topic功能使能
delete.topic.enable=true
#处理网络请求的线程数量
num.network.threads=3
#用来处理磁盘IO的现成数量
num.io.threads=8
#发送套接字的缓冲区大小
socket.send.buffer.bytes=102400
#接收套接字的缓冲区大小
socket.receive.buffer.bytes=102400
#请求套接字的缓冲区大小
socket.request.max.bytes=104857600
#kafka运行日志存放的路径	
# 需要修改的地方,已经以前修改好了
log.dirs=/opt/module/kafka/logs   
#topic在当前broker上的分区个数
num.partitions=1
#用来恢复和清理data下数据的线程数量
num.recovery.threads.per.data.dir=1
#segment文件保留的最长时间,超时将被删除
log.retention.hours=168
#配置连接Zookeeper集群地址
# 需要求改成自己的
zookeeper.connect=Carlota1:2181,Carlota2:2181,Carlota3:2181 

4、启动集群

代码语言:javascript
复制
[root@carlota1]$ zkServer.sh start
[root@carlota1]$ zkServer.sh start
[root@carlota1]$ zkServer.sh start


[root@carlota1]$ kafka-server-start.sh -daemon $KAFKA_HOME/config/server.properties 
[root@carlota1]$ kafka-server-start.sh -daemon $KAFKA_HOME/config/server.properties 
[root@carlota1]$ kafka-server-start.sh -daemon $KAFKA_HOME/config/server.properties 
本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2020-07-24,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档