linux contos6.8下部署kafka集群的方法
短信预约 -IT技能 免费直播动态提醒
有3台服务器,ip分别为192.168.174.10,192.168.174.11,192.168.174.12。
1、官网下载,分别在每台机器上解压安装
# 创建kafka的安装目录
mkdir -p /usr/local/software/kafka
# 解压
tar -xvf kafka_2.12-1.1.0.tgz -C /usr/local/software/kafka/
2、修改每台服务器的/etc/profile文件,设置kafka环境变量,添加如下内容
export KAFKA_HOME=/usr/local/software/kafka/kafka_2.12-1.1.0
export PATH=$PATH:$KAFKA_HOME/bin
添加完后重启配置,命令如下:
soNLtPRRCtzMurce /etc/profile
3、修改每台服务器的$KAFKA_HOME/config下的server.properties文件,修改代理idNLtPRRCtzM和日志存放目录
#指定代理id,borker.id可以任意指定,前提是保证集群内每台机器的broker.id唯一,第二台机器设置为2...以此类推
broker.id=1
#设置日志目录
log.dirs=/opt/data/kafka/kafka-logs
#设置zookeeper集群地址
zookeeper.connect=192.168.174.7:2181,192.168.174.8:2181,192.168.174.9:2181
#设置本机地址,设置为本服务器的ip地址。如果不设置会在创建主题和发送消息时,发生NOT LEADER FOR PARTITION异常。
host.name=192.168.174.10
4、配置完成后,分别启动3台服务器的kafka,启动kafka前确保zookeeper集群已经成功启动。
kafka-server-start.sh -daemon server.properties
5、验证是否成功启动
jps
如果看到kafka进程,说明启动成功。
另外也可通过zookeeper客户端查看zookeeper目录结构,如下:
#登录zookeeper
zkCli . sh -server 192.168.174.7:2181
#查看目录结构
ls /
#查看已启动的kafka代理
ls /brokers/ids
以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持我们。
免责声明:
① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。
② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341