Kafka环境安装及配置_学习记录

内容小白,包含JDK+Zookeeper+Kafka三部分。

JDK:

1)   安装包:Java SE Development Kit 9.0.1

下载地址:

2) 配置环境:(与之前版本设置有差异)

3) 打开Dos界面,运行java:

4) 运行javac:

5) 配置完成。

 

Zookeeper:

1) 建议下载稳定版。

下载地址:

2) 下载后解压到一个目录:eg: D:JavaToolzookeeper-3.4.10

3) 在zookeeper-3.4.10目录下,新建文件夹,并命名(eg: data).(路径为:D:JavaToolzookeeper-3.4.10confdata)

4) 进入Zookeeper设置目录,eg: D:JavaToolzookeeper-3.4.10conf

复制“zoo_sample.cfg”副本à并将副本重命名为“zoo.cfg”

在任意文本编辑器(eg:记事本)中打开zoo.cfg

找到并编辑dataDir=D:\Java\Tool\zookeeper-3.4.10\data

5) 添加系统环境变量:

在系统变量中添加ZOOKEEPER_HOME = D:JavaToolzookeeper-3.4.10

编辑path系统变量,添加为路径%ZOOKEEPER_HOME%in

6) 在zoo.cfg文件中修改默认的Zookeeper端口(默认端口2181)

7) Dos下运行:zkserver

8) 搭建成功。

 

Kafka:

1) 安装包:kafka_2.12-1.0.0.tgz

下载地址:

推荐版本:kafka_2.12-1.0.0.tgz

2) 下载后解压缩。eg: D:Toolskafka_2.11-1.0.0

3) 建立一个空文件夹 logs. eg: D:Toolskafka_2.11-1.0.0logs

4) 进入config目录,编辑 server.properties文件(eg: 用“写字板”打开)。

找到并编辑log.dirs= D:\Tools\kafka_2.11-1.0.0\logs

找到并编辑zookeeper.connect=localhost:2181。表示本地运行。

(Kafka会按照默认,在9092端口上运行,并连接zookeeper的默认端口:2181)

运行:请确保在启动Kafka服务器前,Zookeeper实例已经准备好并开始运行。(就是开着Zookeeper窗口不要关)

1) 在 D:WorkSoftwarekafka_2.11-1.0.0下,按住shift+鼠标右键。

选择“在此处打开Powershell窗口(S)”(如果没有此选项,在此处打开命令窗口)。

2) 运行:.inwindowskafka-server-start.bat .configserver.properties

3) 可能会报错:“找不到或无法加载主类 Filesjavajdk-9.0.1lib;C:Program”

4) 解决(3)的办法:

在kafka安装目录中找到binwindows目录中的kafka-run-class.bat为%CLASSPATH%加上双引号(可用Matlab打开,并进行搜索)

修改前:setCOMMAND=%JAVA%%KAFKA_HEAP_OPTS% %KAFKA_JVM_PERFORMANCE_OPTS% %KAFKA_JMX_OPTS%%KAFKA_LOG4J_OPTS% -cp%CLASSPATH% %KAFKA_OPTS% %*

修改后:SetCOMMAND=%JAVA%%KAFKA_HEAP_OPTS% %KAFKA_JVM_PERFORMANCE_OPTS% %KAFKA_JMX_OPTS%%KAFKA_LOG4J_OPTS% -cp"%CLASSPATH%"%KAFKA_OPTS% %*

5) 再次运行:.inwindowskafka-server-start.bat.configserver.properties

经验分享 程序员 微信小程序 职场和发展