kafka学习

注意:

1、kafka依赖于zokeeper,故学习kafka还需安装zookeeper。

2、kafka涉及到java运行环境,所以要安装配置JDK。

提示:

1、我的kafka的目录为:D:kafka_2.11-1.0.0

2、我的zookeeper的目录:D:zookeeper-3.4.12

3、我的jdk目录:D:Java

如果安装目录不一样请稍作修改。

开始配置,分为三步:

1、安装配置java环境

2、安装配置zookeeper

3、安装配置kafka

一、安装配置Java环境

1、JDK安装包下载地址:http://www.oracle.com/technetwork/java/javase/downloads/jdk9-downloads-3848520.html

2、配置环境:

 

 

 3、打开Dos界面,运行java:

4、运行javac

5、配置完成。 

二、安装配置Zookeeper

1)    建议下载稳定版。

       下载地址:http://mirrors.hust.edu.cn/apache/zookeeper/

2)    下载后解压到一个目录:eg: D:zookeeper-3.4.12

3)    在zookeeper-3.4.10目录下,新建文件夹,并命名(eg: data).(路径为:D:zookeeper-3.4.12data)

4)    进入Zookeeper设置目录,eg: D:zookeeper-3.4.12conf

       复制“zoo_sample.cfg”副本à并将副本重命名为“zoo.cfg”

       在任意文本编辑器(eg:记事本)中打开zoo.cfg

       找到并编辑dataDir=D:\zookeeper-3.4.12\data

5)    添加系统环境变量:

       在系统变量中添加ZOOKEEPER_HOME = D:JavaToolzookeeper-3.4.12

       编辑path系统变量,添加为路径%ZOOKEEPER_HOME%in

6)    在zoo.cfg文件中修改默认的Zookeeper端口(默认端口2181)

7)    Dos下运行:zkserver

8)    搭建成功。

三、搭建kafka

1)    安装包:kafka_2.12-1.0.0.tgz

       下载地址:http://kafka.apache.org/downloads.html

       推荐版本:kafka_2.12-1.0.0.tgz

2)    下载后解压缩。eg: D:kafka_2.11-1.0.0

3)    建立一个空文件夹 logs. eg: D:kafka_2.11-1.0.0logs

4)    进入config目录,编辑 server.properties文件(eg: 用“写字板”打开)。

       找到并编辑log.dirs= D:\kafka_2.11-1.0.0\logs

       找到并编辑zookeeper.connect=localhost:2181。表示本地运行。

       (Kafka会按照默认,在9092端口上运行,并连接zookeeper的默认端口:2181)

运行:请确保在启动Kafka服务器前,Zookeeper实例已经准备好并开始运行。(就是开着Zookeeper窗口不要关)

1)    在 D:WorkSoftwarekafka_2.11-1.0.0下,按住shift+鼠标右键。

       选择“在此处打开Powershell窗口(S)”(如果没有此选项,在此处打开命令窗口)。

2)    运行:.inwindowskafka-server-start.bat .configserver.properties

 5)搭建成功!!!!!

kafka基本的命令:

 参考:https://www.oschina.net/question/215898_2309529

https://blog.csdn.net/matrix_google/article/details/80362460

原文地址:https://www.cnblogs.com/niuniu0108/p/11678947.html