kafka安装配置windows下(代码片段)

swneng swneng     2023-02-18     197

关键词:

Kafka 安装配置 windows 下

标签(空格分隔): Kafka

Kafka 内核部分需要安装jdk, zookeeper.

安装JDK

安装JDK就不需要讲解了,安装完配置下JAVA_HOME,和Path,将java安装目录和运行文件目录配置下就ok拉。
安装地址: 下载

安装 zookeeper

安装地址:下载
安装完zookeeper 需要配置如下信息:

下载后,解压放在目录D:igdata(本文所用的目录)下,关于zookeeper以及kafka的目录,路径中最好不要出现空格,比如D:Program Files,尽量别用,运行脚本时会有问题。

1.进入zookeeper的相关设置所在的文件目录,例如本文的:D:igdatazookeeper-3.4.10conf
2.将"zoo_sample.cfg"重命名为"zoo.cfg"
3.打开zoo.cfg(至于使用什么编辑器,根据自己喜好选即可),找到并编辑:
dataDir=/tmp/zookeeper to D:/bigdata/zookeeper-3.4.10/data或 D:igdatazookeeper-3.4.10data(路径仅为示例,具体可根据需要配置)
这里注意,路径要么是"/"分割,要么是转义字符"",这样会生成正确的路径(层级,子目录)。
4.与配置jre类似,在系统环境变量中添加:
a.系统变量中添加ZOOKEEPER_HOME=D:igdatazookeeper-3.4.10
b.编辑系统变量中的path变量,增加%ZOOKEEPER_HOME%in
5在zoo.cfg文件中修改默认的Zookeeper端口(默认端口2181)

这是本文最终的zoo.cfg文件的内容:

# The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial 
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between 
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just 
# example sakes.
dataDir=D:/bigdata/zookeeper-3.4.10/data
#dataDir=D:\bigdata\zookeeper-3.4.10\data
# the port at which the clients will connect
clientPort=2181
# the maximum number of client connections.
# increase this if you need to handle more clients
#maxClientCnxns=60
#
# Be sure to read the maintenance section of the 
# administrator guide before turning on autopurge.
#
# http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval

安装Kafka

  1. 下载地址: 下载
  2. 安装配置:
    要下载Binary downloads这个类型,不要下载源文件,这种方便使用。下载后,解压放在D:igdata目录下。

①进入kafka配置文件所在目录,D:igdatakafka_2.11-0.9.0.1config

②编辑文件"server.properties",找到并编辑:

log.dirs=/tmp/kafka-logs to log.dirs=D:/bigdata/kafka_2.11-0.9.0.1/kafka-logs 或者 D:igdatakafka_2.11-0.9.0.1kafka-logs

同样注意:路径要么是"/"分割,要么是转义字符"",这样会生成正确的路径(层级,子目录)。错误路径情况可自行尝试,文件夹名为这种形式:bigdatakafka_2.11-0.9.0.1kafka-logs

③在server.properties文件中,zookeeper.connect=localhost:2181代表kafka所连接的zookeeper所在的服务器IP以及端口,可根据需要更改。本文在同一台机器上使用,故不用修改。

④kafka会按照默认配置,在9092端口上运行,并连接zookeeper的默认端口2181。

运行Kafka

CMD进入安装目录 输入命令 .inwindowskafka-server-start.bat .configserver.properties 即可运行

注意:这个里面会报错,报找不到kafka.Kafka类
需要进入kafka-class-run文件里面改下配置。%ClassPath% 加上双引号"%ClassPath%"













zookeeper接入kafka,安装部署cmak监控kafka,windows环境(代码片段)

zookeeper接入kafka,安装部署CMAK监控kafka,Windows环境(1)先在Windows下安装部署kafka。kafka连接zookeeper配置搭建环境、安装和启动,Windows环境下_zhangphil的博客-CSDN博客_kafkazookeeper配置kafka,分布式集群架构下&#x 查看详情

windows下安装kafka(代码片段)

...下载地址:http://kafka.apache.org/downloads.html,下载二进制的.二.安装1.安装zookeeperwindows环境下安装zookeeper(单机版)安装并启动后的界面:2.安装kafka我下载的kafka_2.13-2.8.0.tgz,并解压到D:\\Tools\\kafka_2.13-2.8.0目录下 编辑文件Kafka配置文件,... 查看详情

windows下kafka+elk的日志系统(代码片段)

...h(6.3.2版本)、ES(6.3.2版本)、Kibana(6.3.2版本)。具体安装步骤不在此说明,基本都是下载解压,改一下配置文件,即可使用。(以下所述均在Windows下)1、zookeeper:kafka中自带zookeeper,可以不用装zookeeper,如果想自己另装,... 查看详情

windows下安装并使用kafka(代码片段)

安装部署安装Java环境下载需要安装的软件,下载地址:http://www.oracle.com/technetwork/java/javase/downloads/jre8-downloads-2133155.html双节安装,并配置环境变量使用下面的命令验证Java是否安装成功安装ZooKeeper下载zookeeper并解压,下载地址:ht... 查看详情

kafka连接zookeeper配置搭建环境安装和启动,windows环境下(代码片段)

...kafka依赖zooeeper(数据后端),这里有Windows下安装配置启动zookeeper的文章(1):Windows10环境zookeeper单机伪集群部署和配置_ZhangPhil-CSDN博客Windows10环境zookeeper单机伪集群部署和配置1,首先到zookeeper项目主... 查看详情

windows下安装kafka教程(遇到的坑)(代码片段)

Windows下安装运行kafka1.下载并启动zookeeper,参考:https://www.cnblogs.com/azhuya/p/15124799.html  启动zookeeper.\\bin\\windows\\zookeeper-server-start.bat.\\config\\zookeeper.properties第二步,启动kaf 查看详情

windows系统下快速启动kafka(代码片段)

...行配置。二、启动KAFKA环境注意:您的本地环境必须安装Java8+。2.1启动zookeeper服务启动zookeeper服务,如果没有,请前往下载。下载后,打开zookeeper安装目录,进入bin文件夹,双击zkServer.cmd启动zookeeper服务... 查看详情

windows环境下zookeeper的安装及启动(代码片段)

一、下载及安装配置JDK(Kafka依赖于Zookeeper服务,而Zookeeper的运营依赖JDK)1.地址:https://www.oracle.com/java/technologies/javase-jdk14-downloads.html下载windows可执行文件,直接点击安装,默认下一步,直到完成安装。2.配置JDK我的电脑 -->... 查看详情

kafka-python消息读写操作kafka,python,windows(代码片段)

kafka-python消息读写操作kafka,python,Windows环境(1)安装python支持库pipinstallkafka-python(2)先把kafka起起来,kafka连接zookeeper配置搭建环境、安装和启动,Windows环境下_zhangphil的博客-C 查看详情

103-windows安装kafka(代码片段)

下载地址:http://mirrors.hust.edu.cn/apache/zookeeper/2)下载后解压到一个目录:eg:D:\\Java\\Tool\\zookeeper-3.4.103)在zookeeper-3.4.10目录下,新建文件夹,并命名(eg:data).(路径为:D:\\Java\\Tool\\zookeeper-3.4.10\\conf\\data)4)进入Zookeep 查看详情

windows安装kafka过程本地测试外赋快速启动小脚本(代码片段)

winsows上装kafka也蛮简单方便  下载:wgethttps://www.apache.org/dyn/closer.cgi?path=/kafka/2.1.0/kafka_2.12-2.1.0.tgz  解压到某文件下 $kafka-path在 $kafka-path/bin下修改server.properties 中:  log.dirs=D:\ 查看详情

kafka在windows下的安装和目录结构(代码片段)

一、下载安装1)下载地址https://kafka.apache.org/downloads.html这里选择2.13-3.2.1的版本下载,2.13是Scala版本,3.2.1是Kafka版本。2)解压下载完成后在非中文目录下进行解压。这里虽然以Windows为例,但是在Linux下也是一... 查看详情

windows下kafkaoffsetmonitor下载及安装(代码片段)

...https://github.com/quantifind/KafkaOffsetMonitor/releases/tag/v0.2.1二、安装。这个必须建立在安装好kafka的基础上的。(原因,KafkaOffs 查看详情

springboot集成kafka开发,接收kafka消息,java(代码片段)

...(1)基础上:kafka连接zookeeper配置搭建环境、安装和启动,Windows环境下_ZhangPhil-CSDN博客kafka,分布式集群架构下,高性能的流式事件数据(主要是消息)集成、发布(生产)和订阅(分... 查看详情

kafka安装指导(代码片段)

本篇博客主要讲解在虚拟机安装之后,从如下四个方面进行讲解kafka的安装过程。(1)如何配置虚拟机网络(2)如何安装JDK(3)如何安装zookeeper(4)如何安装kafka如何配置虚拟机网络kafka一般安装到linux操作系统,当然windows下... 查看详情

windows环境下搭建kafka(代码片段)

1、安装Zookeeperkafka依赖Zookeeper,在安装kafka之前,需要安装、运行Zookeeper注意:安装之前确保本地Java环境变量配置成功①下载Zookeeper地址:https://zookeeper.apache.org/releases.html②解压文件本文:解压到E:\\zookeeper\\zo... 查看详情

windows下kafka配置入门示例

实验平台与软件:操作系统:windows732 位java开发包:jdk1.8.0_144集群: zookeeper-3.3.6消息队列: kafka_2.11-0.11.0.1安装序列:1. jdk安装预配置  jdk-8u144-windows-i586_8.0.1440.1.exe 点击安装:"下一步"... 环 查看详情

kafka-快速入门(代码片段)

一.windows下环境配置必须提前安装好jdkkafka官方文档下面步骤按照官方文档操作下载2.3.0版本解压目录不应该有空格。\\kafka_2.12-2.3.0\\bin目录下的.sh文件就是kafka的shell脚本,我们会发现,bin目录下还有一个windows文件夹,... 查看详情