windows环境下kafka源代码开发环境搭建

Posted 2021-11-30 gongzixiaobaibcy

开发环境： Oracle Java  + Eclipse  + Scala + Gradle + Kafka 

1、Gradle安装配置

https://www.gradle.org/downloads/ 下载最新的Gradle版本。下载解压到一个目录，然后创建一个环境变量GRADLE_HOME指向解压的目录，再将%GRADLE_HOME%\\bin加到PATH环境变量中，Gradle就安装配置好了。打开一个cmd输入gradle -v 验证一下：

2、kafka源代码下载

　　安装好Gradle之后我们开始下载Kafka的源代码，当前最新的稳定版本是2.2.0，你可以从http://kafka.apache.org/downloads处下载源代码包。下载之后解压缩到一个目录，目录结构如下图所示：

重要目录的作用如下：

bin目录: 　 　   Windows和Unix平台下的执行脚本，比如kafka-server-start，console-producer，console-consumer等
clients目录:      Kafka客户端代码
config目录:       Kafka配置文件，其中比较重要的是server.properties，启动Kafka broker需要直接加载这个文件
core目录:         Kafka的核心代码
examples目录: Kafka样例代码，例如如何使用Java编写简单的producer和consumer
test:   系统测试脚本，主要用python编写
其他的目录和配置文件大多和gradle配置有关，就不赘述了。

3、下载gradle wrapper类库

因为源代码的gradle子目录中没有wrapper类库，因此我们要先安装一个Gradle Wrapper库，方法也很简单，打开个cmd窗口，在Kafka源代码根目录下执行gradle wrapper即可。你只需运行这个命令一次即可。如果是首次安装需要花一些时间去下载所需的jar包。Kafka的源代码是用Scala语言编写的，下图中清晰地显示我们使用Scala版本是2.12.8。你可以在gradle.properties文件中指定Scala版本。

命令运行成功之后，在kafka的gradle子目录中会多出一个wrapper子目录，里面包含了一个jar包和一个配置文件。至此Gradle wrapper已被成功安装在本机：

4.安装scala

 

 

5.生成Eclipse工程文件并导入到MyEclipse中

上述准备工作一切就绪后，我们现在可以生成Eclipse工程文件。具体做法为打开一个cmd窗口，切换到kafka源代码根路径下，运行gradlew eclipse，如果是第一次运行，可能会花费一些时间去下载必要的jar包，在等待了一段时间之后，终于看到了BUILD SUCCESSFUL的字样表示项目工程文件生成成功：

 看到成功后，说明gradle项目构建成功了，下面在myeclipse中导入项目

可以看到当前kafka版本中的主要工程

core工程就是最核心的kafka工程

 至此kafka源码已经成功导入到myeclipse中。