• Windows 下 Kafka 2.8.1 启动报错“输入行太长”问题解决方案


    问题描述

    在 Windows 下运行 Kafka 2.8.1 时有可能报错“输入行太长。命令语法不正确”。出现这个问题的原因是 Windows 命令长度最长支持 8192 个字符,Kafka 的启动脚本中有命令拼接 classpath 变量,classpath 的内容是每个 jar 包的绝对路径拼接的字符串。当 Kafka 的位置比较深,也就是目录比较长的时候,classpath 的长度就会超长。之前版本的 Kafka 没有问题是因为 2.8.1 版本的 Kafka 的 libs 目录下的 jar 包数量增加了,也就是说之前版本也是存在这个隐患的。

    解决方案

    既然知道了是 classpath 过长引起的,那么缩短其长度就可以了。

    在使用 IDEA 开发时已经遇到过这种情况了,IDEA 给出了三个方案:

    1. JAR manifest
    2. classpath file
    3. @argfile(Java 9+)

     犹豫 Kafka 的位置是不固定,所以需要动态生成 classpath,所以选择了 @argfile 方案。

    方案一

    以下方案在 JDK 11 上验证

    指定 classpath 时直接指定文件夹,kafka-run-class.bat 需要做以下修改:

    1. 注释或删除 93 ~ 95 行,这三行的作用是拼接 classpath。↓

     2. 注释或删除 174 ~ 177 行,这四行的作用是判断 classpath 是否定义,如果未定义则退出。因为要直接指定目录了,所以不需要 classpath 了。↓

     3. 修改 179 行,将 "%CLASSPATH%" 替换成 %BASE_DIR%\libs\*

    修改前:↓

    set COMMAND=%JAVA% %KAFKA_HEAP_OPTS% %KAFKA_JVM_PERFORMANCE_OPTS% %KAFKA_JMX_OPTS% %KAFKA_LOG4J_OPTS% -cp "%CLASSPATH%" %KAFKA_OPTS% %*

    修改后:↓

    set COMMAND=%JAVA% %KAFKA_HEAP_OPTS% %KAFKA_JVM_PERFORMANCE_OPTS% %KAFKA_JMX_OPTS% %KAFKA_LOG4J_OPTS% -cp %BASE_DIR%\libs\* %KAFKA_OPTS% %*

    方案二

    以下方案在 JDK 11 上验证 

     将 classpath 的内容全部放到 argfile.txt 中,然后在启动命令中指定。kafka-run-class.bat 需要做以下修改:

    1. 修改 93 ~ 95 行,原来的逻辑是拼接 classpath 字符串,新的逻辑是将 classpath 的内容写入到文件中。↓

    注意:classpath 内所有包的绝对路径之间用分号分割,且不能换行,第 95 行就是为了实现不换行。

    2. 注释或删除 174 ~ 177 行,不再需要 classpath 变量了

    3. 修改 179 行,将 -cp "%CLASSPATH%" 替换成 @argfile.txt

    修改前:↓

    set COMMAND=%JAVA% %KAFKA_HEAP_OPTS% %KAFKA_JVM_PERFORMANCE_OPTS% %KAFKA_JMX_OPTS% %KAFKA_LOG4J_OPTS% -cp "%CLASSPATH%" %KAFKA_OPTS% %*

    修改后:↓

    set COMMAND=%JAVA% %KAFKA_HEAP_OPTS% %KAFKA_JVM_PERFORMANCE_OPTS% %KAFKA_JMX_OPTS% %KAFKA_LOG4J_OPTS% @argfile.txt %KAFKA_OPTS% %*

    结语

    IDEA 给出的三个方案只验证了一种方案,感兴趣的同学可以验证一下剩余的两种方案,如果发了文章请@我,共同学习。

  • 相关阅读:
    【Azure Developer】App Service + PubSub +JS 实现多人版黑客帝国文字流效果图
    详解:程序部署在服务器上,localhost可以访问Tomcat,但是外网ip无法访问
    企业架构LNMP学习笔记45
    python、java、c++哪一个前景比较好?
    VScode 基础使用教程
    非零基础自学Java (老师:韩顺平) 第5章 程序控制结构 5.8 while循环控制 && 5.9 do..while循环控制
    [MySQL]复杂查询(进阶)
    Git(10)——Git多人协同开发之邀请成员
    [ 数据结构进阶 - C++ ] 二叉搜索树
    JAVA足球青训俱乐部管理后台系统计算机毕业设计Mybatis+系统+数据库+调试部署
  • 原文地址:https://blog.csdn.net/FunnyWhiteCat/article/details/126241088