码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • NiFi 1.16.3 生产使用的更新及BUG。


    序

    公司本人负责的 NiFi 集群差不多 50+。已经有一半集群从1.15.2 升级到 1.16.3 版本,平均升级时间 5min左右,其中还涉及到一些扩容操作。但如果依托到 ambari 或者其他管理平台肯定花费时间会大大增加。

    更新特新

    https://cwiki.apache.org/confluence/display/NIFI/Release+Notes#ReleaseNotes-Version1.16.3

    个人使用体验

    • 终于把HDFS连接相关的进行了更新,提升hdfs-client版本到3.3,修复了很多版本,终于不用创建那么多安全线程了:
      在这里插入图片描述

    • 1.16.X 更新了 flow.json,确实写入速度变快了,体积变小了一半:
      but 现在的判断条件时 flow.json/xml 。但是也引入了一个新的bug:在 cluster 中,如果该node 没有flow.json/xml 的话,这个节点启动不会创建 flow.json,并且在比较和 cluster中的flow.json的时候会报 java.lang.NullPointerException问题。所以要手动进行copy一个,或者单节点启动一次再加入集群。

    • listFTP 更新,进行了几个类的开发,解决了代理导致的各种问题:
      but 引入了新的bug,导致username/userpassword/ftp_ip 无法使用变量,需要重新打包standard,并更新重启集群。

    • 解决了很多高危漏洞,但没有解决 apache common configuration,涉及了几个包,包含 frameword包,又要重新打nar包,打依赖。

    • 加了retry,这个还是比较喜欢。

    期望

    • 跟 knox 配合打好一点,真的搭建起来是一个痛苦的过程。
    • minifi 的使用体验真的很不好,如果脱离了CEP只能使用成这样,建议优先开发类似CEP的管理工具。
  • 相关阅读:
    朋友圈推广如何做?
    Microsoft SQL Server中的错误配置
    制作一个简单HTML旅游网站(HTML+CSS+JS)无锡旅游网页设计与实现8个页面
    登录页面怎么做渗透
    变量转为json格式ivx 自定义图表 echarts自定义图表
    涉及两起法律诉讼的【致保科技】申请920万美元纳斯达克IPO上市
    计算机网络部分(一)
    七、图覆盖
    Mac 配置Clion Qt 调试显示变量值
    oracle WAITED TOO LONG FOR A ROW CACHE ENQUEUE LOCK问题分析
  • 原文地址:https://blog.csdn.net/qq_36610426/article/details/125906354
  • 最新文章
  • 攻防演习之三天拿下官网站群
    数据安全治理学习——前期安全规划和安全管理体系建设
    企业安全 | 企业内一次钓鱼演练准备过程
    内网渗透测试 | Kerberos协议及其部分攻击手法
    0day的产生 | 不懂代码的"代码审计"
    安装scrcpy-client模块av模块异常,环境问题解决方案
    leetcode hot100【LeetCode 279. 完全平方数】java实现
    OpenWrt下安装Mosquitto
    AnatoMask论文汇总
    【AI日记】24.11.01 LangChain、openai api和github copilot
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1
正则表达式工具 cron表达式工具 密码生成工具

京公网安备 11010502049817号