码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • ELK 集群部署


    一 、ELK 简介

    ELK 分为三部分组成: elasticsearch、logstach、kibana

    1. elasticsearch: elasticsearch是个分布式搜索和分析引擎,能对大容量的数据进行接近实时的存储、搜索和分析操作

    2. logstash :数据收集引擎支持动态从各种数据源收集数据,并对数据进行过滤、分析丰富的统一格式等操作,然后存储到指定位置,这里将数据发送给elasticsearch,logstash具有强大的插件功能用于日志处理

    3. kibana:基于node.js 开发的展示工具,可以为logstash、elasticsearch 提供图形化的日志分析web界面展示,可以汇总、分析和搜索重要的数据日志

    4. Filebeat: 轻量级的开源日志文件数据搜集器,在需要采集数据的客户端安装Filebeat,指定目录与日志格式,Filebeat 就能快速搜集数据并发送给logstash 解析,或直接发送给elasticsearch 存储,性能比logstash优势明显是对他的替代

    二、 部署环境

    此环境只用于数据量不大的集群使用,如果数据量规模较大,需要加入kafka 或 rabbitmq 消息队列

    操作系统 IP 主机名 应用部署规划
    CentOS Linux release 7.5.1804 (Core) 192.168.169.10 els-node elasticsearch
    CentOS Linux release 7.5.1804 (Core) 192.168.169.20 logstash-node elasticsearch、logstach
    CentOS Linux release 7.6.1810 (Core) 192.168.169.30 kibana elasticsearch、kibana
    • 部署 elasticsearch 集群

    1、所有节点关闭防火墙,selinux,所有节点配置hosts

    [root@els-node ~]# setenforce 0
    [root@els-node ~]# sed -ri  's/^(SELINUX=).*/\1disable/g'  /etc/selinux/config 
    [root@els-node ~]# systemctl stop firewalld
    [root@els-node ~]# systemctl disable  firewalld
    [root@els-node ~]# cat /etc/hosts
    127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4
    ::1         localhost localhost.localdomain localhost6 localhost6.localdomain6
    192.168.169.10 els-node
    192.168.169.20 logstash-node
    192.168.169.30  kibana
    

    2、官网下载,elasticsearch安装包,并上传至服务器解压,elasticsearch官网

    [root@els-node home]# tar xvf elasticsearch-7.10.1-linux-x86_64.tar.gz 
    [root@els-node home]# ls
    elasticsearch-7.10.1  elasticsearch-7.10.1-linux-x86_64.tar.gz
    

    3、es依赖JDK环境,检查是否安装JDK&

  • 相关阅读:
    基于MWORKS.Sysplorer的油气混合作动筒建模与仿真应用
    【算法】【二叉树模块】求一个二叉树“子树“是否包含另一个二叉树的全部拓扑结构
    Mysql系列(一) - Mysql的架构体系
    C++ Tutorials: Numerical Bases
    断点是什么,断点有哪几种类型?
    Appium自动化测试基础 — APPium基础操作API(一)
    Selenium Web自动化测试 —— 高级控件交互方法!
    leetCode 647.回文子串 动态规划 + 优化空间 / 中心扩展法 + 双指针
    [Rust GUI]eframe(egui框架)代码示例
    ThingsBoard处理设备上报的属性并转换为可读属性
  • 原文地址:https://blog.csdn.net/weixin_42890981/article/details/126692731
  • 最新文章
  • 【JVM】编译执行与解释执行的区别是什么?JVM 使用哪种方式?
    用 Hashids 优雅解决 C 端自增 ID 暴露问题
    V8引擎 精品漫游指南--Ignition篇(上) 指令 栈帧 槽位 调用约定 内存布局 基础内容
    LLVM Pass快速入门(四):代码插桩
    milkup:桌面端 markdown AI续写和即时渲染
    基于项目工程构建SBOM(软件物料清单)的研究
    鸿蒙应用开发UI基础第二节:鸿蒙应用程序框架核心解析与实操
    .NET 中如何快速实现 List 集合去重?
    扣子Coze实战:从0到1打造抖音+小红书热点监控智能体
    浅谈数据访问层
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
小工具 小游戏
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1

京公网安备 11010502049817号