• Doris 集群的手动部署


    一.简介

    Apache Doris 是一个现代化的 MPP 分析型数据库产品,仅需要亚秒级响应时间即可获得查询结果,可有效的支持实时数据分析。

    前置条件

    CPU:2C(最低)8C(推荐)
    内存:4G(最低)48G(推荐)
    硬盘:100G(最低)400G(推荐)
    平台:MacOS(Intel)、LinuxOS、Windows虚拟机
    系统:CentOS(7.1及以上)、Ubuntu(16.04 及以上)
    软件:JDK(1.8及以上)、GCC(4.8.2 及以上)

    注意事项

    需注意各节点之间的网络互通及时间同步,可自行关闭防火墙,通过 NTP 协议校准各节点之间的时间。

    节点

    部署版本1.0
    操作系统centos7.9

    节点角色
    Richco01fe(Leader)
    Richco02fe(Follower)+ be
    Richco03be
    Richco04be

    设置系统最大文件句柄

    vim /etc/security/limits.conf
    * soft nofile 65536
    * hard nofile 65536
    
    • 1
    • 2
    • 3

    部署包

    https://dist.apache.org/repos/dist/release/doris/1.0/1.0.0-incubating/apache-doris-1.0.0-incubating-bin.tar.gz
    
    • 1

    网络需要

    在这里插入图片描述

    配置FE主节点

    Richco01节点

    创建元数据

    rm -rf /opt/doris/fe/doris-meta && mkdir /opt/doris/fe/doris-meta
    
    • 1

    修改配置文件

    vim /opt/doris/fe/conf/fe.conf
    ### 修改
    priority_networks = Richco01的ip/24
    ### 示例 IP 地址为本机 IP
    
    • 1
    • 2
    • 3
    • 4

    启动FE

    bash start_fe.sh --daemon
    
    • 1

    检查Doris 是否正常启动

    执行 jps,若看到 PaloFe 表示 FE 已正常启动,否则检查日志文件,排查问题后再次启动。

    配置 FE 从节点

    部署包从Richco01节点复制到从节点

    修改配置文件

    vim /opt/doris/fe/conf/fe.conf
    ### 修改
    priority_networks = Richco02d的ip/24
    ### 示例 IP 地址为本机 IP,修改
    edit_log_port=9011
    
    • 1
    • 2
    • 3
    • 4
    • 5

    创建元数据目录

    rm -rf /opt/doris/fe/doris-meta && mkdir /opt/doris/fe/doris-meta
    
    • 1

    启动FE

    bash start_fe.sh --helper Richco01:9010 --daemon
    
    • 1

    检测 Doris 是否正常启动

    执行 jps ,若看到 PaloFe 表示 FE 已正常启动,否则检查日志文件,排查问题后再次启动。

    从节点添加到主节点

    登录到 Richco01 节点通过 mysql 客户端进入到 doris-fe,执行:

    mysql -h Richco01 -P 9030 -uroot 
    
    • 1

    默认密码为空

    将 从节点 添加 Richco01 节点

    alter system add observer "Richco02:9011";
    
    • 1

    添加Be节点

    Richco02 添加Be

    修改配置文件

    vi /opt/doris/be/conf/be.conf

    ### 修改 Richco02节点 IP
    priority_networks = Richco02的ip/24
    ### 存储目录
    storage_root_path = /home/storage,50
    
    • 1
    • 2
    • 3
    • 4

    创建元数据目录

    mkdir -p /home/storage

    启动 be

    bash start_be.sh --daemon
    
    • 1

    登录到 Richco01 节点添加 be,be 上的 heartbeat_service_port 端口,默认 9050:

    alter system add backend "Richco02:9050";
    
    • 1

    Richco03 添加Be

    修改配置文件

    vi /opt/doris/be/conf/be.conf

    ### 修改 Richco03 节点 IP
    priority_networks = Richco03的ip/24
    ### 存储目录 
    storage_root_path = /home/storage,50
    
    • 1
    • 2
    • 3
    • 4

    创建元数据目录

    mkdir -p /home/storage
    
    • 1

    启动 be

    bash start_be.sh --daemon
    
    • 1

    登录到 Richco01 节点添加 be

    alter system add backend "Richco03:9050";
    
    • 1

    Richco04 添加Be

    修改配置文件

    vi /opt/doris/be/conf/be.conf

    修改 Richco04 节点 IP
    priority_networks = Richco04的ip/24
    存储目录
    storage_root_path = /home/storage,50
    
    • 1
    • 2
    • 3
    • 4

    创建元数据目录

    mkdir -p /home/storage
    
    • 1

    启动 be

    bash start_be.sh --daemon
    
    • 1

    登录到 Richco01 节点添加 be

    alter system add backend "Richco04:9050";
    
    • 1

    展示

    如下图所示,访问 Richco01:8030,账户为root,密码默认为空不填写,检查 be 节点状态,alive 必须为 true
    在这里插入图片描述

  • 相关阅读:
    实战案例:用 PySpark ML 构建流失预测模型
    计算机的种类
    Java · 逻辑控制(顺序结构 · 分支结构 · 循环结构) · 输入输出语句
    【21天打卡】前端攻城狮重学算法之-直接选择排序
    【节能学院】安科瑞餐饮油烟监测云平台助力大气污染攻坚战
    基于Java的大学社团管理平台
    使用node-pty报错Uncaught Error: This socket has been ended by the other party
    ATF源码篇(六):docs文件夹-Components组件(5)EL3
    关于什么是框架
    Leetcode.33 搜索旋转排序数组
  • 原文地址:https://blog.csdn.net/qq_19968255/article/details/125603019