• 使用 TiUP 部署 TiDB 集群


    TiUP 是 TiDB 4.0 版本引入的集群运维工具,TiUP cluster 是 TiUP 提供的使用 Golang 编写的集群管理组件,通过 TiUP cluster 组件就可以进行日常的运维工作,包括部署、启动、关闭、销毁、弹性扩缩容、升级 TiDB 集群,以及管理 TiDB 集群参数。

    目前 TiUP 可以支持部署 TiDB、TiFlash、TiDB Binlog、TiCDC 以及监控系统。本文将介绍不同集群拓扑的具体部署步骤。

    注意

    TiDB、TiUP 及 TiDB Dashboard 默认会收集使用情况信息,并将这些信息分享给 PingCAP 用于改善产品。若要了解所收集的信息详情及如何禁用该行为,请参见遥测

    第 1 步:软硬件环境需求及前置检查

    软硬件环境需求

    环境与系统配置检查

    第 2 步:在中控机上部署 TiUP 组件

    在中控机上部署 TiUP 组件有两种方式:在线部署和离线部署。

    在线部署

    以普通用户身份登录中控机。以 tidb 用户为例,后续安装 TiUP 及集群管理操作均通过该用户完成:

    1. 执行如下命令安装 TiUP 工具:

       

      curl --proto '=https' --tlsv1.2 -sSf https://tiup-mirrors.pingcap.com/install.sh | sh

    2. 按如下步骤设置 TiUP 环境变量:

      1. 重新声明全局环境变量:

         

        source .bash_profile

      2. 确认 TiUP 工具是否安装:

         

        which tiup

    3. 安装 TiUP cluster 组件:

       

      tiup cluster

    4. 如果已经安装,则更新 TiUP cluster 组件至最新版本:

       

      tiup update --self && tiup update cluster

      预期输出 “Update successfully!” 字样。

    5. 验证当前 TiUP cluster 版本信息。执行如下命令查看 TiUP cluster 组件版本:

       

      tiup --binary cluster

    第 3 步:初始化集群拓扑文件

    执行如下命令,生成集群初始化配置文件:

     
    

    tiup cluster template > topology.yaml

    针对两种常用的部署场景,也可以通过以下命令生成建议的拓扑模板:

    • 混合部署场景:单台机器部署多个实例,详情参见混合部署拓扑架构 。

       

      tiup cluster template --full > topology.yaml

    • 跨机房部署场景:跨机房部署 TiDB 集群,详情参见跨机房部署拓扑架构

       

      tiup cluster template --multi-dc > topology.yaml

    执行 vi topology.yaml,查看配置文件的内容:

     
    

    global: user: "tidb" ssh_port: 22 deploy_dir: "/tidb-deploy" data_dir: "/tidb-data" server_configs: {} pd_servers: - host: 10.0.1.4 - host: 10.0.1.5 - host: 10.0.1.6 tidb_servers: - host: 10.0.1.7 - host: 10.0.1.8 - host: 10.0.1.9 tikv_servers: - host: 10.0.1.1 - host: 10.0.1.2 - host: 10.0.1.3 monitoring_servers: - host: 10.0.1.4 grafana_servers: - host: 10.0.1.4 alertmanager_servers: - host: 10.0.1.4

    下表列出了常用的 7 种场景,请根据链接中的拓扑说明以及配置文件模板配置topology.yaml。如果有其他组合场景的需求,请根据多个模板自行调整。

    场景配置任务配置文件模板拓扑说明
    OLTP 业务部署最小拓扑架构简单最小配置模板
    详细最小配置模板
    最小集群拓扑,包括 tidb-server、tikv-server、pd-server。
    HTAP 业务部署 TiFlash 拓扑架构简单 TiFlash 配置模版
    详细 TiFlash 配置模版
    在最小拓扑的基础上部署 TiFlash。TiFlash 是列式存储引擎,已经逐步成为集群拓扑的标配。
    使用 TiCDC 进行增量同步部署 TiCDC 拓扑架构简单 TiCDC 配置模板
    详细 TiCDC 配置模板
    在最小拓扑的基础上部署 TiCDC。TiCDC 支持多种下游 (TiDB/MySQL/MQ)。
    使用 TiDB Binlog 进行增量同步部署 TiDB Binlog 拓扑架构简单 TiDB Binlog 配置模板(下游为 MySQL)
    简单 TiDB Binlog 配置模板(下游为 file)
    详细 TiDB Binlog 配置模板
    在最小拓扑的基础上部署 TiDB Binlog。
    使用 Spark 的 OLAP 业务部署 TiSpark 拓扑架构简单 TiSpark 配置模板
    详细 TiSpark 配置模板
    在最小拓扑的基础上部署 TiSpark 组件。TiSpark 是 PingCAP 为解决用户复杂 OLAP 需求而推出的产品。TiUP cluster 组件对 TiSpark 的支持目前为实验特性。
    单台机器,多个实例混合部署拓扑架构简单混部配置模板
    详细混部配置模板
    也适用于单机多实例需要额外增加目录、端口、资源配比、label 等配置的场景。
    跨机房部署 TiDB 集群跨机房部署拓扑架构跨机房配置模板以典型的两地三中心架构为例,介绍跨机房部署架构,以及需要注意的关键设置。

    注意

    • 对于需要全局生效的参数,请在配置文件中 server_configs 的对应组件下配置。

    • 对于需要某个节点生效的参数,请在具体节点的 config 中配置。

    • 配置的层次结构使用 . 表示。如:log.slow-threshold。更多格式参考 TiUP 配置参数模版

    • 如果需要指定在目标机创建的用户组名,可以参考这个例子

    更多参数说明,请参考:

    第 4 步:执行部署命令

    注意

    通过 TiUP 进行集群部署可以使用密钥或者交互密码方式来进行安全认证:

    • 如果是密钥方式,可以通过 -i 或者 --identity_file 来指定密钥的路径。

    • 如果是密码方式,可以通过 -p 进入密码交互窗口。

    • 如果已经配置免密登录目标机,则不需填写认证。

    一般情况下 TiUP 会在目标机器上创建 topology.yaml 中约定的用户和组,以下情况例外:

    • topology.yaml 中设置的用户名在目标机器上已存在。

    • 在命令行上使用了参数 --skip-create-user 明确指定跳过创建用户的步骤。

    执行部署命令前,先使用 check 及 check --apply 命令检查和自动修复集群存在的潜在风险:

    1. 检查集群存在的潜在风险:

       

      tiup cluster check ./topology.yaml --user root [-p] [-i /home/root/.ssh/gcp_rsa]

    2. 自动修复集群存在的潜在风险:

       

      tiup cluster check ./topology.yaml --apply --user root [-p] [-i /home/root/.ssh/gcp_rsa]

    3. 部署 TiDB 集群:

       

      tiup cluster deploy tidb-test v6.1.0 ./topology.yaml --user root [-p] [-i /home/root/.ssh/gcp_rsa]

    以上部署示例中:

    • tidb-test 为部署的集群名称。
    • v6.1.0 为部署的集群版本,可以通过执行 tiup list tidb 来查看 TiUP 支持的最新可用版本。
    • 初始化配置文件为 topology.yaml
    • --user root 表示通过 root 用户登录到目标主机完成集群部署,该用户需要有 ssh 到目标机器的权限,并且在目标机器有 sudo 权限。也可以用其他有 ssh 和 sudo 权限的用户完成部署。
    • [-i] 及 [-p] 为可选项,如果已经配置免密登录目标机,则不需填写。否则选择其一即可,[-i] 为可登录到目标机的 root 用户(或 --user 指定的其他用户)的私钥,也可使用 [-p] 交互式输入该用户的密码。

    预期日志结尾输出 Deployed cluster `tidb-test` successfully 关键词,表示部署成功。

    第 5 步:查看 TiUP 管理的集群情况

     
    

    tiup cluster list

    TiUP 支持管理多个 TiDB 集群,该命令会输出当前通过 TiUP cluster 管理的所有集群信息,包括集群名称、部署用户、版本、密钥信息等。

    第 6 步:检查部署的 TiDB 集群情况

    例如,执行如下命令检查 tidb-test 集群情况:

     
    

    tiup cluster display tidb-test

    预期输出包括 tidb-test 集群中实例 ID、角色、主机、监听端口和状态(由于还未启动,所以状态为 Down/inactive)、目录信息。

    第 7 步:启动集群

    安全启动是 TiUP cluster 从 v1.9.0 起引入的一种新的启动方式,采用该方式启动数据库可以提高数据库安全性。推荐使用安全启动。

    安全启动后,TiUP 会自动生成 TiDB root 用户的密码,并在命令行界面返回密码。

    注意

    • 使用安全启动方式后,不能通过无密码的 root 用户登录数据库,你需要记录命令行返回的密码进行后续操作。

    • 该自动生成的密码只会返回一次,如果没有记录或者忘记该密码,请参照忘记 root 密码修改密码。

    方式一:安全启动

     
    

    tiup cluster start tidb-test --init

    预期结果如下,表示启动成功。

     
    

    Started cluster `tidb-test` successfully. The root password of TiDB database has been changed. The new password is: 'y_+3Hwp=*AWz8971s6'. Copy and record it to somewhere safe, it is only displayed once, and will not be stored. The generated password can NOT be got again in future.

    方式二:普通启动

     
    

    tiup cluster start tidb-test

    预期结果输出 Started cluster `tidb-test` successfully,表示启动成功。使用普通启动方式后,可通过无密码的 root 用户登录数据库。

    第 8 步:验证集群运行状态

     
    

    tiup cluster display tidb-test

    预期结果输出:各节点 Status 状态信息为 Up 说明集群状态正常。

  • 相关阅读:
    软件测试面试常常遇到的6大“套路”!
    GreatSQL vs MySQL性能测试来了,速围观~
    酷早报:7月5日Web3加密行业新闻大汇总
    【Flowable】使用UEL整合Springboot从0到1(四)
    SpringBoot+html+vue模板开发
    使用计算组在工具提示中解释度量值
    安装anaconda并配置虚拟环境
    入门力扣自学笔记149 C++ (题目编号1608)
    【ppt技巧】给ppt文件设置带有密码的只读模式
    CRM能为企业带来哪些管理提升
  • 原文地址:https://blog.csdn.net/weixin_42241611/article/details/125518329