| title | summary | aliases | ||||||||
|---|---|---|---|---|---|---|---|---|---|---|
使用 TiUP 部署 TiDB 集群 |
了解如何使用 TiUP 部署 TiDB 集群。 |
|
本指南介绍如何在生产环境中使用 TiUP 部署 TiDB 集群。
TiUP 是在 TiDB v4.0 中引入的集群运维工具，提供了使用 Golang 编写的集群管理组件 TiUP cluster。通过使用 TiUP cluster 组件，你可以轻松执行日常的数据库运维操作，包括部署、启动、关闭、销毁、弹性扩缩容、升级 TiDB 集群，以及管理 TiDB 集群参数。
TiUP 还支持部署 TiDB、TiFlash、TiCDC 以及监控系统。本指南介绍了如何部署不同拓扑的 TiDB 集群。
务必阅读以下文档：
此外，建议阅读了解 TiDB 安全配置最佳实践。
在中控机上部署 TiUP 组件有两种方式：在线部署和离线部署。
以普通用户身份登录中控机。以 tidb 用户为例，后续安装 TiUP 及集群管理操作均通过该用户完成：
-
执行如下命令安装 TiUP 工具：
{{< copyable "shell-regular" >}}
curl --proto '=https' --tlsv1.2 -sSf https://tiup-mirrors.pingcap.com/install.sh | sh
-
按如下步骤设置 TiUP 环境变量：
-
重新声明全局环境变量：
{{< copyable "shell-regular" >}}
source .bash_profile -
确认 TiUP 工具是否安装：
{{< copyable "shell-regular" >}}
which tiup
-
-
安装 TiUP cluster 组件：
{{< copyable "shell-regular" >}}
tiup cluster
-
如果已经安装，则更新 TiUP cluster 组件至最新版本：
{{< copyable "shell-regular" >}}
tiup update --self && tiup update cluster预期输出
“Updated successfully!”字样。 -
验证当前 TiUP cluster 版本信息。执行如下命令查看 TiUP cluster 组件版本：
{{< copyable "shell-regular" >}}
tiup --binary cluster
离线部署 TiUP 组件的操作步骤如下。
方式一：在官方下载页面选择对应版本的 TiDB server 离线镜像包（包含 TiUP 离线组件包）。需要同时下载 TiDB-community-server 软件包和 TiDB-community-toolkit 软件包。
方式二：使用 tiup mirror clone 命令手动打包离线组件包。步骤如下：
-
在在线环境中安装 TiUP 包管理器工具
-
执行如下命令安装 TiUP 工具：
{{< copyable "shell-regular" >}}
curl --proto '=https' --tlsv1.2 -sSf https://tiup-mirrors.pingcap.com/install.sh | sh
-
重新声明全局环境变量：
{{< copyable "shell-regular" >}}
source .bash_profile -
确认 TiUP 工具是否安装：
{{< copyable "shell-regular" >}}
which tiup
-
-
使用 TiUP 制作离线镜像
-
在一台和外网相通的机器上拉取需要的组件：
{{< copyable "shell-regular" >}}
tiup mirror clone tidb-community-server-${version}-linux-amd64 ${version} --os=linux --arch=amd64
该命令会在当前目录下创建一个名叫
tidb-community-server-${version}-linux-amd64的目录，里面包含 TiUP 管理的组件包。 -
通过 tar 命令将该组件包打包然后发送到隔离环境的中控机：
{{< copyable "shell-regular" >}}
tar czvf tidb-community-server-${version}-linux-amd64.tar.gz tidb-community-server-${version}-linux-amd64
此时，
tidb-community-server-${version}-linux-amd64.tar.gz就是一个独立的离线环境包。
-
-
自定义制作的离线镜像，或调整已有离线镜像中的内容
如果从官网下载的离线镜像不满足你的具体需求，或者希望对已有的离线镜像内容进行调整，例如增加某个组件的新版本等，可以采取以下步骤进行操作：
-
在制作离线镜像时，可通过参数指定具体的组件和版本等信息，获得不完整的离线镜像。例如，要制作一个只包括 v1.12.3 版本 TiUP 和 TiUP Cluster 的离线镜像，可执行如下命令：
{{< copyable "shell-regular" >}}
tiup mirror clone tiup-custom-mirror-v1.12.3 --tiup v1.12.3 --cluster v1.12.3
如果只需要某一特定平台的组件，也可以通过
--os和--arch参数来指定。 -
参考上文“使用 TiUP 制作离线镜像”第 2 步的方式，将此不完整的离线镜像传输到隔离环境的中控机。
-
在隔离环境的中控机上，查看当前使用的离线镜像路径。较新版本的 TiUP 可以直接通过命令获取当前的镜像地址：
{{< copyable "shell-regular" >}}
tiup mirror show
以上命令如果提示
show命令不存在，可能当前使用的是较老版本的 TiUP。此时可以通过查看$HOME/.tiup/tiup.toml获得正在使用的镜像地址。将此镜像地址记录下来，后续步骤中将以变量${base_mirror}指代此镜像地址。 -
将不完整的离线镜像合并到已有的离线镜像中：
首先将当前离线镜像中的
keys目录复制到$HOME/.tiup目录中：{{< copyable "shell-regular" >}}
cp -r ${base_mirror}/keys $HOME/.tiup/
然后使用 TiUP 命令将不完整的离线镜像合并到当前使用的镜像中：
{{< copyable "shell-regular" >}}
tiup mirror merge tiup-custom-mirror-v1.12.3
-
上述步骤完成后，通过
tiup list命令检查执行结果。在本文例子中，使用tiup list tiup和tiup list cluster均应能看到对应组件的v1.12.3版本出现在结果中。
-
将离线包发送到目标集群的中控机后，执行以下命令安装 TiUP 组件：
{{< copyable "shell-regular" >}}
tar xzvf tidb-community-server-${version}-linux-amd64.tar.gz && \
sh tidb-community-server-${version}-linux-amd64/local_install.sh && \
source /home/tidb/.bash_profilelocal_install.sh 脚本会自动执行 tiup mirror set tidb-community-server-${version}-linux-amd64 命令将当前镜像地址设置为 tidb-community-server-${version}-linux-amd64。
如果是通过官方下载页面下载的离线软件包，需要将 TiDB-community-server 软件包和 TiDB-community-toolkit 软件包合并到离线镜像中。如果是通过 tiup mirror clone 命令手动打包的离线组件包，不需要执行此步骤。
执行以下命令合并离线组件到 server 目录下。
{{< copyable "shell-regular" >}}
tar xf tidb-community-toolkit-${version}-linux-amd64.tar.gz
ls -ld tidb-community-server-${version}-linux-amd64 tidb-community-toolkit-${version}-linux-amd64
cd tidb-community-server-${version}-linux-amd64/
cp -rp keys ~/.tiup/
tiup mirror merge ../tidb-community-toolkit-${version}-linux-amd64若需将镜像切换到其他目录，可以通过手动执行 tiup mirror set <mirror-dir> 进行切换。如果需要切换到在线环境，可执行 tiup mirror set https://tiup-mirrors.pingcap.com。
执行如下命令，生成集群初始化配置文件：
{{< copyable "shell-regular" >}}
tiup cluster template > topology.yaml针对两种常用的部署场景，也可以通过以下命令生成建议的拓扑模板：
-
混合部署场景：单台机器部署多个实例，详情参见混合部署拓扑架构。
{{< copyable "shell-regular" >}}
tiup cluster template --full > topology.yaml -
跨机房部署场景：跨机房部署 TiDB 集群，详情参见跨机房部署拓扑架构。
{{< copyable "shell-regular" >}}
tiup cluster template --multi-dc > topology.yaml
执行 vi topology.yaml，查看配置文件的内容：
{{< copyable "shell-regular" >}}
global:
user: "tidb"
ssh_port: 22
deploy_dir: "/tidb-deploy"
data_dir: "/tidb-data"
server_configs: {}
pd_servers:
- host: 10.0.1.4
- host: 10.0.1.5
- host: 10.0.1.6
tidb_servers:
- host: 10.0.1.7
- host: 10.0.1.8
- host: 10.0.1.9
tikv_servers:
- host: 10.0.1.1
- host: 10.0.1.2
- host: 10.0.1.3
monitoring_servers:
- host: 10.0.1.4
grafana_servers:
- host: 10.0.1.4
alertmanager_servers:
- host: 10.0.1.4下表列出了常用的 7 种场景，请根据链接中的拓扑说明以及配置文件模板配置topology.yaml。如果有其他组合场景的需求，请根据多个模板自行调整。
| 场景 | 配置任务 | 配置文件模板 | 拓扑说明 |
|---|---|---|---|
| OLTP 业务 | 部署最小拓扑架构 | 简单最小配置模板 详细最小配置模板 |
最小集群拓扑，包括 tidb-server、tikv-server、pd-server。 |
| HTAP 业务 | 部署 TiFlash 拓扑架构 | 简单 TiFlash 配置模版 详细 TiFlash 配置模版 |
在最小拓扑的基础上部署 TiFlash。TiFlash 是列式存储引擎，已经逐步成为集群拓扑的标配。 |
| 使用 TiCDC 进行增量同步 | 部署 TiCDC 拓扑架构 | 简单 TiCDC 配置模板 详细 TiCDC 配置模板 |
在最小拓扑的基础上部署 TiCDC。TiCDC 支持多种下游：TiDB、MySQL、Kafka、MQ、Confluent 和存储服务。 |
| 使用 Spark 的 OLAP 业务 | 部署 TiSpark 拓扑架构 | 简单 TiSpark 配置模板 详细 TiSpark 配置模板 |
在最小拓扑的基础上部署 TiSpark 组件。TiSpark 是 PingCAP 为解决用户复杂 OLAP 需求而推出的产品。TiUP cluster 组件对 TiSpark 的支持目前为实验特性。 |
| 单台机器，多个实例 | 混合部署拓扑架构 | 简单混部配置模板 详细混部配置模板 |
也适用于单机多实例需要额外增加目录、端口、资源配比、label 等配置的场景。 |
| 跨机房部署 TiDB 集群 | 跨机房部署拓扑架构 | 跨机房配置模板 | 以典型的两地三中心架构为例，介绍跨机房部署架构，以及需要注意的关键设置。 |
注意：
对于需要全局生效的参数，请在配置文件中
server_configs的对应组件下配置。对于需要某个节点生效的参数，请在具体节点的
config中配置。配置的层次结构使用
.表示。如：log.slow-threshold。更多格式参考 TiUP 配置参数模版。如果需要指定在目标机创建的用户组名，可以参考这个例子。
更多参数说明，请参考：
- TiDB
config.toml.example - TiKV
config.toml.example - PD
config.toml.example - TiFlash
config.toml.example
注意：
通过 TiUP 进行集群部署可以使用密钥或者交互密码方式来进行安全认证：
如果是密钥方式，可以通过 -i 或者 --identity_file 来指定密钥的路径。
如果是密码方式，可以通过 -p 进入密码交互窗口。
如果已经配置免密登录目标机，则不需填写认证。
一般情况下 TiUP 会在目标机器上创建 topology.yaml 中约定的用户和组，以下情况例外：
topology.yaml中设置的用户名在目标机器上已存在。在命令行上使用了参数 --skip-create-user 明确指定跳过创建用户的步骤。
执行部署命令前，先使用 check 及 check --apply 命令检查和自动修复集群存在的潜在风险：
-
检查集群存在的潜在风险：
{{< copyable "shell-regular" >}}
tiup cluster check ./topology.yaml --user root [-p] [-i /home/root/.ssh/gcp_rsa]
-
自动修复集群存在的潜在风险：
{{< copyable "shell-regular" >}}
tiup cluster check ./topology.yaml --apply --user root [-p] [-i /home/root/.ssh/gcp_rsa]
-
部署 TiDB 集群：
{{< copyable "shell-regular" >}}
tiup cluster deploy tidb-test v8.5.0 ./topology.yaml --user root [-p] [-i /home/root/.ssh/gcp_rsa]
以上部署示例中：
tidb-test为部署的集群名称。v8.5.0为部署的集群版本，可以通过执行tiup list tidb来查看 TiUP 支持的最新可用版本。- 初始化配置文件为
topology.yaml。 --user root表示通过 root 用户登录到目标主机完成集群部署，该用户需要有 ssh 到目标机器的权限，并且在目标机器有 sudo 权限。也可以用其他有 ssh 和 sudo 权限的用户完成部署。- [-i] 及 [-p] 为可选项，如果已经配置免密登录目标机，则不需填写。否则选择其一即可，[-i] 为可登录到目标机的 root 用户（或 --user 指定的其他用户）的私钥，也可使用 [-p] 交互式输入该用户的密码。
预期日志结尾输出 Deployed cluster `tidb-test` successfully 关键词，表示部署成功。
{{< copyable "shell-regular" >}}
tiup cluster listTiUP 支持管理多个 TiDB 集群，该命令会输出当前通过 TiUP cluster 管理的所有集群信息，包括集群名称、部署用户、版本、密钥信息等。
例如，执行如下命令检查 tidb-test 集群情况：
{{< copyable "shell-regular" >}}
tiup cluster display tidb-test预期输出包括 tidb-test 集群中实例 ID、角色、主机、监听端口和状态（由于还未启动，所以状态为 Down/inactive）、目录信息。
安全启动是 TiUP cluster 从 v1.9.0 起引入的一种新的启动方式，采用该方式启动数据库可以提高数据库安全性。推荐使用安全启动。
安全启动后，TiUP 会自动生成 TiDB root 用户的密码，并在命令行界面返回密码。
注意：
使用安全启动方式后，不能通过无密码的 root 用户登录数据库，你需要记录命令行返回的密码进行后续操作。
该自动生成的密码只会返回一次，如果没有记录或者忘记该密码，请参照忘记 root 密码修改密码。
方式一：安全启动
{{< copyable "shell-regular" >}}
tiup cluster start tidb-test --init预期结果如下，表示启动成功。
{{< copyable "shell-regular" >}}
Started cluster `tidb-test` successfully.
The root password of TiDB database has been changed.
The new password is: 'y_+3Hwp=*AWz8971s6'.
Copy and record it to somewhere safe, it is only displayed once, and will not be stored.
The generated password can NOT be got again in future.方式二：普通启动
{{< copyable "shell-regular" >}}
tiup cluster start tidb-test预期结果输出 Started cluster `tidb-test` successfully，表示启动成功。使用普通启动方式后，可通过无密码的 root 用户登录数据库。
{{< copyable "shell-regular" >}}
tiup cluster display tidb-test预期结果输出：各节点 Status 状态信息为 Up 说明集群状态正常。
如果你已同时部署了 TiFlash，接下来可参阅以下文档：
如果你已同时部署了 TiCDC，接下来可参阅以下文档：
如果你想在不中断线上服务的情况下扩容或缩容 TiDB 集群，请参阅使用 TiUP 扩容缩容 TiDB 集群。