搭建与启动

自动搭建与启动

单机环境

适用场景：搭建流程方便快捷，但无法满足容灾、弹性扩展、零宕机升级与负载均衡等需求，主要用于搭建Demo用于展示，与服务对SLA无要求的用户。

基于Docker Compose

通过以下命令，可以全自动地搭建一套完整的Turms最小集群（包含turms-gateway、turms-service与turms-admin）及其依赖服务端（MongoDB分片集群与Redis）

git clone --depth 1 https://github.com/turms-im/turms.git
cd turms
docker plugin install grafana/loki-docker-driver:latest --alias loki --grant-all-permissions
# Or "ENV=dev,demo docker compose -f docker-compose.standalone.yml --profile monitoring up --force-recreate -d" to run with sidecar services in dev profile
docker compose -f docker-compose.standalone.yml up --force-recreate

等集群完成搭建后，可以通过http://localhost:6510访问turms-admin后台管理系统，并输入账号密码（默认均为turms）。如果登录成功，则说明Turms集群搭建成功。

注意：AWS提供了高性价比的t4g系列EC2实例，但由于t4g系列实例使用了ARM处理器，因此很多应用都无法运行在该类EC2实例上，如bitnami所提供的镜像就均无法运行在该类实例上。如果您想要在ARM处理器上运行docker-compose.standalone.yml，您需要先执行下方指令，在本地编译并安装Loki插件，然后才能运行docker-compose.standalone.yml 由于Loki自身有个Critical级别的Bug（https://github.com/grafana/loki/issues/2361），即当日志无法送达Loki服务端时，直接Freeze我们的服务，因此我们暂时移除了Loki服务，您目前不需要执行下述命令，也可直接运行`docker-compose.standalone.yml`：

# Install Go
sudo add-apt-repository ppa:longsleep/golang-backports
sudo apt update
sudo apt install golang-go

# Install Loki
sudo docker plugin install grafana/loki-docker-driver:latest --alias loki --grant-all-permissions

# Build and Enable Loki
git clone https://github.com/grafana/loki.git
cd loki
git checkout "tags/v2.4.1" -b setup
sudo GOOS=linux GOARCH=arm GOARM=7 go build ./clients/cmd/docker-driver
# Replace "<ALPHA_NUMERIC_FOLDER>" with the real path on your machine
sudo mv docker-driver /var/lib/docker/plugins/<ALPHA_NUMERIC_FOLDER>/rootfs/bin
sudo docker plugin enable loki

补充：

• 配合--profile monitoring（docker compose -f docker-compose.standalone.yml --profile monitoring up --force-recreate），还可以额外自动搭建Prometheus与Grafana服务端。
• Turms服务端默认使用生产环境配置，不会向控制台打印日志，只会打印日志文件，因此您通过docker logs <TURMS_CONTAINER_ID>是无法查看到Turms服务端的运行日志的。为了方便排查问题，您可以在本地开发测试时，把环境变量设置为ENV=dev，然后再次启动docker-compose.standalone.yml。在dev环境下，Turms会向控制台打印日志，并自动生成测试用的Fake数据，与模拟真实客户端TCP连接与请求
• 如果您通过上述指令，无法启动docker-compose.standalone.yml。则确保服务器的Docker版本为20.x.x与Docker Compose插件版本为2.x.x，
• Turms的Playground环境与网站每次都是通过ENV=dev,demo docker compose -f docker-compose.standalone.yml --profile monitoring up --force-recreate -d这一条命令自动搭建的

基于Terraform与Docker Compose

（由于Turms目前并没有提供封装好的镜像，因此仍需要使用Docker Compose进行环境搭建）

该方案是在上述Docker Compose方案的基础上，引入了Turms自定义的Terraform模块，以帮助用户自动开通并配置VPC、交换机、安全组与单机ECS抢占式实例。在这台ECS上，Terraform会通过user-data系统初始化脚本，来安装Docker、Docker Compose与Turms等服务，并最终启动Turms单机集群。

具体操作命令如下：

git clone --depth 1 https://github.com/turms-im/turms.git
cd turms/terraform/alicloud/playground
export ALICLOUD_ACCESS_KEY=<your_access_key>
export ALICLOUD_SECRET_KEY=<your_secret_key>
terraform init
terraform apply

在terraform apply命令执行完毕后，等待约3~15分钟（阿里云ECS拉取ghcr镜像很慢），然后再访问http://公网IP:6510（公网IP可以通过查看控制台输出的public_ip或查看云服务的ECS控制台获得），如果可以成功访问turms-admin后台管理系统，则表明搭建成功。

注意：该方案需要购买与使用云服务，而其开销取决于ECS的运行时长。默认配置下，约一小时0.1元（抢占实例的价格随时有可能波动，因此具体价格请查阅云服务的价目表）

基于云服务的集群环境

适用场景：有容灾、弹性扩展、跨地域部署与负载均衡等需求。该方案提供的各种能力直接与搭建成本挂钩，因此您通常需要修改默认提供的Terraform module配置，以保证配置既能满足您的需求，同时搭建与运维成本最低。

具体操作命令如下：

git clone --depth 1 https://github.com/turms-im/turms.git
cd turms/terraform/alicloud/cluster
export ALICLOUD_ACCESS_KEY=<your_access_key>
export ALICLOUD_SECRET_KEY=<your_secret_key>
terraform init
terraform apply

该Terraform模块会进行按照互联网应用的常规同城容灾级的部署方案，进行云服务的部署。具体而言包括：

1. 在一个地域内搭建一个VPC，该VPC下开通2台交换机，代表两个可用区
2. 在上述两个可用区内默认部署一套MongoDB分片集群服务，实现同城容灾
3. 在一个可用区内默认部署一套Redis服务
4. 为接收发送给Turms ECS的外网流量，开通SLB服务
5. 为实现Turms ECS的外网访问，开通NAT服务
6. 为turms-gateway、turms-service与turms-admin服务端分别搭建各自的安全组
7. 为turms-gateway服务端，开通无公网带宽的ECS实例（默认数量为1）。通过user-data实现turms-gateway服务初始化与执行，并与上述SLB、NAT、安全组、MongoDB、Redis服务绑定
8. 为turms-service服务端，开通无公网带宽的ECS实例（默认数量为1）。通过user-data实现turms-service服务初始化与执行，并与上述SLB、NAT、安全组、MongoDB、Redis服务绑定
9. 为turms-admin服务端，开通无公网带宽的ECS实例（默认数量为1）。通过user-data实现turms-admin服务初始化与执行，并与上述安全组服务绑定

自此整套Turms基础集群搭建完成（未来还会提供诸如日志分析服务等）。若希望了解更多实现细节，请查阅turms/terraform/alicloud/cluster目录下的具体Terraform模块配置

手动搭建与启动

适用场景：通用，无特别限制场景。但一般只适用于小规模手动部署。

若您网络畅通，第一次完成以下全部操作大概需要花费10~30分钟。当您熟练之后，可在1~3分钟完成一整套集群的部署工作。

1. MongoDB集群搭建（用于业务数据存储、服务发现、配置管理）

   • 下载并安装MongoDB（因为Turms服务端需要使用支持分布式事务的分片集群，所以要求MongoDB的最低版本为4.2。推荐用户使用最新稳定版）。以RHEL/CentOS为例（具体可参考：https://docs.mongodb.com/manual/tutorial/install-mongodb-on-red-hat）：

     cat <<EOF > /etc/yum.repos.d/mongodb-org-6.0.repo
     [mongodb-org-6.0]
     name=MongoDB Repository
     baseurl=https://repo.mongodb.org/yum/redhat/$releasever/mongodb-org/6.0/x86_64/
     gpgcheck=1
     enabled=1
     gpgkey=https://www.mongodb.org/static/pgp/server-6.0.asc
     EOF
     yum install -y mongodb-org

   • 搭建MongoDB服务端分片集群。以基于工具mtools/mlaunch搭建为例：

     （关于mlaunch提供的更多指令，读者可查阅：mlaunch文档)

     pip3 install mtools[mlaunch]
     mlaunch init --replicaset --sharded 1 --nodes 1 --config 1 --hostname localhost --port 27017 --mongos 1

     注意：

     • 如果在Windows环境执行pip3 install mtools[mlaunch]命令时，遇到类似error: Microsoft Visual C++ 14.0 or greater is required. Get it with "Microsoft C++ Build Tools"的错误，则您需要先在https://visualstudio.microsoft.com/downloads页面下，下载`Visual Studio Installer，并通过它安装MSVC build tools，然后再执行pip3 install mtools[mlaunch]`指令。
     • 请确保MongoDB服务端运行正常，否则Turms服务端在启动时会抛出MongoSocketOpenException异常。

2. 下载、安装并启动Redis服务端（用于实现用户状态管理以及“附近的用户”）。以RHEL/CentOS为例：

   yum install epel-release
   yum update
   yum install redis
   systemctl start redis
   systemctl enable redis

   对于Windows平台，可在 tporadowski/redis 下载Windows版本供本地开发测试用。

3. Turms集群搭建

   方案一：拉取Turms服务端Docker镜像，并运行：

   # Pull and run images
   docker run -p 6510:6510 ghcr.io/turms-im/turms-admin
   docker run -p 7510:7510 -p 8510:8510 ghcr.io/turms-im/turms-service
   docker run --ulimit nofile=102400:102400 -p 7510:7510 -p 9510:9510 -p 10510:10510 -p 11510:11510 -p 12510:12510 ghcr.io/turms-im/turms-gateway

   另外，您可以通过volume挂载的方式来使用自定义的application.yaml与jvm.options。如配置-v /your-custom-config-dir:/opt/turms/turms/config。

   方案二：下载并解压Turms服务端压缩包（由于v.0.10.0尚未发布在release页面中，因此该方案暂不可用），根据下述步骤运行：

   • （如果您将MongoDB与Redis都安装默认配置安装在本地，可跳过此步骤）根据您的需求配置config/jvm.options、config/application.yaml（您可以在此处配置Turms自定义的配置参数，并且您也可以在此处配置多个MongoDB或mongos的服务端地址。具体可参考：https://docs.mongodb.com/manual/reference/connection-string）。

   • （推荐使用Ansible）在所有需要运行Turms服务端的系统上，运行bin/turms脚本（默认以Thin包形式执行，若需以Fat包形式执行，请在执行脚本时加上-f参数，如：sh run.sh -f。之后再运行turms-gateway服务端。turms-gateway与turms-service服务端会通过MongoDB（作为服务注册中心）来自动寻找其他服务端节点，由此Turms集群开始运作。

   方案三：克隆Turms仓库源码，直接通过IDE运行turms-gateway与turms-service服务端。（参考命令：git clone --depth 1 https://github.com/turms-im/turms.git）

提醒

• turms-service服务端在启动时，会自动检测数据库中是否已存在一个角色为ROOT，且账号为turms的超级管理员账号。如果不存在，则turms-service服务端会自动创建一个角色为ROOT、名称为turms与密码为turms.security.password.initial-root-password（默认为：turms）的管理员账号。在生产环境中，请务必记得要修改默认密码。
• 上述操作主要用于您初次体验Turms集群使用，若您需将Turms部署在生产环境当中，请务必查阅Wiki手册，了解各种配置参数的意义，以最小的资源消耗，来定制属于您自己的业务需求与业务组合。

Turms服务端启动与关闭的大致流程

启动流程

1. 连接并校验mongos与Redis服务端。
2. 检测MongoDB是否已建表，如果已经建好表了，则跳过这步。如果没有就进行：建表、添加索引、添加分片键、添加Zones用于冷热数据分离存储。如果开启了MongoDB的Fake数据，则turms-service会自动向MongoDB生成Fake数据，用于开发测试。
3. 对于turms-service服务端，它会检测MongoDB中是否已存在一个角色为ROOT，且账号为turms的超级管理员账号。如果不存在，则会向MongoDB创建一个角色为ROOT、名称为turms与密码为turms.security.password.initial-root-password（默认为：turms）的管理员账号。
4. 注册本地Node节点到服务注册中心，如果注册成功，则拉取并应用集群全局配置，并搭建RPC服务端，用于接收RPC客户端连接。如果失败，则抛异常并退出进程。
5. 开启Admin HTTP服务端，用于接收管理员API请求。另外，对于turms-gateway，还要开启网关服务端（如TCP/WebSocket），用于接收客户端连接与请求。
6. 对于turms-gateway，如果开启了Fake客户端，则生成真实的客户端连接并随机发送真实客户端请求（请求类型随机、请求参数随机），用于开发测试。

至此，服务端启动完毕。

关闭流程

（对于turms-gateway）

1. 拒绝新客户端网络连接与客户端请求。
2. 关闭Fake客户端，关闭已建立的客户端会话连接。
3. 关闭对接TCP/UDP/WebSocket客户端连接的服务端，与HTTP管理员API服务端。

（对于turms-gateway与turms-service） 4. 关闭黑名单同步机制。 5. 关闭集群服务（如RPC节点间的连接、服务注册与发现服务）。 6. 关闭插件机制。 7. 发送完Redis/MongoDB客户端请求后，关闭Turms服务端连接到Redis和MongoDB的网络连接。 8. 打印完日志，关闭日志服务。

至此，服务端关闭完成。