Skip to main content
Version: 4.0.0

多节点

介绍​

由于TIS在分布式环境中有多个组件(Console、Assemble)需要安装。为了简化安装过程，使用了Ansible进行组件安装，执行Ansible脚本前，先初始化配置文件，最后一键触发Ansible Playbook就能快速完成安装过程。

环境准备​

Ansible安装​

Ansible提供了强大的集配置,部署,自动化于一身的playbook http://www.ansible.com.cn linux服务器可以使用以下命令来进行安装:

 yum install ansible

当前测试用的服务器上使用的版本为 2.9.6

TIS Ansible安装脚本获取​

Ansible脚本存放在github仓库中 https://github.com/qlangtech/tis-ansible，将脚本clone到本地。

服务器节点清单​

本方案已经在Centos7.8服务期中测试通过，需要准备以下服务器节点：

节点Key功能数量建议配置是否必须
tis-consoleTIS中央控制台12核4G是
assemble全量流程控制及中央日志收集12核4G是
MySQL Server v5.7保存TIS配置信息12核4G是

Ansible堡垒节点与服务节点免密码登录​

ansible在安装节点执行playbook，会通过ssh连接到远端目标机器上执行安装命令，需要将安装节点上的私钥-公钥对的公钥先放置到远端服务器 .ssh/authorized_keys 文件中，执行：

cd tis-ansible
ansible all -m ping -i ./inventory/hosts

结果如下:

10.1.1.1 | SUCCESS => {
   "changed": false, 
   "ping": "pong"
}
10.1.1.2 | SUCCESS => {
   "changed": false, 
   "ping": "pong"
}
10.1.1.3 | SUCCESS => {
   "changed": false, 
   "ping": "pong"
}
10.1.1.4 | SUCCESS => {
   "changed": false, 
   "ping": "pong"
}
10.1.1.5 | SUCCESS => {
   "changed": false, 
   "ping": "pong"
}

显示全部节点能够联通，可进入下一步。

安装步骤​

安装Mysql数据库​

tip

如果集群中已经安装MySQL则跳过这一步

  1. 选择一台Mysql数据库服务器

  2. 下载mysql rpm包到本地

      wget -i -c http://dev.mysql.com/get/mysql57-community-release-el7-10.noarch.rpm

  3. 将rpm安装到 yum的仓库列表中,执行：

     yum localinstall -y mysql57-community-release-el7-10.noarch.rpm

  4. 确认是否已经添加到yum列表中

    yum search mysql-community-server

    如看到有以下这一行就算成功了

    mysql-community-server.x86_64 : A very fast and reliable SQL database server

  5. 执行安装mysql

    yum install -y mysql-community-server

  6. 安装完成之后需要对mysql进行配置，可以远端通过用户名密码登录

    1. vim /etc/my.cnf，在[mysqld]下添加skip-grant-tables 属性,然后重启

    2. 启动mysql，执行：service mysqld start

    3. 通过mysql命令登录数据库，执行：

      update mysql.user set host='%' where user="root";
      flush privileges;
      ALTER USER 'root'@'%' IDENTIFIED BY '123456';

初始化配置文件​

服务器节点配置​

编辑tis-ansible目录下 inventory/hosts文件， 将准备好的服务器节点配置到hosts文件中

caution

测试环境中，以上所有角色可以用相同的IP地址，将所有角色安装在同一节点，以便达到节约资源的目的。生产环境请尽量每个角色安装在不同节点，以便保证系统可靠性。

文件内容格式如下： 

   [tis-console]
   10.1.1.1
         
   [assemble]
   10.1.1.2
         
   [buildtask-overseer]
   10.1.1.3
         
   [buildtask-worker]
   10.1.1.4

需要配置serverGroup为：[tis-console]、[assemble]、[hadoop-yarn-resource-manager]

系统配置参数配置​

配置文件vars.yml

  1. 其他
    Key说明例子必须
    git_srctis github地址，当使用release包安装时可以不配置https://github.com/qlangtech/tis.gitN
    git_branchtis github 分支，当使用release包安装时可以不配置masterN
    task_worker_memory任务中心JVM启动分配的堆内存大小400mY
    tis_online_repository线上TIS仓库地址http://myhostN
  2. 数据库
    Key说明例子必须
    tisconsole_db_urltisMysql数据库url127.0.0.1Y
    tisconsole_db_usernametisMysql数据库用户名rootY
    tisconsole_db_passwordtisMysql数据库密码rootY
    tisconsole_db_dbnametisMysql数据库dbnametis_consoleY

tis_console 数据库初始化​

cd tis-ansible

mysql -hdbip -uroot -ppassword < ./tis_console_mysql.sql

开始安装​

安装模式分为两种:

基于源码安装

基于Release包安装​

Release包（已经deploy到aliyun OSS仓库中）直接在目标服务器上部署安装

对应的脚本为: ./tis-ansible/deploy-tis-by-release.yml

Ansible脚本为: deploy-tis-by-release.yml

安装TIS

cd tis-ansible
ansible-playbook ./deploy-tis-by-release.yml --tags=initos,tjs,assemble -i ./inventory/hosts

注意：如果在本地环境中zookeeper、hadoop或者spark已经安装，则tags标签中zk,hadoop,spark可以去掉

tip

初始用户建议使用基于Release包安装

基于源码安装​

另外一种是通过Github源代码 https://github.com/qlangtech/tis到本地执行编译打包之后自动部署到目标服务器上。

对应脚本为: ./tis-ansible/deploy-tis-by-compile.yml

 cd tis-ansible    
 ansible-playbook ./deploy-tis-by-compile.yml --tags pkg,pkg-plugin,ng-tis,tjs,assemble  -i ./inventory/hosts

安装过程需要一点时间，请耐心等待。当顺利执行完成之后就可以进入下一步了