• 基本的 Seafile 高可用集群
    • 架构
    • 部署实现
      • 在 Node1 Node2 Node3 上安装 MariaDB 并配置Galera 集群
      • 在 Node1 Node2 上安装 Seafile
      • 配置后端存储
        • 在另一端口上运行 Seahub
  • default localhost:8000
    • Nginx 下配置 Seahub
    • Keepalived 高可用

    基本的 Seafile 高可用集群

    本文档介绍用 3 台服务器构建 Seafile 高可用集群的架构。这里介绍的架构仅能实现“服务高可用”，而不能支持通过扩展更多的节点来提升服务性能。如果您需要“可扩展 + 高可用”的方案，请参考Seafile 可扩展集群文档。

    在这种高可用架构中包含3个主要的系统部件：

    • Seafile 服务器：提供 Seafile 服务的软件
    • MariaDB 数据库集群：保存小部分的 Seafile 元数据，比如资料库所有者、共享关系等
    • 文件存储后端：负责保存文件块和元数据
      其中，文件存储后端可以是 NAS 或者分布式对象存储，这个存储系统本身的可用性和可靠性不在本文档的讨论范围之内，应该由第三方系统保证。所以我们在这里主要讨论如何实现 Seafile 服务器的高可用，以及 MariaDB 数据库的可用性和可靠性。

    架构

    这种3节点高可用方案的架构图如下：

    3-node-ha

    MariaDB 的高可用和可靠性通过部署 3 节点的 Galera 集群保证。简单地说，Galera 集群是一个针对 MariaDB 的多主（Multi-Master）高可用方案。集群中每个 MariaDB 实例都保存数据库的一个完整副本，客户端可用通过任何一个实例读写数据。这个集群能够在一个节点掉线的情况下继续提供服务，并保证数据一致。这个方案的最大优点是所有对数据库的写入都是严格在三个节点上同步进行的，不存在数据不同步的问题。因此，Seafile 主服务器和备用服务器都只需要直接访问本地的 MariaDB 实例即可。

    在正常情况下，Seafile 服务运行在 Seafile 主服务器上，对外提供 Seafile 的所有功能，包括 web 访问、文件同步、搜索、预览等。当主服务器正常工作时，备用服务器上并不运行 Seafile 服务。主备两个服务器上都运行 Keepalived 进程。它负责管理 Seafile 对外提供服务的 IP 地址（虚拟 IP 地址，简称 VIP）。当主服务器正常工作时，它把 VIP 关联在主服务器上，客户端通过主服务器访问 Seafile；当检测到主服务器宕机后，备用服务器上的 Keepalived 进程自动把 VIP 漂移到备用服务器，并自动在上面启动 Seafile 服务。这种模式保证了 Seafile 服务的高可用性。由于数据都是保存在后端存储和 MariaDB 集群中，所以在切换过程中不会出现数据丢失。

    部署实现

    以下我们把 Seafile 主服务器称为 Node1，备用服务器节点称为 Node2，第三个 MariaDB 节点称为 Node3。

    在 Node1 Node2 Node3 上安装 MariaDB 并配置Galera 集群

    MariaDB 集群部署请参考文档 MariaDB Galera Cluster

    MariaDB 集群部署成功后在三个节点上执行以下操作，添加MariaDB 集群健康状态检测脚本：

    1. wget "https://raw.githubusercontent.com/olafz/percona-clustercheck/master/clustercheck" -O /usr/bin/clustercheck
    2. cd /usr/bin
    3. chmod 755 clustercheck

    并在任意一个 MariaDB 群节点上为clustercheck用户授权访问数据库：

    1. GRANT PROCESS ON *.* TO 'clustercheckuser'@'localhost' IDENTIFIED BY 'clustercheckpassword!';

    在各节点上执行 clustercheck 命令，返回 '200'则说明该节点运行正常，返回 '500' 则说明该节点不可用。

    在 Node1 Node2 上安装 Seafile

    首先在Node1、Node2上安装Seafile运行所需的依赖库，在两个节点上执行以下命令：

    1. yum install python-setuptools python-imaging python-ldap MySQL-python python-memcached python-urllib3 -y
    2. yum install jre -y

    仅在 Node1 上使用 ./setup-seafile-mysql.sh 方式安装 Seafile。假设您已将Seafile专业版6.1.6的安装包下载到 /opt/ 目录下了。参考以下命令完成安装：

    1. cd /opt/
    2. mkdir seafile
    3. tar -xvf seafile-pro-server_6.1.6_x86-64.tar.gz -C seafile
    4. cd seafile/seafile-pro-server-6.1.6
    5. ./setup-seafile-mysql.sh auto -u seafile -w ${SQLSEAFILEPW} -r ${SQLROOTPW}

    注意：'${SQLSEAFILEPW}' 代表的是将要授权seafile用户访问数据库所用的密码，替换成您想要设置的密码即可；'${SQLROOTPW}' 代表的是root访问数据库时所用的密码，替换成您自己的数据库root密码即可。

    以上过程执行成功后，Node1 上已成功安装 Seafile。接下来将 Node1 上 Seafile 的安装目录（此处为/opt/seafile）下的所有文件打包复制到 Node2 节点。并参照以下文档在 Node1、Node2 上配置好相应的后端存储；

    配置后端存储

    还需要将后端云存储系统的设置添加到配置文件中，这里提供了4种后端存储的配置方案：

    • 使用 NFS ：NFS 下集群安装
    • 使用 S3：Amazon S3 下安装
    • 使用 OSS：使用阿里云OSS存储
    • 使用 Ceph：Ceph 下安装
      当后端存储配置完成后，可以启动 Seafile 服务做访问测试；在 Seafile 安装目录下执行以下操作，启动 Seafile 服务：
    1. cd seafile-server-latest
    2. ./seafile.sh start # 启动 Seafile 服务
    3. ./seahub.sh start # 启动 Seahub 网站（默认运行在8000端口上）

    小贴士: 你第一次启动 seahub 时，seahub.sh 脚本会提示你创建一个 seafile 管理员帐号。服务启动后, 打开浏览器并输入以下地址

    1. http://<192.168.1.123>:8000/

    你会被重定向到登陆页面. 输入管理员用户名和密码即可。

    在另一端口上运行 Seahub

    如果你不想在默认的 8000 端口上运行 Seahub, 而是想自定义端口（比如8001）中运行，请按以下步骤操作:

    6.2.x 及其之前版本

    • 关闭 Seafile 服务器

      ./seahub.sh stop # 停止 Seafile 进程
      ./seafile.sh stop # 停止 Seahub

    • 更改haiwen/conf/ccnet.conf文件中SERVICE_URL 的值(假设你的 ip 或者域名时192.168.1.100), 如下 (从 5.0 版本开始，可以直接在管理员界面中设置。注意，如果同时在 Web 界面和配置文件中设置了这个值，以 Web 界面的配置为准。):

      SERVICE_URL = http://192.168.1.100:8001

    • 重启 Seafile 服务器

      ./seafile.sh start # 启动 Seafile 服务
      ./seahub.sh start 8001 # 启动 Seahub 网站 （运行在8001端口上）

    6.3.x 及其以上版本

    6.3.0 及其之后的版本，我们弃用了 ./seahub.sh start <port> 的方式使seahub进程监听在其他端口。但是，您可以通过修改 conf/gunicorn.conf 中的端口设置来指定seahub启动端口。

    • 关闭 Seafile 服务器

      ./seahub.sh stop # 停止 Seafile 进程
      ./seafile.sh stop # 停止 Seahub

    • 更改haiwen/conf/ccnet.conf文件中SERVICE_URL 的值(假设你的 ip 或者域名时192.168.1.100), 如下 (从 5.0 版本开始，可以直接在管理员界面中设置。注意，如果同时在 Web 界面和配置文件中设置了这个值，以 Web 界面的配置为准。):

      SERVICE_URL = http://192.168.1.100:8001

    • 修改conf/gunicorn.conf

    default localhost:8000

    bind = "0.0.0.0:8001"

    • 重启 Seafile 服务器

      ./seafile.sh start # 启动 Seafile 服务
      ./seahub.sh start # 启动 Seahub 网站 （运行在8001端口上）

    Nginx 下配置 Seahub

    您可能还需要使用 Nginx 反向代理 Seahub；请参照文档 Nginx 下配置 Seahub 在 Node1、Node2 节点上配置 Nginx 反向代理服务；

    提示：请在两个节点都设置 Nginx 开机自启动：systemctl enable nginx.service

    Keepalived 高可用

    该集群架构中，使用 Keepalived 实现 Seafile 服务高可用。当主节点 Node1 正常提供服务时，备用节点应该不启动 Seafile 服务，当主节点服务不可用时，Keepalived 实现 VIP 地址转移，并启动备用节点 Node2 上的 Seafile 服务。Keepalived 配置示例如下：

    Node1 节点：

    1. ! Configuration File for keepalived
    3. global_defs {
    4.     notification_email {
    5.         root@localhost
    6.     }
    7.     notification_email_from keepalived@localhost
    8.     smtp_server 127.0.0.1
    9.     smtp_connect_timeout 30
    10.     router_id node1
    11.     vrrp_mcast_group4 224.0.100.19
    12. }
    14. vrrp_script chk_mariadb_galera {
    15.     script "/usr/bin/clustercheck && exit 0 || exit 1"
    16.     interval 1
    17.     weight -5
    18. }
    20. vrrp_instance VI_1 {
    21.     state MASTER
    22.     interface eno16777736
    23.     virtual_router_id 14
    24.     priority 100
    25.     advert_int 1
    26.     authentication {
    27.         auth_type PASS
    28.         auth_pass 571f97b2
    29.     }
    30.     virtual_ipaddress {
    31.         192.168.1.18/24 dev eno16777736
    32.     }
    33.     track_script {
    34.         chk_mariadb_galera
    35.     }
    36.     notify_master "/opt/seafile/seafile-server-latest/seafile.sh start && /opt/seafile/seafile-server-latest/seahub.sh start"
    37.     notify_backup "/opt/seafile/seafile-server-latest/seafile.sh stop && /opt/seafile/seafile-server-latest/seahub.sh stop"
    38. }

    Node2 节点：

    1. ! Configuration File for keepalived
    3. global_defs {
    4.     notification_email {
    5.         root@localhost
    6.     }
    7.     notification_email_from keepalived@localhost
    8.     smtp_server 127.0.0.1
    9.     smtp_connect_timeout 30
    10.     router_id node2
    11.     vrrp_mcast_group4 224.0.100.19
    12. }
    14. vrrp_script chk_mariadb_galera {
    15.     script "/usr/bin/clustercheck && exit 0 || exit 1"
    16.     interval 1
    17.     weight -5
    18. }
    20. vrrp_instance VI_1 {
    21.     state BACKUP
    22.     interface eno16777736
    23.     virtual_router_id 14
    24.     priority 98
    25.     advert_int 1
    26.     authentication {
    27.         auth_type PASS
    28.         auth_pass 571f97b2
    29.     }
    30.     virtual_ipaddress {
    31.         192.168.1.18/24 dev eno16777736
    32.     }
    33.     track_script {
    34.         chk_mariadb_galera
    35.     }
    36.     notify_master "/opt/seafile/seafile-server-latest/seafile.sh start && /opt/seafile/seafile-server-latest/seahub.sh start"
    37.     notify_backup "/opt/seafile/seafile-server-latest/seafile.sh stop && /opt/seafile/seafile-server-latest/seahub.sh stop"
    38. }

    启动 Keepalived 服务，并配置开机自启，在浏览器上通过虚拟IP地址访问 Seafile 服务，配置正确的 SERVICE_URL 和 FILE_SERVER_ROOT；

    1. systemctl start keepalived.service
    2. systemctl enable keepalived.service

    原文: https://manual-cn.seafile.com/deploy_pro/ha_cluster.html