Perl集群配置管理系统Rex简明手册

rex 是 perl 编写的基于 ssh 链接的集群配置管理系统，语法上类似 puppet dsl。官网中文版见 http://rex.perl-china.com 。本文仅为本人在部门 wiki 上编写的简介性文档。

常用命令参数

rex 命令参数很多，不过因为我们的环境是 krb 认证的，所以有些参数只能写在 rexfile 里。所以一般固定在存放了 rexfile 的 /etc/puppet/webui 下执行命令，很多配置就自动加载了。那么还需要用到的命令参数基本就只有下面几个：
-tv： 查看当前 rexfile 里定义了哪些 task 任务，以及服务器组。
-h： 指定 task 将在哪些 host 上执行。这里比较方便的地方是支持 10.5.16.[95..110] 这样的写法。
-g： 指定 task 将在哪些 group 上执行。group 的定义方式很多，rex 默认支持的有直接在 rexfile 里通过 group 指令指定，通过 ini 配置文件设定等等。目前我是实现了一个 groups_db 指令，来从我们的 sqlite 里获取。groups_db('cdnbj::nginx') 就会自动生成一个名叫 ‘cdnbj::nginx' 的服务器组，包括 cdnbj 里所有部署了 nginx 的服务器。
-e： 指定一个临时任务。通常是'say run “ipconfig”‘这样的简单命令形式。如果需要复杂逻辑，还是在 rexfile 里书写 task。
-q：指定运行日志级别，有 -q 和 -qq。
-d：指定运行日志级别，有 -d 和 -dd。

rexfile 介绍

参数设置部分：

    set connection => "openssh";
    user "root";
    krb5_auth;
    parallelism 10;

这四行指定采用 kerberos 认证，并发 10 个进程执行 ssh 命令。

    desc "install puppet agent";
    task "puppet_install", sub {
    }
    before "puppet_install", sub {
    }
    after "puppet_install", sub {
    }

这几行就是 rexfile 的任务定义主体格式。task 指令定义任务，任务会在具体的 -h 或者 -g 服务器上执行。其他都是可选项，desc内容会在 -tv 的时候显示；before 和 after 定义的任务会在执行对应 task 之前或之后，在'''rex命令执行处，即10.4.1.21本地'''执行。

常用指令介绍

run

运行命令。如果有回调函数，那么会把 stdout 和 stderr 传给回调函数；如果没有，直接把 stdout 作为返回值。

比如：

say run "uptime";
    run "nginx -v", sub { my ($out, $err) = @_; say $err };

file

分发文件。语法类似 puppet 的 file。支持 source、template、ensure、on_change 等操作。注意：rex 是顺序执行 rexfile 的，所以不用设置 puppet 的 require 指令。

比如：

    file "/etc/yum.repos.d/xiaonei-private.repo",
      source => "repos/xiaonei-private.repo";
    file "/etc/nginx/nginx.conf",
      content => template("templates/etc/nginx/nginx.conf.tpl"),
      owner  => "nginx",
      group  => "nginx",
      mode   => 644,
      ensure => 'file',
      on_change => sub { service nginx => "restart"; };
    file "/etc/nginx/conf.d",
      ensure => "directory",

pkg

安装软件包，在早期版本命令写作 install package => "nginx" ，最近改成 pkg 了，更像 puppet 语法了。

也支持传递数组作为 pkg 内容。另外，rex 还 提供了一个 update_package_db 指令，用于执行 yum clean all 或者 apt-get update 操作。这点是 puppet 欠缺的。

比如：

 update_package_db();
   my $packages = case operating_system,
      debian => ["apache2", "libphp5-apache2"],
      centos => ["httpd", "php5"],
   pkg $packages,
     ensure => "present";

ensure 也支持 present、absent、latest 等几种含义。同 puppet。

account

用户管理原先用 create_user 和 create_group 指令，最近把 create_user 更新为 account 指令。

比如：

  create_group 'puppet';
  account "puppet",
    ensure   => "present",
    uid      => 509,
    home     => '/home/puppet',
    comment  => 'puppet account',
    expire   => '2015-05-30',
    groups   => ['puppet'],
    password => 'puppet',
    system   => 1,
    no_create_home => true,
    ssh_key        => "ssh-rsa aaaab3nzac1yc2eaaaadaqabaaabaqchuw...";

tail

用来同时观测多台主机的日志的最新追加情况。应该是比较有用的一个小功能。代码如下：

   tail "/var/log/syslog", sub {
     my ($data) = @_;
     my $server = rex->get_current_connection()->{'server'};
     print "$server>> $data\n";
   };

远程主机详情相关变量

puppet 有专门的 facts 变量来判定远程主机的详情。rex 因为走 ssh 连接，不会在远程主机上跑一个 agent 来收集这些信息，所以还是通过远程执行命令的方式来提供相关内容。目前常用的几个函数(也可以认为是变量)有：

is_redhat

这个用来判断操作系统是否是 redhat 系列。之前因为有一批 debian 的机器，所以 rexfile 里一直有这么个操作逻辑：

    if ( is_debian ) {
    } elsif ( is_redhat ) {
    } else {
    }

operating_system_version

这个用来判断具体的操作系统版本号。比如 centos5 跟 centos6 应该应用的操作就不一样，甚至 centos6.5 和 centos6.2 也有可能不一致。

比如 rexfile 里的 1w10 任务：

    if ( is_redhat and operating_system_version >= 64 )
    }

route

rex 可以收集的信息比 puppet 要多很多，比如网络相关、sysctl 相关等等。rexfile 里的 1w10 任务用到了 route 信息来获取默认网关和网卡接口。

    my ($default_route) = grep {
      $_->{"flags"} =~ m/ug/ && (
        $_->{"destination"} eq "0.0.0.0" ||
        $_->{"destination"} eq "default" )
      } route;
    if ($default_route) {
        my $default_gw = $default_route->{"gateway"};
        my $default_if = $default_route->{"iface"};
        run "ip route change default via ${default_gw} dev ${default_if} initcwnd 10 initrwnd 10";
    };

connection

在多台主机执行任务的时候，大多希望在输出的时候看到某条结果是哪个主机返回的。前面 tail 任务就用到了，不过写起来非常复杂的样子。其实 rex 提供给更简洁一点的写法。就是 connection->server。

  task 'tellmewhoyouare', sub {
    say connection->server;
  }

当前连接的服务器的整个信息，也可以通过 get_system_information 指令来获取，这两个指令其实是等同的。不过根据字面意思一般用来不同语境下。

这些信息如果要完整查看，可以通过 dump_system_information 指令来查看。这个命令跟 print dumper get_system_information() 不一样的是，会把每个键作为单独变量。而这些变量就是可以直接用于 rex 的 template 里的内嵌变量。比如：

  listen <%= $eth0_ip %>:80;
  visible_hostname <%= $hostname %>

不在 dump_system_information 清单里的变量，也想在 template 里使用的，就必须显式传递。这点和 puppet 不一致，puppet 在 template 里可以通过 scope.lookupvar() 指令获取任意pp类里设定的变量，这一点完全无视词法作用域的存在==！

比如：

   file '/etc/elasticsearch/elasticsearch.yml',
     content => template('files/es.yml.tmpl', conf => {
       clustername => 'logstash'
     });

对应的 es.yml.tmpl 里写作：

  clustername: <%= $conf->{'clustername'} %>

这样才行。