SaltStack 利用pillar实现Redis多实例部署

需求：基于业务环境，需在一台机器上部署N多Redis实例，之前部署只能实现部署单个redis，在手工修改目录名字以区分不同redis实例，现想设计能部署一个redis，剩余实例递增即可，以实现多实例部署。

设计：多redis启动只需要一个配置文件和启动脚本即可，而启动程序是不变的，那么我可以安装一个redis，以/usr/local/redis目录为例，在目录下生成基于应用的redis，下发对应的脚本到/etc/init.d/，而配置文件做成模板化，变化参数通过pillar来渲染，例如log name、pid name、data directory。

推荐阅读：

Redis集群明细文档 http://www.linuxidc.com/Linux/2013-09/90118.htm

Ubuntu 12.10下安装Redis（图文详解）+ Jedis连接Redis http://www.linuxidc.com/Linux/2013-06/85816.htm

Redis系列-安装部署维护篇 http://www.linuxidc.com/Linux/2012-12/75627.htm

CentOS 6.3安装Redis http://www.linuxidc.com/Linux/2012-12/75314.htm

Redis配置文件redis.conf 详解 http://www.linuxidc.com/Linux/2013-11/92524.htm

note: 多实例部署，要涉及到多个脚本，想通过salt的service.running启动，那么必须要满足几个条件

    1.rc.d/init.d脚本

    2.脚本内容必须有start、stop、status，status必须有，因为service模块会先执行status来判定服务是否在运行，在执行启动

    3.脚本包含启动和关闭参数。Sxx、Kxx

整体目录结构如下

/usr/local/redis/bin

      redis-benchmark

      redis-cli

      redis-server

      redis-check-aof

      redis-check-dump

/usr/local/redis/redis-s-user

      redis.conf

/usr/local/redis/redis-s-group

      redis.conf

/etc/init.d/redis-s-user

/etc/init.d/redis-s-group

上述设计完成，那么开工，Saltstack安装，验证我就不演示啦。直接上代码

pillar

redis-server1:

  - name: redis-s-user

    port: 7379

  - name: redis-s-group

    port: 7479

定义不同端口和服务名，在SLS文件中渲染。

sls

redis:

  pkg.installed:

    - name: redis

{% if 'redis-server1' in pillar %}

{% for eachredis in pillar['redis-server1'] %}

/usr/local/redis/{{ eachredis.name }}/redis.conf:

  file.managed:

    - source: salt://redis/files/redis.conf

    - makedirs: True

    - template: jinja

    - defaults:

        name: {{ eachredis.name }}

        port: {{ eachredis.port }}

    - require:

      - pkg: redis

{% endfor %}

{% endif %}

{% if 'redis-server1' in pillar %}

{% for eachredis in pillar['redis-server1'] %}

/etc/init.d/{{ eachredis.name }}:

  file.managed:

    - source: salt://redis/files/test

    - mode: 755

    - require:

      - pkg: redis

    - template: jinja

    - defaults:

        name: {{ eachredis.name }}

  service.running:

    - name: {{ eachredis.name }}

    - enable: True

    - watch:

      - pkg: redis

{% endfor %}

{% endif %}

1.安装redis服务，包是打的RPM包，包的结构就顶楼 - -

2.下发配置文件，配置文件需要指定不同端口、路径名。所以提供2个值。

3.下发启动脚本，redis启动只需要redis-server指定不同配置文件，所以这里只给了一个name值

Redis启动脚本

#!/bin/bash

# Init file for redis

# chkconfig: 2345 80 12

# description: redis daemon

# processname: redis

# config: /usr/local/redis/redis.conf

# pidfile: /var/run/redis.pid

source /etc/init.d/functions

BIN="/usr/local/redis/bin"

CONF="/usr/local/redis/{{ name }}/redis.conf"

PIDFILE="/var/run/{{ name }}.pid"

### Read configuration

[ -r "$SYSCONFIG" ] && source "$SYSCONFIG"

RETVAL=0

prog="redis-server"

desc="Redis Server"

start() {

if [ -e $PIDFILE ];then

echo "$desc already running...."

exit 1

fi

echo -n $"Starting $desc: "

daemon $BIN/$prog $CONF

RETVAL=$?

echo

[ $RETVAL -eq 0 ] && touch /var/lock/subsys/$prog

return $RETVAL

}

stop() {

echo -n $"Stop $desc: "

kill `cat $PIDFILE`

RETVAL=$?

echo

[ $RETVAL -eq 0 ] && rm -f /var/lock/subsys/$prog $PIDFILE

return $RETVAL

}

restart() {

stop

start

}

case "$1" in

start)

start

;;

stop)

stop

;;

restart)

restart

;;

condrestart)

[ -e /var/lock/subsys/$prog ] && restart

RETVAL=$?

;;

status)

status $PIDFILE

RETVAL=$?

;;

*)

echo $"Usage: $0 {start|stop|restart|condrestart|status}"

RETVAL=1

esac

exit $RETVAL

redis配置文件

daemonize yes

pidfile /var/run/{{ name }}.pid

port {{ port }}

timeout 0

tcp-keepalive 0

loglevel warning

logfile /opt/log/redis/{{ name }}.log

databases 16

#save 900 1

#save 300 10

#save 60 10000

stop-writes-on-bgsave-error yes

rdbcompression yes

rdbchecksum yes

dbfilename {{ name }}.rdb

dir /usr/local/redis/{{ name }}

slave-serve-stale-data yes

slave-read-only yes

repl-disable-tcp-nodelay no

slave-priority 100

appendonly yes

appendfilename {{ name }}.aof

appendfsync everysec

no-appendfsync-on-rewrite no

#auto-aof-rewrite-percentage 100

#auto-aof-rewrite-min-size 64mb

lua-time-limit 5000

slowlog-log-slower-than 10000

slowlog-max-len 128

hash-max-ziplist-entries 512

hash-max-ziplist-value 64

list-max-ziplist-entries 512

list-max-ziplist-value 64

set-max-intset-entries 512

zset-max-ziplist-entries 128

zset-max-ziplist-value 64

activerehashing yes

client-output-buffer-limit normal 0 0 0

client-output-buffer-limit slave 256mb 64mb 60

client-output-buffer-limit pubsub 32mb 8mb 60

hz 10

aof-rewrite-incremental-fsync yes

那么现在，只需要同步下去即可。

salt 'test' state.sls redis.install -> redis.install = /srv/salt/redis/install.sls内容就是上面的sls

内容是经过验证过的，如果有小细节地方麻烦给我留言，及时更正！！

既然能实现多实例redis部署，那么其他任何服务都是可以，关键在于这么使用。

顺便贴个service.running过程。方便大家理解。之前在部署时，出现客户端手工执行正确，但saltstack调用死活都不成功，告诉我已运行，且需要个状态。

其实这是init脚本缺了个status函数，saltstack运行service.running先是执行status，判断服务是否正在运行，未运行，那么立即start，而探测已运行，则报服务已运行，需要个状态

启动过程

需求：基于业务环境，需在一台机器上部署N多Redis实例，之前部署只能实现部署单个redis，在手工修改目录名字以区分不同redis实例，现想设计能部署一个redis，剩余实例递增即可，以实现多实例部署。

设计：多redis启动只需要一个配置文件和启动脚本即可，而启动程序是不变的，那么我可以安装一个redis，以/usr/local/redis目录为例，在目录下生成基于应用的redis，下发对应的脚本到/etc/init.d/，而配置文件做成模板化，变化参数通过pillar来渲染，例如log name、pid name、data directory。

整体目录结构如下

/usr/local/redis/bin

      redis-benchmark

      redis-cli

      redis-server

      redis-check-aof

      redis-check-dump

/usr/local/redis/redis-s-user

      redis.conf

/usr/local/redis/redis-s-group

      redis.conf

/etc/init.d/redis-s-user

/etc/init.d/redis-s-group

上述设计完成，那么开工，Saltstack安装，验证我就不演示啦。直接上代码

pillar

redis-server1:

  - name: redis-s-user

    port: 7379

  - name: redis-s-group

    port: 7479

定义不同端口和服务名，在SLS文件中渲染。

sls

redis:

  pkg.installed:

    - name: redis

{% if 'redis-server1' in pillar %}

{% for eachredis in pillar['redis-server1'] %}

/usr/local/redis/{{ eachredis.name }}/redis.conf:

  file.managed:

    - source: salt://redis/files/redis.conf

    - makedirs: True

    - template: jinja

    - defaults:

        name: {{ eachredis.name }}

        port: {{ eachredis.port }}

    - require:

      - pkg: redis

{% endfor %}

{% endif %}

{% if 'redis-server1' in pillar %}

{% for eachredis in pillar['redis-server1'] %}

/etc/init.d/{{ eachredis.name }}:

  file.managed:

    - source: salt://redis/files/test

    - mode: 755

    - require:

      - pkg: redis

    - template: jinja

    - defaults:

        name: {{ eachredis.name }}

  service.running:

    - name: {{ eachredis.name }}

    - enable: True

    - watch:

      - pkg: redis

{% endfor %}

{% endif %}

1.安装redis服务，包是打的RPM包，包的结构就顶楼 - -

2.下发配置文件，配置文件需要指定不同端口、路径名。所以提供2个值。

3.下发启动脚本，redis启动只需要redis-server指定不同配置文件，所以这里只给了一个name值