SaltStack 利用pillar实现Redis多实例部署

137次阅读

共计 6224 个字符，预计需要花费 16 分钟才能阅读完成。

需求：基于业务环境，需在一台机器上部署 N 多 Redis 实例，之前部署只能实现部署单个 redis，在手工修改目录名字以区分不同 redis 实例，现想设计能部署一个 redis，剩余实例递增即可，以实现多实例部署。

设计：多 redis 启动只需要一个配置文件和启动脚本即可，而启动程序是不变的，那么我可以安装一个 redis，以 /usr/local/redis 目录为例，在目录下生成基于应用的 redis，下发对应的脚本到 /etc/init.d/，而配置文件做成模板化，变化参数通过 pillar 来渲染，例如 log name、pid name、data directory。

Redis 的详细介绍 ：请点这里
Redis 的下载地址 ：请点这里

推荐阅读：

Redis 集群明细文档 http://www.linuxidc.com/Linux/2013-09/90118.htm

Ubuntu 12.10 下安装 Redis（图文详解）+ Jedis 连接 Redis http://www.linuxidc.com/Linux/2013-06/85816.htm

Redis 系列 - 安装部署维护篇 http://www.linuxidc.com/Linux/2012-12/75627.htm

CentOS 6.3 安装 Redis http://www.linuxidc.com/Linux/2012-12/75314.htm

Redis 配置文件 redis.conf 详解 http://www.linuxidc.com/Linux/2013-11/92524.htm

note: 多实例部署，要涉及到多个脚本，想通过 salt 的 service.running 启动，那么必须要满足几个条件

1.rc.d/init.d 脚本

2. 脚本内容必须有 start、stop、status，status 必须有，因为 service 模块会先执行 status 来判定服务是否在运行，在执行启动

3. 脚本包含启动和关闭参数。Sxx、Kxx

整体目录结构如下

/usr/local/redis/bin

redis-benchmark

redis-cli

redis-server

redis-check-aof

redis-check-dump

/usr/local/redis/redis-s-user

redis.conf

/usr/local/redis/redis-s-group

redis.conf

/etc/init.d/redis-s-user

/etc/init.d/redis-s-group

上述设计完成，那么开工，Saltstack 安装，验证我就不演示啦。直接上代码

pillar

redis-server1:

– name: redis-s-user

port: 7379

– name: redis-s-group

port: 7479

定义不同端口和服务名，在 SLS 文件中渲染。

sls

redis:

pkg.installed:

– name: redis

{% if ‘redis-server1’ in pillar %}

{% for eachredis in pillar[‘redis-server1’] %}

/usr/local/redis/{{eachredis.name}}/redis.conf:

file.managed:

– source: salt://redis/files/redis.conf

– makedirs: True

– template: jinja

– defaults:

port: {{eachredis.port}}

– require:

– pkg: redis

{% endfor %}

{% endif %}

{% if ‘redis-server1’ in pillar %}

{% for eachredis in pillar[‘redis-server1’] %}

/etc/init.d/{{eachredis.name}}:

file.managed:

– source: salt://redis/files/test

– mode: 755

– require:

– pkg: redis

– template: jinja

– defaults:

service.running:

– name: {{eachredis.name}}

– enable: True

– watch:

– pkg: redis

{% endfor %}

{% endif %}

1. 安装 redis 服务，包是打的 RPM 包，包的结构就顶楼 – –

2. 下发配置文件，配置文件需要指定不同端口、路径名。所以提供 2 个值。

3. 下发启动脚本，redis 启动只需要 redis-server 指定不同配置文件，所以这里只给了一个 name 值

Redis 启动脚本

#!/bin/bash

# Init file for redis

# chkconfig: 2345 80 12

# description: redis daemon

# processname: redis

# config: /usr/local/redis/redis.conf

# pidfile: /var/run/redis.pid

source /etc/init.d/functions

BIN=”/usr/local/redis/bin”

CONF=”/usr/local/redis/{{name}}/redis.conf”

PIDFILE=”/var/run/{{name}}.pid”

### Read configuration

[-r “$SYSCONFIG”] && source “$SYSCONFIG”

RETVAL=0

prog=”redis-server”

desc=”Redis Server”

start() {

if [-e $PIDFILE];then

echo “$desc already running….”

exit 1

fi

echo -n $”Starting $desc: “

daemon $BIN/$prog $CONF

RETVAL=$?

echo

[$RETVAL -eq 0] && touch /var/lock/subsys/$prog

return $RETVAL

}

stop() {

echo -n $”Stop $desc: “

kill `cat $PIDFILE`

RETVAL=$?

echo

[$RETVAL -eq 0] && rm -f /var/lock/subsys/$prog $PIDFILE

return $RETVAL

}

restart() {

stop

start

}

case “$1” in

start)

start

;;

stop)

stop

;;

restart)

restart

;;

condrestart)

[-e /var/lock/subsys/$prog] && restart

RETVAL=$?

;;

status)

status $PIDFILE

RETVAL=$?

;;

*)

echo $”Usage: $0 {start|stop|restart|condrestart|status}”

RETVAL=1

esac

exit $RETVAL

redis 配置文件

daemonize yes

pidfile /var/run/{{name}}.pid

port {{port}}

timeout 0

tcp-keepalive 0

loglevel warning

logfile /opt/log/redis/{{name}}.log

databases 16

#save 900 1

#save 300 10

#save 60 10000

stop-writes-on-bgsave-error yes

rdbcompression yes

rdbchecksum yes

dbfilename {{name}}.rdb

dir /usr/local/redis/{{name}}

slave-serve-stale-data yes

slave-read-only yes

repl-disable-tcp-nodelay no

slave-priority 100

appendonly yes

appendfilename {{name}}.aof

appendfsync everysec

no-appendfsync-on-rewrite no

#auto-aof-rewrite-percentage 100

#auto-aof-rewrite-min-size 64mb

lua-time-limit 5000

slowlog-log-slower-than 10000

slowlog-max-len 128

hash-max-ziplist-entries 512

hash-max-ziplist-value 64

list-max-ziplist-entries 512

list-max-ziplist-value 64

set-max-intset-entries 512

zset-max-ziplist-entries 128

zset-max-ziplist-value 64

activerehashing yes

client-output-buffer-limit normal 0 0 0

client-output-buffer-limit slave 256mb 64mb 60

client-output-buffer-limit pubsub 32mb 8mb 60

hz 10

aof-rewrite-incremental-fsync yes

那么现在，只需要同步下去即可。

salt ‘test’ state.sls redis.install -> redis.install = /srv/salt/redis/install.sls 内容就是上面的 sls

内容是经过验证过的，如果有小细节地方麻烦给我留言，及时更正！！

既然能实现多实例 redis 部署，那么其他任何服务都是可以，关键在于这么使用。

顺便贴个 service.running 过程。方便大家理解。之前在部署时，出现客户端手工执行正确，但 saltstack 调用死活都不成功，告诉我已运行，且需要个状态。

其实这是 init 脚本缺了个 status 函数，saltstack 运行 service.running 先是执行 status，判断服务是否正在运行，未运行，那么立即 start，而探测已运行，则报服务已运行，需要个状态

启动过程

SaltStack 利用 pillar 实现 Redis 多实例部署

需求：基于业务环境，需在一台机器上部署 N 多 Redis 实例，之前部署只能实现部署单个 redis，在手工修改目录名字以区分不同 redis 实例，现想设计能部署一个 redis，剩余实例递增即可，以实现多实例部署。

设计：多 redis 启动只需要一个配置文件和启动脚本即可，而启动程序是不变的，那么我可以安装一个 redis，以 /usr/local/redis 目录为例，在目录下生成基于应用的 redis，下发对应的脚本到 /etc/init.d/，而配置文件做成模板化，变化参数通过 pillar 来渲染，例如 log name、pid name、data directory。

Redis 的详细介绍 ：请点这里
Redis 的下载地址 ：请点这里

推荐阅读：

Redis 集群明细文档 http://www.linuxidc.com/Linux/2013-09/90118.htm

Ubuntu 12.10 下安装 Redis（图文详解）+ Jedis 连接 Redis http://www.linuxidc.com/Linux/2013-06/85816.htm

Redis 系列 - 安装部署维护篇 http://www.linuxidc.com/Linux/2012-12/75627.htm

CentOS 6.3 安装 Redis http://www.linuxidc.com/Linux/2012-12/75314.htm

Redis 配置文件 redis.conf 详解 http://www.linuxidc.com/Linux/2013-11/92524.htm

note: 多实例部署，要涉及到多个脚本，想通过 salt 的 service.running 启动，那么必须要满足几个条件

1.rc.d/init.d 脚本

2. 脚本内容必须有 start、stop、status，status 必须有，因为 service 模块会先执行 status 来判定服务是否在运行，在执行启动

3. 脚本包含启动和关闭参数。Sxx、Kxx

整体目录结构如下