首页 > 其他 > 详细

Saltstack自动化扩容

时间：2019-02-27 17:02:46      阅读：166      评论：0      收藏：0      [点我收藏+]

一. etcd服务的安装和使用

1.安装etcd应用：

wget https://github.com/coreos/etcd/releases/download/v2.2.5/etcd-v2.2.5-linux-amd64.tar.gz -O etcd-v2.2.5-linux-amd64.tar.gz
tar -zxvf etcd-v2.2.5-linux-amd64.tar.g
cp etcd etcdctl /usr/local/bin/

2.启动etcd服务：

mkdir -p /data/etcd    #创建数据存储目录
nohup etcd -name auto_scale --data-dir /data/etcd/      --listen-peer-urls ‘http://172.16.1.211:2380,http://172.16.1.211:7001‘      --listen-client-urls ‘http://172.16.1.211:2379,http://172.16.1.211:4001‘      --advertise-client-urls ‘http://172.16.1.211:2379,http://172.16.1.211:4001‘ &

3.提交key到etcd中：

curl -s http://172.16.1.211:2379/v2/keys/message -XPUT -d value="hello world" | python -m json.tool   #结果通过python的json模块转义输出，增加可读性。

4.获取刚才提交的key值：

curl -s http://172.16.1.211:2379/v2/keys/message | python -m json.tool

5.删除刚才提交的key：

curl -s http://172.16.1.211:2379/v2/keys/message -XDELETE | python -m json.tool

6.提交带10秒过期时间的key：

curl -s http://172.16.1.211:2379/v2/keys/ttl_use -XPUT -d value="hello world 1" -d ttl=10 | python -m json.tool

二. 实现Salt自动化让Haproxy扩容

1.配置salt的pillar连接etcd：

yum install python-pip 
pip install python-etcd #安装python的etcd包 
vim /etc/salt/master
#底部添加
etcd_pillar_config:
  etcd.host: 172.16.1.211
  etcd.port: 4001

ext_pillar:
  - etcd: etcd_pillar_config root=/salt/haproxy/   #root参数是指定etcd里面的目录

2.测试通过salt获取pillar:

curl -s http://172.16.1.211:2379/v2/keys/salt/haproxy/backend_www_wmj_com/web-node1 -XPUT -d value="172.16.1.213:8080" | python -m json.tool

salt ‘*‘ pillar.item

3.让salt模板自动添加haproxy的backend：

vim /srv/salt/prod/cluster/files/haproxy-outside.cfg

#server web-node1  172.16.1.213:8080 check inter 2000 rise 30 fall 15
#使用for循环获取etcd的key值
{% for web,web_ip in pillar.backend_www_wmj_com.iteritems() %} server {{ web }} {{ web_ip }} check inter 2000 rise 30 fall 15 {% endfor %}

4.添加一台haproxy的节点：

curl -s http://172.16.1.211:2379/v2/keys/salt/haproxy/backend_www_wmj_com/web-node3 -XPUT -d value="172.16.1.215:8080" | python -m json.tool
salt ‘*‘ state.sls cluster.haproxy-outside env=prod

5.简单的自动化扩容脚本：

#!/bin/bash
create_host(){
        echo "create host"
}
deploy_service(){
        salt ‘*‘ state.sls nginx.install env=prod
}
deploy_code(){
        echo "deploy code ok"
}
service_check(){
        STATUS=$(curl -s --head http://172.16.1.213:8080/ | grep ‘200 OK‘)
        if [ -n "$STATUS" ];then
                echo "HTTP ok"
        else
                echo "HTTP not ok"
                exit 1
        fi
}
etcd_key(){
        curl -s http://172.16.1.211:2379/v2/keys/salt/haproxy/backend_www_wmj_com/web-node4 -XPUT -d value="172.16.1.213:8080"
}
sync_state(){
        salt ‘*‘ state.sls cluster.haproxy-outside env=prod
}
main(){
        create_host
       deploy_service
        deploy_code
        service_check
        etcd_key
        sync_state
}
main

############################################################################################

案例：当nginx的并发达到3000，并持续了一段时间时，通过自动化创建一台虚拟机，部署应用最后添加到集群提供服务：
　　zabbix监控（nginx并发量）-------》action-------》创建了一台主机/docker容器-------》部署服务--------》部署应用代码-------》测试状态--------》加入到集群---------》加入监控----------》通知
简单实现上面中的某些步骤：为集群添加一个后端节点以提供服务
为了实现上面功能，这里采用salstack+etcd
安装etcd：
?
1
2
3
[root@node1 src]# tar xf etcd-v3.2.9-linux-amd64.tar.gz
cd etcd-v3.2.9-linux-amd64
cp etcd etcdctl /usr/local/bin/

 然后开启etcd集群：

　　1、首先创建数据目录：mkdir /data/etcd -p

　　2、开启服务：

?
1
nohup etcd --name auto_scale --data-dir /data/etcd/ --listen-peer-urls http://192.168.44.134:2380,http://192.168.44.134:7001 --listen-client-urls http://192.168.44.134:2379,http://192.168.44.134:4001 --advertise-client-urls http://192.168.44.134:2379,http://192.168.44.134:4001 &

 

?
1
2
3
4
5
[root@node1 ~]# netstat -tunlp|grep etcd
tcp        0      0 192.168.44.134:2379         0.0.0.0:*                   LISTEN      52094/etcd         
tcp        0      0 192.168.44.134:2380         0.0.0.0:*                   LISTEN      52094/etcd         
tcp        0      0 192.168.44.134:7001         0.0.0.0:*                   LISTEN      52094/etcd         
tcp        0      0 192.168.44.134:4001         0.0.0.0:*                   LISTEN      52094/etcd

 1、创建一个key/value

?
1
[root@node1 ~]# curl -s http://192.168.44.134:2379/v2/keys/key1 -XPUT -d value="Hello world"

 2、获取创建的key/value

?
1
[root@node1 ~]# curl -s http://192.168.44.134:2379/v2/keys/salt/haproxy/backend_www/www1

 3、删除创建的key/value

?
1
[root@node1 ~]# curl -s http://192.168.44.134:2379/v2/keys/key1 -XDELETE

 或者将上面的输出结果以json格式输出：

?
1
2
3
4
5
6
7
8
9
10
[root@node1 ~]# curl -s http://192.168.44.134:2379/v2/keys/salt/haproxy/backend_www/www1|python -m json.tool
{
    "action": "get",
    "node": {
        "createdIndex": 9,
        "key": "/salt/haproxy/backend_www/www1",
        "modifiedIndex": 9,
        "value": "192.168.44.134:8080"
    }
}

 将etcd配置在saltstack中，结合使用：

1、首先需要安装依赖包：

　　yum install python-pip
　　pip install python-etcd
2、将etcd配置在salt中：在master配置文件中设置
?
1
2
3
4
5
6
7
####config etcd
my_etcd_config:
  etcd.host: 192.168.44.134
  etcd.port: 4001
 
ext_pillar:
  - etcd: my_etcd_config root=/salt/haproxy

 3、重启master

?
1
[root@node1 ~]# /etc/init.d/salt-master restart

 

?
1
2
3
4
5
6
7
8
9
10
11
12
13
[root@node1 ~]# salt ‘*‘ pillar.items
node2:
    ----------
    backend_www:
        ----------
    zabbix-agent:
        ----------
        Zabbix_Server:
            192.168.44.134
    zabbix-agent-host:
        ----------
        zabbix_host:
            node2

 现在通过添加etcd的key来增加haproxy后端的节点服务器：

1、设置etcd的key
?
1
curl -s http://192.168.44.134:2379/v2/keys/salt/haproxy/backend_www/www1 -XPUT -d value="192.168.44.134:8081"|python -m json.tool

 2、查看pillar

?
1
2
3
4
5
6
7
[root@node1 ~]# salt ‘*‘ pillar.items
node1:
    ----------
    backend_www:
        ----------
        www1:
            192.168.44.134:8081

 3、修改haproxy配置文件：vim /srv/salt/prod/cluster/files/haproxy-outside.cfg

?
1
2
3
{% for www,www_ip in pillar.backend_www.iteritems() %}
server {{ www }} {{ www_ip }} check inter 1000
{% endfor %}

 4、修改haproxy状态配置文件：vim /srv/salt/prod/cluster/haproxy-outside.sls

?
1
2
3
4
5
6
7
8
haproxy-service:
  file.managed:
    - name: /etc/haproxy/haproxy.cfg
    - source: salt://cluster/files/haproxy-outside.cfg
    - user: root
    - group: root
    - mode: 644
    - template: jinja         新增一行，使用jinja模板，使用变量

 测试并验证：

由于etcd仅仅只是设置了一个key：
www1:192.168.44.134:8081
所以后端只有一个节点：
技术分享图片
现在为haproxy后端新增节点www2和www3：
?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
[root@node1 ~]# curl -s http://192.168.44.134:2379/v2/keys/salt/haproxy/backend_www/www2 -XPUT -d value="192.168.44.134:8080"|python -m json.tool
{
    "action": "set",
    "node": {
        "createdIndex": 14,
        "key": "/salt/haproxy/backend_www/www2",
        "modifiedIndex": 14,
        "value": "192.168.44.134:8080"
    }
}
[root@node1 ~]# curl -s http://192.168.44.134:2379/v2/keys/salt/haproxy/backend_www/www3 -XPUT -d value="192.168.44.135:8080"|python -m json.tool 
{
    "action": "set",
    "node": {
        "createdIndex": 15,
        "key": "/salt/haproxy/backend_www/www3",
        "modifiedIndex": 15,
        "value": "192.168.44.135:8080"
    }
}

 查看设置的pillar：

?
1
2
3
4
5
6
7
8
9
10
11
[root@node1 ~]# salt ‘*‘ pillar.items
node2:
    ----------
    backend_www:
        ----------
        www1:
            192.168.44.134:8081
        www2:
            192.168.44.134:8080
        www3:
            192.168.44.135:8080

 执行salt状态配置文件：

添加完成后，默认不会进行增加，需要执行状态配置文件（随着配置文件修改会reload服务）
salt ‘*‘ state.highstate
然后进行查看节点状态以及个数：
技术分享图片

 

Saltstack自动化扩容

原文：https://www.cnblogs.com/wuhg/p/10444749.html
踩
(0)
赞
(0)
   
举报
评论 一句话评论（0）
分享档案
更多>
2021年09月23日 (328)
2021年09月24日 (313)
2021年09月17日 (191)
2021年09月15日 (369)
2021年09月16日 (411)
2021年09月13日 (439)
2021年09月11日 (398)
2021年09月12日 (393)
2021年09月10日 (160)
2021年09月08日 (222)
最新文章
更多>
教程昨日排行
更多>
友情链接
汇智网   PHP教程   插件网  
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣，分享程序人生！