运维进行时

分页： 7/121

2 3 4 5 6 7 8 9 10 11

[ 显示模式：摘要 | 列表 ]

Docker远程python API操作容器一例[原创]

刘天斯 , 2014/09/08 23:48 , Docker , 评论(6) , 阅读(40316) , Via 本站原创

Docker-py作为官方推出的客户端API，功能可以满足我们大部分操作需求，API涉及镜像(images)及容器(CONTAINER)的功能操作，利用docker-py可以轻松开发出Docker的管理平台，以便维护大规模的Docker集群，本文介绍如何通过DockerFile创建一个WEB服务的镜像，再通过远程API对容器进行管理。

一、环境准备
1、环境说明
192.168.1.20 #Docker python API主机
192.168.1.22 #Docker服务主机
2、Docker环境部署(略)
3、修改自启动服务文件，支持远程TCP接口与本地SOCK连接；
# vi /etc/init.d/docker
#service docker restart

二、创建镜像
1、获取最新的centos镜像
# docker pull centos:latest
2、编写Dockerfile（支持apache+ssh服务）
# mkdir /home/Dockerfile/webserver
# cd /home/Dockerfile/webserver
# vi Dockerfile

通过supervisord来维护Docker容器中服务进程，编写supervisord.conf
# vi supervisord.conf

创建镜像，运行：
# docker build -t yorko/webserver:v1 .
注：最后有一个“.”，别遗漏。

镜像生成完毕后运行docker images查看，见下图：

三、编写操作API
登录192.168.1.20服务器
# mkdir /home/test/docker-py
# cd /home/test/docker-py
1、安装docker-py
# wget https://github.com/docker/docker-py/archive/master.zip
# unzip master
# cd docker-py-master/
# python setup.py install
如正常导入模块（import docker）说明安装成功。

2、创建容器docker_create.py

3、运行容器docker_start.py

4、运行
# python docker_create.py
# python docker_start.py
更多API参考https://github.com/docker/docker-py

5、在Docker主机观察结果，见下图：

三、校验服务
1、校验SSH服务

2、校验WEB服务

3、检查数据卷

基于saltstack实现的配置集中化管理[原创]

刘天斯 , 2013/08/26 22:39 , saltstack , 评论(17) , 阅读(74518) , Via 本站原创

    Saltstack是一个具备puppet与func功能为一身的集中化管理平台，saltstack基于python实现，功能十分强大，各模块融合度及复用性极高，官方极力推荐作为云计算平台的基础架构。轻松维护成千上万台服务器不是问题，现分享作者基于saltstack实现一个集中化的配置管理平台，以Nginx配置例子展开，涉及salt的grains、grains_module、pillar、States、jinja（template）等，本文适合有salt基础的同学阅读。
一、设备环境说明
    有两组web业务服务器，组名分别为web1group与web2group，设备硬件配置、web根目录存在异常，见下图：

二、master配置说明
1、关键配置定义：

2、定义的文件树结构（具体文件后续说明）

三、自定义grains_module
1）#vi /srv/salt/_grains/nginx_config.py

2)同步grains模块
salt '*' saltutil.sync_all

3)刷新模块(让minion编译模块)
salt '*' sys.reload_modules

4)验证max_open_file key的value
[root@SN2013-08-020 _grains]# salt '*' grains.item max_open_file
SN2013-08-022:
  max_open_file: 1024
SN2013-08-021:
  max_open_file: 1024
SN2012-07-011:
  max_open_file: 1024
SN2012-07-012:
  max_open_file: 1024
SN2012-07-010:
  max_open_file: 1024

四、配置pillar
    本例使用分组规则定义pillar，即不同分组引用各自的sls属性
1)定义入口top.sls
#vi /srv/pillar/top.sls

2)定义私有配置，本例只配置web_root的数据，当然可以根据不同需求进行定制，格式为python的字典形式，即"key:value"。
#vi /srv/pillar/web1server.sls

#vi /srv/pillar/web2server.sls

3）验证配置结果：
#salt 'SN2013-08-021' pillar.data nginx
SN2013-08-021:
    ----------
    root:
        /data

#salt 'SN2012-07-010' pillar.data nginx
SN2012-07-010:
    ----------
    root:
        /www

五、配置States
1）定义入口top.sls
#vi /srv/salt/top.sls

2)定义nginx配置及重启服务SLS,其中salt://nginx/nginx.conf为配置模板文件位置。
#vi /srv/salt/nginx.sls

3）Nginx配置文件（引用jinja模板）
功能点：
1、worker_processes参数采用grains['num_cpus'] 上报值（与设备CPU核数一致）；
2、worker_cpu_affinity分配多核CPU根据当前设备核数进行匹配，分别为2\4\8\其它核；
3、worker_rlimit_nofile参数与grains['max_open_file'] 获取的系统ulimit -n一致；
4、worker_connections 参数理论上为grains['max_open_file']；
5、 root参数为定制的pillar['nginx']['root']值。
#vi /srv/salt/nginx/nginx.conf

# For more information on configuration, see:
user              nginx;
worker_processes  {{ grains['num_cpus'] }};
{% if grains['num_cpus'] == 2 %}
worker_cpu_affinity 01 10;
{% elif grains['num_cpus'] == 4 %}
worker_cpu_affinity 1000 0100 0010 0001;
{% elif grains['num_cpus'] >= 8 %}
worker_cpu_affinity 00000001 00000010 00000100 00001000 00010000 00100000 01000000 10000000;
{% else %}
worker_cpu_affinity 1000 0100 0010 0001;
{% endif %}
worker_rlimit_nofile {{ grains['max_open_file'] }};

error_log  /var/log/nginx/error.log;
#error_log  /var/log/nginx/error.log  notice;
#error_log  /var/log/nginx/error.log  info;

pid        /var/run/nginx.pid;

events {
    worker_connections  {{ grains['max_open_file'] }};
}

http {
    include       /etc/nginx/mime.types;
    default_type  application/octet-stream;

log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
                      '$status $body_bytes_sent "$http_referer" '
                      '"$http_user_agent" "$http_x_forwarded_for"';

access_log  /var/log/nginx/access.log  main;

sendfile        on;
    #tcp_nopush     on;

#keepalive_timeout  0;
    keepalive_timeout  65;

#gzip  on;
    
    # Load config files from the /etc/nginx/conf.d directory
    # The default server is in conf.d/default.conf
    #include /etc/nginx/conf.d/*.conf;
    server {
        listen       80 default_server;
        server_name  _;

#charset koi8-r;

#access_log  logs/host.access.log  main;

location / {
            root   {{ pillar['nginx']['root'] }};
            index  index.html index.htm;
        }

error_page  404              /404.html;
        location = /404.html {
            root   /usr/share/nginx/html;
        }

# redirect server error pages to the static page /50x.html
        #
        error_page   500 502 503 504  /50x.html;
        location = /50x.html {
            root   /usr/share/nginx/html;
        }

}

4)同步配置
#salt '*' state.highstate