<![CDATA[运维进行时]]>

<![CDATA[运维进行时]]> https://blog.liuts.com/index.php zh-cn https://blog.liuts.com/post/208/ <![CDATA[译文-Symbolic一个基于func集中式管理平台[原创]]]> 刘天斯 <liutiansi@gmail.com> Fri, 23 Jul 2010 16:27:31 +0000 https://blog.liuts.com/post/208/ Symbolic是一个开源的企业平台，旨在建立、配置和管理您的庞大分布式数据中心为目的开源框架，代表了目前最先进的数据中心解决方案的集中管理平台。

特征
1、属于RedHat认证协议栈的应用
2、具于func后端应用
3、支持 RHEL、Centos及Fedora
4、先进的拖放标签管理(Ajax)
5、提供Cobbler支持
6、灵活管理操作用户、主机
7、组和权限管理标记
8、先进的基于Web的Ajax接口
9、支持LDAP，Kerberos和本地认证
10、符合JEE标准
11、完全可定制的业务
12、灵活的管理用户和主机
13、安全的SSL连接
14、虚拟机管理
15、可定制的插件支持
16、执行各种语言编写的外部脚本（Python、Groovy、bashshell）

平台截图

如何部署平台？
192.168.0.1 symbolic.example.com - Symbolic Machine (管理端)
192.168.0.2 station1.example.com - Symbolic Client (被控端)

平台架构图

1、如没有内部DNS服务器，需要修改hosts

引用

echo "127.0.0.1     localhost.localdomain    localhost            " >  /etc/hosts
echo "192.168.0.1   symbolic.example.com     symbolic   certmaster" >> /etc/hosts
echo "192.168.0.2   station1.example.com     station1             " >> /etc/hosts

2、安装EPEL包

引用

rpm -Uvh http://download.fedora.redhat.com/pub/epel/5/i386/epel-release-5-3.noarch.rpm

3、安装Certmaster and Func

引用

yum install certmaster func smolt

注：也可参考源码安装方式
4、启用端口，记得在防火墙开启以下端口

引用

51235/TCP on symbolic.example.com
51234/TCP on symbolic.example.com
51234/TCP on station1.example.com

5、配置func日志分隔
#vi /etc/logrotate.d/func_rotate

引用

/var/log/func/audit.log {
   missingok
   notifempty
   rotate 4
   weekly
   postrotate
      if [ -f /var/lock/subsys/funcd ]; then
         /etc/init.d/funcd condrestart
      fi
   endscript
}

/var/log/func/func.log {
   missingok
   notifempty
   copytruncate
   rotate 4
   weekly
}

6、配置Certmaster及func

引用

#chkconfig certmaster on
#service certmaster start

#chkconfig funcd on
#service funcd start

7、查看被控端认证请求

certmaster-ca --list

引用

[root@symbolic ~]# certmaster-ca --list
symbolic.example.com

8、认证主机

引用

#certmaster-ca --sign symbolic.example.com

9、下载并安装Symbolic

引用

wget http://downloads.sourceforge.net/symbolic/symbolic-{VERSION}.noarch.rpm
yum --nogpgcheck localinstall symbolic-{VERSION}.noarch.rpm

10、配置JAVA_HOME

引用

#vi /etc/sysconfig/symbolic
...
JAVA_HOME="/usr/lib/jvm/java-1.6.0-openjdk-1.6.0.0"
...

11、配置启用symbolic

引用

#symbolic-setup
#service symbolic start
#chkconfig symbolic on

12、完毕，访问平台
http://symbolic.example.com:8081/symbolic
Username: root
Password: pass

如何添加主机？
1、安装EPEL包

引用

rpm -Uvh http://download.fedora.redhat.com/pub/epel/5/i386/epel-release-5-3.noarch.rpm

2、安装Func与Smolt

引用

yum install func smolt

3、配置hosts

引用

4、配置客户端certmaster配置
#vi /etc/certmaster/minion.conf

引用

# configuration for minions
[main]
certmaster = symbolic.example.com
log_level = DEBUG
cert_dir = /etc/pki/certmaster

5、启动func服务

引用

chkconfig funcd on
service funcd start

6、到服务器主进行认证，方法见部署平台第8点。在平台Admin → Reload Certs可以看到请求的主机清单。

在线文档V1.5.0
http://www.opensymbolic.org/sites/opensymbolic.org/files/docs/v1.5.0/html/index.html

译文：http://www.opensymbolic.org/sites/opensymbolic.org/files/docs/v1.2.1/html/Symbolic-Tutorial.html#Symbolic-Tutorial-Server_Configuration
Tags - symbolic , func ]]> https://blog.liuts.com/post/200/ <![CDATA[Func非Python API实现远程调用[原创]]]> 刘天斯 <liutiansi@gmail.com> Wed, 02 Jun 2010 04:04:26 +0000 https://blog.liuts.com/post/200/ YAML格式
#vi run.yaml

JSON格式
#vi run.json

参数说明
clients    目标主机，"*"代码所有被控主机。
async     是否异步，是一个bool值，True为使用异步，False则不使用。
nforks    启用的线程数，用数字表示。
module  模块名称，如command。
method  方法名称，如command模块下的run方法。
parameters  参数，如"/usr/bin/tail -100 /var/log/messages"。

运行结果
func-transmit --json < run.json

引用

{"SERVER-005": "Hello World www.tianya.cn", "SERVER-004": "Hello World www.tianya.cn", "SERVER-001": "Hello World www.tianya.cn", "SERVER-003": "Hello World www.tianya.cn", "SERVER-002": "Hello World www.tianya.cn"}

func-transmit --yaml < run.yaml

引用

---
SERVER-001: Hello World www.tianya.cn
SERVER-002: Hello World www.tianya.cn
SERVER-003: Hello World www.tianya.cn
SERVER-004: Hello World www.tianya.cn
SERVER-005: Hello World www.tianya.cn

从运行结果可以看出，根据不同的接口格式能返回相应的结果。此时输出的YAML与JSON格式能够被绝大多数的语言识别，接下来就可以做一些后续的处理了。
Tags - func , func-transmit ]]> https://blog.liuts.com/post/199/ <![CDATA[编写Func自定义模块[原创]]]> 刘天斯 <liutiansi@gmail.com> Mon, 31 May 2010 03:54:17 +0000 https://blog.liuts.com/post/199/ Func是目前redhat系列平台最棒的集群管理工具(个人看法)，发现越来越多的人已经开始在使用，从接触的大部分人都会说自带的模块已经够用了。其实在我们的日常维护当中，尤其是大规模的服务器集群、满天飞的业务系统等等。此时Func自带的模块已经远远不能满足我们的需求，现介绍Func是如何实现一个简单的自定义模块的。

[方法一]
通过CommandModule来实现,只需修改要运行命令参数就可以了。

优点：简单、部署方便；
缺点：不够灵活，扩展性弱；
适合场景：中小型集群;

命令方式：

python api方式：

[方法二]
通过编写func模块来达到扩展的目的。

优点：可以根据自身的应用特点定制，扩展性非常强；
缺点：复杂、部署不够方便；
适合场景：大型集群;

操作：
1、模块存放位置说明
/usr/local/lib/python2.5/site-packages/func/minion/modules/(源码安装位置)
or
/usr/local/python2.5/site-packages/func/minion/modules/(rpm或yum安装默认位置)

2、func-create-module 建模块工具
填写相关项，比较简单就不一一说明了。
#cd /usr/local/lib/python2.5/site-packages/func/minion/modules
#func-create-module

引用

Module Name: MyModule
Description: My module for func.
Author: liutiansi
Email: liutiansi@gmail.com

Leave blank to finish.
Method: echo
Method:
Your module is ready to be hacked on. Wrote out to mymodule.py.

3、编写模块代码
#vi mymodule.py

系统已经帮我们自动生成了一些初始化代码，只需在此基础上做修改就可以了。如简单根据我们指定的条数返回最新系统日志,修改后的代码如下：

4、编写模块分发功能
＃cd ~
#vi RsyncModule.py

＃python RsyncModule.py mymodule.py

引用

{'NN-server1': 1}
{'NN-server1': [0, 'Stopping func daemon: \nStarting func daemon: \n', '']}
................

5、模块调用
func -t 10 "*" call mymodule echo 10

引用

{'NN-server1': [0,
'May 30 04:02:06 SN2010-04-020 syslogd 1.4.1: restart.\n',
'']}

大功告成！

如大家有什么疑问或感兴趣的话题可以通过weibo与我交流：http://t.qq.com/yorkoliu
Tags - func , 模块 ]]> https://blog.liuts.com/post/186/ <![CDATA[部署Func/Certmaster平台[原创]]]> 刘天斯 <liutiansi@gmail.com> Wed, 10 Mar 2010 03:40:19 +0000 https://blog.liuts.com/post/186/ Func简介
      Func是由红帽子公司以Fedora平台统一网络控制器 Func（Fedora Unified Network Controller https://fedorahosted.org/func），目的是为了解决这一系列统一管理监控问题而设计开发的系统管理基础框架。它是一个能有效的简化我们多服务器系统管理工作的工具，它很容易学习、很容易使用、也很容易被扩展，它功能强大而我们只需要非常非常少的配置和维护。
    Func分为master及slave两部分，master为主控端，slave为被控端。以下为两部分的安装配置说明
    FUNC模块学习笔记
========================Func 2.5版本安装文档[Master]=========================
环境要求

引用

Linux2.6内核
python2.5或以上(建议源码安装，系统自带的python2.3、2.4对func支持不好)

下载软件包

引用

wget http://people.fedoraproject.org/~alikins/files/certmaster/certmaster-0.25.tar.gz
wget http://people.fedoraproject.org/~alikins/files/func/func-0.25.tar.gz
wget http://ovh.dl.sourceforge.net/sourceforge/pyopenssl/pyOpenSSL-0.9.tar.gz

安装

引用

tar -zxvf pyOpenSSL-0.9.tar.gz
cd pyOpenSSL-0.9
/usr/local/bin/python setup.py install

tar -zxvf certmaster-0.25.tar.gz
cd certmaster-0.25
/usr/local/bin/python setup.py install

tar -zxvf func-0.25.tar.gz
cd func-0.25
/usr/local/bin/python setup.py install安装

ln -s /usr/local/bin/certmaster /usr/bin/certmaster
ln -s /usr/local/bin/certmaster-request /usr/bin/certmaster-request
ln -s /usr/local/bin/certmaster-ca /usr/bin/certmaster-ca
ln -s /usr/local/bin/certmaster-sync /usr/bin/certmaster-sync

ln -s /usr/local/bin/funcd /usr/bin/funcd
ln -s /usr/local/bin/func /usr/bin/func
ln -s /usr/local/bin/func-create-module /usr/bin/func-create-module
ln -s /usr/local/bin/func-inventory /usr/bin/func-inventory
ln -s /usr/local/bin/func-transmit /usr/bin/func-transmit
ln -s /usr/local/bin/func-build-map /usr/bin/func-build-map

配置

引用

vi /etc/certmaster/certmaster.conf
[main]
autosign = no
listen_addr =

#证书交换通讯端口
listen_port = 1998

cadir = /etc/pki/certmaster/ca
cert_dir = /etc/pki/certmaster
certroot = /var/lib/certmaster/certmaster/certs
csrroot = /var/lib/certmaster/certmaster/csrs
cert_extension = cert
sync_certs = False

vi /etc/func/minion.conf
[main]
log_level = DEBUG
acl_dir = /etc/func/minion-acl.d

listen_addr =

#(Func通讯端口
listen_port = 1999
minion_name =

启动服务
service certmaster start

=============================2.5版本安装文档[slave]=========================
下载软件包

引用

安装

引用

配置

引用

vi /etc/certmaster/certmaster.conf
[main]
autosign = no
listen_addr =

#与master端口保持一致
listen_port = 1998
cadir = /etc/pki/certmaster/ca
cert_dir = /etc/pki/certmaster
certroot = /var/lib/certmaster/certmaster/certs
csrroot = /var/lib/certmaster/certmaster/csrs
cert_extension = cert
sync_certs = False

vi /etc/certmaster/minion.conf
[main]
certmaster = func.master.server.com

#与master端口保持一致
certmaster_port = 1998
log_level = DEBUG
cert_dir = /etc/pki/certmaster

vi /etc/func/minion.conf
[main]
log_level = DEBUG
acl_dir = /etc/func/minion-acl.d

listen_addr =

#与master端口保持一致
listen_port = 1999

#slave主机名
minion_name =NN2007-08-048

启动服务
/sbin/chkconfig --level 345 certmaster on
/sbin/service certmaster start

/sbin/chkconfig --level 345 funcd on
/sbin/service funcd start

*安装完毕后一定要重启服务器操作系统，不然服务器端有时看不到该主机的证书请求。

=============================Master端常用操作==============================

引用

func "*" call --forks="5" command run "date" 启用5个进程来执行date命令。
certmaster-ca --list 可以查看未签名的计算机名。
certmaster-ca --sign NN2004-02-008 对slave服务器进行签名(证书交换)。
certmaster-ca --sign `certmaster-ca --list ` 如证书请求的服务器比较多，可以这样一下子搞定。
certmaster-ca -c NN2004-02-008 删除该主机证书

=============================防火墙配置==============================

引用

Slave主机需对master开放1998(certmaster)、1999(func)端口
master需对所有Slave主机开放1998(certmaster)端口

如大家有什么疑问或感兴趣的话题可以通过weibo与我交流：http://t.qq.com/yorkoliu
Tags - func , certmaster ]]> https://blog.liuts.com/post/121/ <![CDATA[FUNC模块学习笔记[原创]]]> root <admin@yourname.com> Thu, 22 May 2008 13:23:42 +0000 https://blog.liuts.com/post/121/ -------------------------------------------------------------
功能：操作网桥
方法：
list() Returns a dictionary containing the bridges and their connected interfaces.
add_bridge(brname) Creates a new bridge named brname.
add_interface(brname, ifname) Adds interface ifname to bridge brname.
delete_bridge(brname) Deletes bridge brname.
delete_interface(brname, ifname) Removes interface ifname from bridge brname.
add_promisc_bridge(brname, ifname) Creates a new bridge brname, attaches interface ifname to it and sets the MAC address of the connected interface to FE:FF:FF:FF:FF:FF, so traffic can flow freely through the bridge. This is required for use with Xen.
up_bridge(brname) Marks bridge brname and all it's connected interfaces as up.
down_bridge(brname) Marks bridge brname and all it's connected interfaces as down
-------------------------------------------------------------

* CertMasterModule -- For power users out there, allows manipulating the certmaster from Func's API.
-------------------------------------------------------------
功能：Certmaster Module
方法：
添加/删除Certmaster客户端
get_hosts_to_sign(list_of_hosts)
sign_hosts(list_of_hosts)
cleanup_hosts(list_of_hosts)
-------------------------------------------------------------

* CommandModule -- Running Arbitrary Commands Like SSH Does
-------------------------------------------------------------
功能：命令行模板,在客户端运行命令行。
方法：
#exists方法：检测/bin/foo文件是否存在
func target.example.org call command exists /bin/foo

#运行该命令
func target.example.org call command run "/bin/foo arg1 arg2 arg3"
-------------------------------------------------------------

* CopyFileModule -- Copyfile File Copying and Checksumming
-------------------------------------------------------------
功能：文件同步模板,同步指定文件到客户端
方法：
func target.example.org copyfile -f localfile --remotepath /remotepath/filename

返回值说明：
# -1 = problem file was not copied
# 1 = file was copied
# 0 = file was not copied b/c file is unchanged
-------------------------------------------------------------

* FileTrackerModule -- tracks file changes, for use with FuncInventory
-------------------------------------------------------------
功能：跟踪模块，为了安全考虑，跟踪一些重要的文件的情况。
方法：
第一步,添加跟踪的文件或目录
# func "*" call filetracker track /etc/passwd 1
# func "dbservers*" call filetracker track /etc/foo
# func "webservers*" call filetracker track /tmp/bar
# func "*" call filetrack untrack /etc/bar
# func "*" call filetrack track "/etc/*" 1
1代表跟踪文件的更新变化。

第二步，查看跟踪结果
func "target.example.org" call filetracker inventory
-------------------------------------------------------------

* JBossModule -- monitoring and control jboss instances
-------------------------------------------------------------
功能：监控与操作JBOSS实例
方法：(略)
-------------------------------------------------------------

* IPtablesModule -- iptables management
-------------------------------------------------------------
功能：IPtables管理模板
方法：(略)
-------------------------------------------------------------

* HardwareModule -- Hardware Profilling
-------------------------------------------------------------
功能：硬件信息模板,显示CPU、驱动等等。
方法：
func target.example.org call hardware info
-------------------------------------------------------------

* MountModule -- mount, unmount, and query mounted resources
-------------------------------------------------------------
功能：挂载模板，挂载/unmount分区模板
方法：
func target.example.org call mount /dev/device /path/to/dir
-------------------------------------------------------------

* NagiosCheck -- be able to call Nagios plugins and get their results, without needing to install nagios. Works with any plugin
-------------------------------------------------------------
功能：Nagios检查模块
方法：(略)
-------------------------------------------------------------

* NetappModule -- Administer Netapp filers
-------------------------------------------------------------
功能：NetApp模块
方法：(略)
-------------------------------------------------------------

* NetworkTest -- Test out network stuff.
-------------------------------------------------------------
功能：网络测试模块
方法：
PING
#数字2为ping的次数
func tachikoman call networktest ping redhat.com -c 2

NETSTAT
func tachikoman call networktest netstat

traceroute
func tachikoman call networktest traceroute redhat.com -m 10

dig
func tachikoman call networktest dig redhat.com
-------------------------------------------------------------

* ProcessModule -- Process Info, memory usage, and Killing
-------------------------------------------------------------
功能：进程管理模块
方法：
#ps -aux等价
func target.example.org call process info "aux"

#显示全部进程使用内存情况，返回格式：[[Private, Shared, Total RAM used, Program], ... ]
func target.example.org call process mem

#pkill thunderbird进程，返回整形
func "*" call process pkill thunderbird -9

#kill firefox-bin进程，返回整形
func "*" call process kill firefox-bin SIGHUP

-------------------------------------------------------------

* ServiceModule -- Service Status and Control
-------------------------------------------------------------
功能：服务管理模块
方法：
func target.example.org call service start httpd
-------------------------------------------------------------

* SysctlModule -- Configure kernel parameters at runtime
-------------------------------------------------------------
功能：配置内核参数模块
方法：
func "*" call sysctl list
func "*" call sysctl get
func "*" call sysctl set

参数可以是：
'kernel.sched_latency_ns = 20000000',
'kernel.sched_wakeup_granularity_ns = 1000000',
'kernel.sched_batch_wakeup_granularity_ns = 25000000',
'kernel.sched_stat_granularity_ns = 0',
'kernel.sched_runtime_limit_ns = 20000000',
'kernel.sched_child_runs_first = 1',
'kernel.sched_features = 21',
'kernel.sched_compat_yield = 0',
'kernel.panic = 0',
'kernel.exec-shield = 1',
-------------------------------------------------------------

* RebootModule -- Reboot your system
-------------------------------------------------------------
功能：重启服务器模块
方法：
func target.example.org reboot.reboot
func target.example.org reboot.reboot now "Going down for a reboot"
返回值：
Integer. 0 == success.
-------------------------------------------------------------

* RpmModule -- for any distro that supports RPM, lists installed packages
-------------------------------------------------------------
功能：RPM管理模板
方法：
#返回一个已安装包的一个列表
func target.example.org call rpms inventory
-------------------------------------------------------------

* SmartModule -- Disk Smart (Hard Drive) Status
-------------------------------------------------------------
功能：Smart管理模板
方法：
#返回smart信息
func target.example.org call smart info
-------------------------------------------------------------

* UserModule -- we still need to implement this :)
-------------------------------------------------------------
功能：用户管理模板
方法：(略)
-------------------------------------------------------------

* VirtModule -- works with koan, KVM, Xen, etc
-------------------------------------------------------------
功能：Virt管理模板
方法：(略)
-------------------------------------------------------------

* VlanModule -- Simple VLAN management
-------------------------------------------------------------
功能：Vlan管理模板
方法：(略)
-------------------------------------------------------------

* YumModule -- for any distro that is yum based, installs packages
-------------------------------------------------------------
功能：yum管理模板
方法：
func target.example.org call yumcmd update
Tags - func , 学习笔记 ]]> https://blog.liuts.com/post/120/ <![CDATA[终于找到问题了(about func)]]> root <admin@yourname.com> Thu, 22 May 2008 13:21:41 +0000 https://blog.liuts.com/post/120/ 一、故障现象
1、在客户端安装好func及certmaster，配好certmaster参数。
2、service funcd start，端口及进程都起来了。
3、在certmaster server 运行certmaster-ca --list死活看不到客户端的主机名。
排查过程
1、将certmaster的主机名换成IP，无效。
2、更新客户端的func及certmaster版本，无效。
3、运行/usr/bin/certmaster-request，提示：socket.error: (111, 'Connection refused')，将certmaster修改成localhost就正常了。原因可以就在这里，因为certmaster是双向的，发现在/etc/hosts中有主机名指向127.0.0.1，此时连接不上certmaster server了。将/etc/hosts中的主机名删除，再用/usr/bin/certmaster-request来测试连接，成功！！在certmaster也能看到主机了，大功告成。

二、故障现象
#/usr/local/bin/certmaster-request 被控端证书请求
certificate does not match key (run certmaster-ca --clean first?)

排查过程
1、删除/etc/pki/certmaster/证书文件再试，无效
2、分别重启certmaster、funcd服务，无效
3、删除服务器证书文件.cert后再请求正常。
原因为主机名称发生变更时服务器端certmaster-ca -c "servername"没有成功删除.cert文件导致。

二、后续问题
1、ImportError: No module named dbm (NetSeek提供)
解决：
yum -y install gdbm gdbm-devel
Tags - func ]]>