2月 20

切割日志,删除老日志,并列出慢日志

  之前的日志切割都是根据项目需要写的所以比较分散。现在把脚本整合到一个里面。为了能适应更多的系统还是用bash,通用性比较强。
  脚本可以用于切割mysql、php和tomcat的日志,但是不够严谨。在切割拷贝的时候会丢失很小的一部分,因为比例很小,所以我暂时忽略了。可以统计mysql和php的slow日志。脚本中会将慢日志打印到统一的一个文件中。脚本不涉及慢日志统计文件的发送部分。

#!/sh/bash
# -*- coding:utf-8 -*-
# --------------------------------
# Filename:    
# Revision:    1.0
# Date:        2014-02-18
# Author:      simonzhang
# Email:       simon-zzm@163.com
# --------------------------------

# base setting
# 建议使用绝对路径
base_src=`pwd`
# slow log
# 列出统计的前10条最慢的日志
top=10
# Log deleted 10 days ago
drop_day=10
# log path.
# 如果为空,则跳过此类日志。如果有多处日志,则双引号写多条,以空格分隔。
mysql_log_dir=("/program/mysql4/data" "/program/mysql5/data")
php_log_dir=()
tomcat_log_dir=()
# soft path
mysql_bin='/program/mysql5/bin/'i
# log path
Log_Summary=$base_src\all_log_summary

# start 
# clear old log
date_dir=`date +%Y-%m-%d`
echo ''>$Log_Summary
echo $(get_date)' ''Handle log'>>$Log_Summary
echo '============================='>>$Log_Summary
echo ''>>$Log_Summary

# mysql log 
for (( i=0 ; i<${#mysql_log_dir[@]} ; i++ ))
do
    if [ -f ${mysql_log_dir[i]}\/slow_queries ]; then
        cd ${mysql_log_dir[i]}
        /bin/cp slow_queries  slow_queries_${date_dir}
        /bin/echo '' > slow_queries
        find -ctime +$drop_day -name slow_queries_\*  -exec rm -rf {} \;
        echo ${mysql_log_dir[i]}>>$Log_Summary
        $mysql_bin\mysqldumpslow -t $top -r -s at slow_queries_${date_dir}>>$Log_Summary
        echo '============================='>>$Log_Summary
        echo ''>>$Log_Summary
    fi
done

# php log
for (( i=0 ; i<${#php_log_dir[@]} ; i++ ))
do
    if [ -f ${php_log_dir[i]}\/slow.log ]; then
        cd ${php_log_dir[i]}
        /bin/cp slow.log  slow_${date_dir}.log
        /bin/echo '' > slow.log
        find -ctime +$drop_day -name slow_\*  -exec rm -rf {} \;
        echo ${php_log_dir[i]}>>$Log_Summary
        /bin/cat slow_${date_dir}.log|grep "\/[a-zA-Z].*[0-9]$"|awk ' ''{print $3}'|sort -r |uniq -c|sort -k1 -n -r|head -${top} >> $Log_Summary 
        echo '============================='>>$Log_Summary
        echo ''>>$Log_Summary
    fi
done

# tomcat log
for (( i=0 ; i<${#tomcat_log_dir[@]} ; i++ ))
do
    if [ -f ${tomcat_log_dir[i]}\/catalina.out ]; then
        cd ${tomcat_log_dir[i]}
        /bin/cp catalina.out  catalina_${date_dir}.out
        /bin/echo '' > catalina.out
        find -ctime +$drop_day -name catalina_\*  -exec rm -rf {} \;
    fi
done
1月 28

读《IT管理体系》

  分类介绍了IT的架构和管理体系,对于体系中各个环节都进行了详细的说明和深入的研究。对治理、管理、战略的不同层次的知识也都有涉及,适应多种人群阅读。
  理论性太强的书适合借鉴,不能照搬,项目总是千差万别的。这个体系缺失很完善,对于超极大鳄们很有好处,但是对于大部分公司如果都按正规体系做,恐怕只有死路一条。仁者见仁智者见智。
image

1月 27

Raspberry pi 软件模拟PWM

  Raspberry pi 只有一个PWM。看到国外高手有人用软件模拟PWM。我也测试一下。以下部分只是测试记录,文档和代码均来自官方网站。

使用root用户安装softpwm,这个安装记录直接拷贝到系统里运行成功就行。
apt-get -y update
apt-get -y upgrade
apt-get install -y devscripts build-essential fakeroot dh-make mercurial dh-make
apt-get install -y devscripts build-essential fakeroot
mkdir temp
cd temp
hg clone http://hg.code.sf.net/p/raspberry-gpio-python/code raspberry-gpio-python -r 0.5.4
cd raspberry-gpio-python
python setup.py sdist
cd dist/
tar xvfz RPi.GPIO-0.5.4.tar.gz
mv RPi.GPIO-0.5.4 rpi.gpio-0.5.4
cd rpi.gpio-0.5.4
dh_make -s -f ../RPi.GPIO-0.5.4.tar.gz
rm -rf debian
cp -a ../../debian/ ./
debuild -us -uc
debuild clean
python setup.py install

测试代码如下,使用LED小灯测试:

#!/bin/env python
# -*-coding:utf-8 -*-
import time
import RPi.GPIO as GPIO
GPIO.setmode(GPIO.BCM)
GPIO.setup(7, GPIO.OUT)

p = GPIO.PWM(7, 50)  #frequency=100Hz
p.start(0)
try:
    while 1:
        for dc in range(0, 101, 5):
            p.ChangeDutyCycle(dc)
            time.sleep(0.1)
        for dc in range(100, -1, -5):
            p.ChangeDutyCycle(dc)
            time.sleep(0.1)
except KeyboardInterrupt:
    pass
p.stop()
GPIO.cleanup()

来源
http://sourceforge.net/p/raspberry-gpio-python/wiki/PWM/

1月 14

读《网站运维》

  十分推荐。和以往看过的技术书不同。并不是各种测评,然后各种第三方软件的安装和配置的罗列。
  读此书就像听一位老技术高手讲自己经历的故事一样。让运维人员从思想提高,更深入的了解更多的处理业务的思路。
image