使用SeasLog打造PHP项目中的高性能日志组件

网络 网络管理 网络运维
SeasLog是一个C语言编写的PHP扩展,在PHP项目中方便、规范、高效地写日志,以及快速地读取和查询日志。php内置了很多log函数,这些函数功能强大且性能极好,但由于各种缺陷,灵活度降低了很多,不能满足应用需求。那么如何打造PHP高性能日志组件呢?

什么是SeasLog

SeasLog是一个C语言编写的PHP扩展,提供一组规范标准的功能函数,在PHP项目中方便、规范、高效地写日志,以及快速地读取和查询日志。

为什么使用SeasLog

无论在什么应用中,log日志都是架构中不可缺少的一个重要组成部分,它通常是系统或软件、应用的运行记录。通过log的分析,可以方便用户了解系统或软件、应用的运行情况;如果你的应用log足够丰富,也可以分析以往用户的操作行为、类型喜好、地域分布或其他更多信息;如果一个应用的log同时也分了多个级别,那么可以很轻易地分析得到该应用的健康状况,及时发现问题并快速定位、解决问题,补救损失。

我们知道,php内置了很多log函数,如error_log、syslog、file_put_content,这些函数功能强大且性能极好,但由于各种缺陷(error_log、file_put_content无错误级别、无固定格式像是信马由缰随处乱画;syslog不区分模块、而且与系统日志混合,读syslog记录会让人抓狂的。),灵活度降低了很多,很不能满足应用需求。基本上所有的开发者,都会自行设计封装log库,当然也会有很多开发者选择已有的开源日志库。

也有很多开源log类库弥补了上述缺陷,如log4php、plog、Analog等(当然也有很多应用在项目中自己开发的log类)。其中以log4php最为著名,它的设计精良、格式***、文档完善、功能强大。但是经过测试,log4php的性能非常差。

用SeasLog打造PHP高性能日志组件

这是log4php与SeasLog的性能对比图:

设计思路

那么有没有一种log类库同时满足以下需求呢:

●分模块、分级别

●配置简单(***是勿须配置)

●日志格式清晰易读

●应用简单、性能很棒

我们知道,PSR-3标准是一个国际化的日志标准,它要求了“模块、级别、清晰、易用”等日志工作应具备的特点。因此,只要我们遵循了PSR-3标准,则我们可以完成“分模块、分级别”以及“日志格式清晰易读”的要求。

“配置简单”这个需求也很好完成。如果严格按照既定规则,其实只需要设置默认目录就可以了。

OK,现在我们只剩下“性能”这一个要求。

既然是日志,免不了会写文件,或者通过pipe通过网络传送到某个存储中心(我们暂不考虑存储中心的设计)。可以想见,假设一个请求中需要写出1000处log,那么势必会有1000次IO,这对性能将是一个很大的拖延点。一般对于处理这种多次相同的请求场景,我们要解决的其实也很简单,使用cache或buffer,把多次请求作归并,从而降低对磁盘或网络的IO,这是一个基本的思想。

SeasLog也是这么做的。设定一个buffer_size(默认100条log),使用PHP请求内存,每写一次log,塞入内存,同时buffer_size加;当buffer_size等于设置值时,则进行一次IO,同时清除buffer; 当然,如果请求结束了、或执行了die、exit或其他异常退出时,不管buffer_size有没有攒够设置值,立刻进行一次IO,同时清除buffer。

到目前为止,SeasLog的正式版本为1.1.6,采用Apache 2.0开源协议,同时可以在php.net官方,和Github库上获得它的完整代码。

Php.net http://pecl.php.net/package/seaslog

Github https://github.com/Neeke/SeasLog

目前提供了什么

●在PHP项目中便捷、规范地记录log

●可配置的默认log目录与模块

●指定log目录与获取当前配置

●初步的分析预警框架

●高效的日志缓冲、便捷的缓冲debug

●遵循 PSR-3 日志接口规范

怎么安装

获得源码后,可自行编译。

$ /path/to/phpize

$ ./configure --with-php-config=/path/to/php-config 

$ make && make install

当然,使用PECL管理工具会更方便: 

$ pecl install seaslog

seaslog.ini的配置

  1. ; configuration for php SeasLog module 
  2. extension = seaslog.so 
  3. seaslog.default_basepath = /log/seaslog-test    ;默认log根目录 
  4. seaslog.default_logger = default                ;默认logger目录 
  5. seaslog.disting_type = 1                            ;是否以type分文件 1是 0否(默认) 
  6. seaslog.disting_by_hour = 1                      ;是否每小时划分一个文件 1是 0否(默认) 
  7. seaslog.use_buffer = 1                              ;是否启用buffer 1是 0否(默认) 
  8. seaslog.buffer_size = 100                         ;buffer中缓冲数量 默认0(不使用buffer_size) 
  9. seaslog.level = 0                                       ;记录日志级别 默认0(所有日志) 

seaslog.disting_type = 1 开启以type分文件,即log文件区分info\warn\erro

seaslog.disting_by_hour = 1 开启每小时划分一个文件

seaslog.use_buffer = 1 开启buffer。默认关闭。当开启此项时,日志预存于内存,当请求结束时(或异常退出时)一次写入文件。

seaslog.buffer_size = 100 设置缓冲数量为100. 默认为0,即无缓冲数量限制.当buffer_size大于0时,缓冲量达到该值则写一次文件. 

seaslog.level = 3 记录的日志级别.默认为0,即所有日志均记录。当level为1时,关注debug以上级别(包括debug),以此类推。level大于8时,所有日志均不记录。#p#

默认常量有哪些

遵循PSR-3标准,SeasLog 共将日志分成8个级别

●SEASLOG_DEBUG "debug"

●SEASLOG_INFO "info"

●SEASLOG_NOTICE "notice"

●SEASLOG_WARNING "warning"

●SEASLOG_ERROR "error"

●SEASLOG_CRITICAL "critical"

●SEASLOG_ALERT "alert"

●SEASLOG_EMERGENCY "emergency"

都提供哪些方法

SeasLog 提供了这样一组函数,可以方便地获取与设置根目录、模块目录、快速写入与统计log。 相信从下述伪代码的注释中,您可以快速获取函数信息(有经验的coder,也可将下述代码保存成SeasLog.php导入你的IDE,code tips,你懂的),具体使用将紧接其后:

  1. <?php 
  2. /** 
  3.  * @author neeke@php.net 云智慧 
  4.  */ 
  5.  
  6. class SeasLog 
  7.     public function __construct() 
  8.     { 
  9.         #SeasLog init 
  10.     } 
  11.  
  12.     public function __destruct() 
  13.     { 
  14.         #SeasLog distroy 
  15.     } 
  16.  
  17.     /** 
  18.      * 设置basePath 
  19.      * @param $basePath 
  20.      * @return bool 
  21.      */ 
  22.     static public function setBasePath($basePath) 
  23.     { 
  24.         return TRUE; 
  25.     } 
  26.  
  27.     /** 
  28.      * 获取basePath 
  29.      * @return string 
  30.      */ 
  31.     static public function getBasePath() 
  32.     { 
  33.         return 'the base_path'; 
  34.     } 
  35.  
  36.     /** 
  37.      * 设置模块目录 
  38.      * @param $module 
  39.      * @return bool 
  40.      */ 
  41.     static public function setLogger($module) 
  42.     { 
  43.         return TRUE; 
  44.     } 
  45.  
  46.     /** 
  47.      * 获取***一次设置的模块目录 
  48.      * @return string 
  49.      */ 
  50.     static public function getLastLogger() 
  51.     { 
  52.         return 'the lastLogger'; 
  53.     } 
  54.  
  55.     /** 
  56.      * 统计所有类型(或单个类型)行数 
  57.      * @param string $level 
  58.      * @param string $log_path 
  59.      * @param null $key_word 
  60.      * @return array | long 
  61.      */ 
  62.     static public function analyzerCount($level = 'all',$log_path = '*',$key_word = NULL
  63.     { 
  64.         return array(); 
  65.     } 
  66.  
  67.     /** 
  68.      * 以数组形式,快速取出某类型log的各行详情 
  69.      * @param $level 
  70.      * @param string $log_path 
  71.      * @param null $key_word 
  72.      * @param int $start 
  73.      * @param int $limit 
  74.      * @return array 
  75.      */ 
  76.     static public function analyzerDetail($level = SEASLOG_INFO,$log_path = '*',$key_word = NULL, $start = 1,$limit = 20
  77.     { 
  78.         return array(); 
  79.     } 
  80.  
  81.     /** 
  82.      * 获得当前日志buffer中的内容 
  83.      * @return array 
  84.      */ 
  85.     static public function getBuffer() 
  86.     { 
  87.         return array(); 
  88.     } 
  89.  
  90.     /** 
  91.      * 记录debug日志 
  92.      * @param $message 
  93.      * @param array $content 
  94.      * @param string $module 
  95.      */ 
  96.     static public function debug($message,array $content = array(),$module = ''
  97.     { 
  98.         #$level = SEASLOG_DEBUG 
  99.     } 
  100.  
  101.     /** 
  102.      * 记录info日志 
  103.      * @param $message 
  104.      * @param array $content 
  105.      * @param string $module 
  106.      */ 
  107.     static public function info($message,array $content = array(),$module = ''
  108.     { 
  109.         #$level = SEASLOG_INFO 
  110.     } 
  111.  
  112.     /** 
  113.      * 记录notice日志 
  114.      * @param $message 
  115.      * @param array $content 
  116.      * @param string $module 
  117.      */ 
  118.     static public function notice($message,array $content = array(),$module = ''
  119.     { 
  120.         #$level = SEASLOG_NOTICE 
  121.     } 
  122.  
  123.     /** 
  124.      * 记录warning日志 
  125.      * @param $message 
  126.      * @param array $content 
  127.      * @param string $module 
  128.      */ 
  129.     static public function warning($message,array $content = array(),$module = ''
  130.     { 
  131.         #$level = SEASLOG_WARNING 
  132.     } 
  133.  
  134.     /** 
  135.      * 记录error日志 
  136.      * @param $message 
  137.      * @param array $content 
  138.      * @param string $module 
  139.      */ 
  140.     static public function error($message,array $content = array(),$module = ''
  141.     { 
  142.         #$level = SEASLOG_ERROR 
  143.     } 
  144.  
  145.     /** 
  146.      * 记录critical日志 
  147.      * @param $message 
  148.      * @param array $content 
  149.      * @param string $module 
  150.      */ 
  151.     static public function critical($message,array $content = array(),$module = ''
  152.     { 
  153.         #$level = SEASLOG_CRITICAL 
  154.     } 
  155.  
  156.     /** 
  157.      * 记录alert日志 
  158.      * @param $message 
  159.      * @param array $content 
  160.      * @param string $module 
  161.      */ 
  162.     static public function alert($message,array $content = array(),$module = ''
  163.     { 
  164.         #$level = SEASLOG_ALERT 
  165.     } 
  166.  
  167.     /** 
  168.      * 记录emergency日志 
  169.      * @param $message 
  170.      * @param array $content 
  171.      * @param string $module 
  172.      */ 
  173.     static public function emergency($message,array $content = array(),$module = ''
  174.     { 
  175.         #$level = SEASLOG_EMERGENCY 
  176.     } 
  177.  
  178.     /** 
  179.      * 通用日志方法 
  180.      * @param $level 
  181.      * @param $message 
  182.      * @param array $content 
  183.      * @param string $module 
  184.      */ 
  185.     static public function log($level,$message,array $content = array(),$module = ''
  186.     { 
  187.  
  188.     } 

#p#

在项目中如何使用

获取与设置basePath

  1. $basePath_1 = SeasLog::getBasePath(); 
  2.  
  3. SeasLog::setBasePath('/log/base_test'); 
  4. $basePath_2 = SeasLog::getBasePath(); 
  5.  
  6. var_dump($basePath_1,$basePath_2); 
  7.  
  8. /* 
  9. string(19) "/log/seaslog-ciogao" 
  10. string(14) "/log/base_test" 
  11. */ 

直接使用 SeasLog::getBasePath(),将获取php.ini(seaslog.ini)中设置的seaslog.default_basepath 的值。

使用 SeasLog::getBasePath() 函数,将改变 seaslog_get_basepath() 的取值。

设置logger与获取lastLogger

  1. $lastLogger_1 = SeasLog::getLastLogger(); 
  2.  
  3. SeasLog::setLogger('testModule/app1'); 
  4. $lastLogger_2 = SeasLog::getLastLogger(); 
  5.  
  6. var_dump($lastLogger_1,$lastLogger_2); 
  7. /* 
  8. string(7) "default" 
  9. string(15) "testModule/app1" 
  10. */ 

与basePath相类似的,

直接使用 SeasLog::getLastLogger(),将获取php.ini(seaslog.ini)中设置的seaslog.default_logger 的值。

使用 SeasLog::setLogger() 函数,将改变 SeasLog::getLastLogger() 的取值。

快速写入log

上面已经设置过了basePath与logger,于是log记录的目录已经产生了,

log记录目录 = basePath / logger / {fileName}.log log文件名,以 年月日 分文件,如今天是2014年02月18日期,那么 {fileName} = 20140218;

还记得 php.ini 中设置的 seaslog.disting_type 吗?

默认的 seaslog.disting_type = 0,如果今天我使用了 SeasLog ,那么将产生最终的log文件:

●LogFile = basePath / logger / 20140218.log

如果 seaslog.disting_type = 1,则最终的log文件将是这样的三个文件

●infoLogFile = basePath / logger / INFO.20140218.log
●warnLogFile = basePath / logger / WARN.20140218.log
●erroLogFile = basePath / logger / ERRO.20140218.log

于是可以这么快速地记录log:

SeasLog::debug('this is a {userName} debug',array('{userName}' => 'neeke'));
SeasLog::info('this is a info log');
SeasLog::notice('this is a notice log');
SeasLog::warning('your {website} was down,please {action} it ASAP!',array('{website}' => 'github.com','{action}' => 'rboot'));
SeasLog::error('a error log');
SeasLog::critical('some thing was critical');
SeasLog::alert('yes this is a {messageName}',array('{messageName}' => 'alertMSG'));
SeasLog::emergency('Just now, the house next door was completely burnt out! {note}',array('{note}' => 'it`s a joke'));

既然已经作为PHP的扩展存在,那么,此时可以在任何使用PHP的地方,方便地使用SeasLog来记录你的log了。

这里有一个小技巧,在一个框架controller构造方法中,或在一个Service的构造方法中,使用SeasLog::setLogger() 方法,则可以将下文中所有的log记录在同一个模块中。同时,由于SeasLog记录的log中,默认记录了进程pid,所以可以有效地通过pid,将上下文相关的日志非常快速地联系起来。

如下:

debug | 6886 | 1422894818.129 | 2015:02:03 00:33:38 | this is a neeke debug
info | 6886 | 1422894818.129 | 2015:02:03 00:33:38 | this is a info log
notice | 6886 | 1422894818.129 | 2015:02:03 00:33:38 | this is a notice log
warning | 6886 | 1422894818.129 | 2015:02:03 00:33:38 | your github.com was down,please rboot it ASAP!
error | 6886 | 1422894818.129 | 2015:02:03 00:33:38 | a error log
critical | 6886 | 1422894818.129 | 2015:02:03 00:33:38 | some thing was critical
alert | 6886 | 1422894818.129 | 2015:02:03 00:33:38 | yes this is a alertMSG
emergency | 6886 | 1422894818.129 | 2015:02:03 00:33:38 | Just now, the house next door was completely burnt out! it`s a joke
debug | 6888 | 1422894820.234 | 2015:02:03 00:33:40 | this is a neeke debug
info | 6888 | 1422894820.235 | 2015:02:03 00:33:40 | this is a info log
notice | 6888 | 1422894820.235 | 2015:02:03 00:33:40 | this is a notice log
warning | 6888 | 1422894820.235 | 2015:02:03 00:33:40 | your github.com was down,please rboot it ASAP!
error | 6888 | 1422894820.235 | 2015:02:03 00:33:40 | a error log
critical | 6888 | 1422894820.235 | 2015:02:03 00:33:40 | some thing was critical
alert | 6888 | 1422894820.235 | 2015:02:03 00:33:40 | yes this is a alertMSG
emergency | 6888 | 1422894820.235 | 2015:02:03 00:33:40 | Just now, the house next door was completely burnt out! it`s a joke

使用SeasLog进行健康预警

SeasLog同时也提供了一个简单的预警demo,可以通过简单的配置,完成及时发现问题并实时发送预警邮件的功能。

预警的配置

  1. [base] 
  2. wait_analyz_log_path = /log/base_test 
  3.  
  4. [fork] 
  5. ;是否开启多线程 1开启 0关闭 
  6. fork_open = 1 
  7.  
  8. ;线程个数 
  9. fork_count = 3 
  10.  
  11. [warning] 
  12. email[smtp_host] = smtp.163.com 
  13. email[smtp_port] = 25 
  14. email[subject_pre] = 预警邮件 - 
  15. email[smtp_user] = seaslogdemo@163.com 
  16. email[smtp_pwd] = seaslog#demo 
  17. email[mail_from] = seaslogdemo@163.com 
  18. email[mail_to] = gaochitao@weiboyi.com 
  19. email[mail_cc] = ciogao@gmail.com 
  20. email[mail_bcc] = 
  21.  
  22. [analyz] 
  23. ; enum 
  24. ; SEASLOG_DEBUG      "debug" 
  25. ; SEASLOG_INFO       "info" 
  26. ; SEASLOG_NOTICE     "notice" 
  27. ; SEASLOG_WARNING    "warning" 
  28. ; SEASLOG_ERROR      "error" 
  29. ; SEASLOG_CRITICAL   "critical" 
  30. ; SEASLOG_ALERT      "alert" 
  31. ; SEASLOG_EMERGENCY  "emergency" 
  32.  
  33. test1[module] = test/bb 
  34. test1[level] = SEASLOG_ERROR 
  35. test1[bar] = 1 
  36. test1[mail_to] = gaochitao@weiboyi.com 
  37.  
  38. test2[module] = 222 
  39. test2[level] = SEASLOG_WARNING 
  40.  
  41. test3[module] = 333 
  42. test3[level] = SEASLOG_CRITICAL 
  43.  
  44. test4[module] = 444 
  45. test4[level] = SEASLOG_EMERGENCY 
  46.  
  47. test5[module] = 555 
  48. test5[level] = SEASLOG_DEBUG 

crontab配置

  1. ;每天凌晨3点执行 
  2. 0 3 * * * /path/to/php /path/to/SeasLog/Analyzer/SeasLogAnalyzer.php 
责任编辑:守望幸福 来源: 51CTO.com
相关推荐

2021-05-27 10:02:57

Go缓存数据

2017-09-18 01:21:05

美团IDC集群锐捷网络

2011-07-01 09:36:30

高性能Web

2024-02-01 09:21:08

RevoltPHP高性能

2015-08-19 09:38:29

云集群高性能计算云计算

2011-08-30 15:21:36

Platform

2012-01-11 15:15:59

用户体验高性能

2018-07-20 10:02:13

华为

2021-02-23 15:24:51

腾讯组件开源

2015-09-23 09:04:30

java高性能

2019-09-11 09:30:44

2010-05-18 16:47:40

智能网络上海通用Radware

2015-09-23 09:40:17

高性能Java应用

2009-03-01 22:23:39

LinuxKernelLinuxDNA

2018-09-28 04:46:19

负载均衡JavaLVS

2014-04-11 10:06:55

微软SQL Server BI

2009-06-26 04:30:15

曙光高性能管理

2013-12-20 09:53:08

大数据J2eeOracle

2021-02-04 10:22:32

前端开发技术

2009-06-24 17:34:58

使用JSF的经验
点赞
收藏

51CTO技术栈公众号