如何使用Redis来记录日志?

使用Redis来记录日志

在构建应用程序和服务的过程中,对正在运行的系统的相关信息的挖掘能力将变得越来越重 要:无论是通过挖掘信息来诊断系统问题,还是发现系统中潜在的问题,甚至是挖掘与用户有 关的信息——这些都需要用到日志。
在Linux和Unix的世界中,有两种常见的记录日志的方法。第一种是将日志记录到文件 里面,然后随着时间流逝不断地将一个又一个日志行添加到文件里面,并在一段时间之后创 建新的日志文件。包括Redis在内的很多软件都使用这种方法来记录日志。但这种记录日志 的方式有时候可能会遇上麻烦:因为每个不同的服务都会创建不同的日志,而这些服务轮换 (rolling )日志的机制也各不相同,并且也缺少一种能够方便地聚合所有日志并对其进行处理
的常用方法。

syslog服务是第二种常用的日志记录方法,这个服务运行在几乎所有Linux服务器和Unix 服务器的514号TCP端口和UDP端口上面。syslog接受其他程序发来的日志消息,并将这些消 息路由(route)至存储在硬盘上的各个日志文件里面,除此之外,syslog还负责旧日志的轮换和 删除工作。通过配置,syslog甚至可以将日志消息转发给其他服务来做进一步的处理。因为对指 定日志的轮换和删除工作都可以交给syslog来完成,所以使用syslog服务比直接将日志写入文件 要方便得多。

syslog的转发功能可以将不同的日志分别存储到同一台服务器的多个文件里面,这对于长时 间地记录日志非常有帮助(记得备份)。在这一节中,我们将介绍如何使用Redis来存储与时间 紧密相关的日志(time-sensitive log ),从而在功能上替代那些需要在短期内被存储的syslog消息。 首先让我们来看看,如何记录连续更新的最新日志消息(recent log message )

最新日志

在构建一个系统的时候,判断哪些信息需要被记录是一件困难的事情:需要记录用户 的登入和登出行为吗?需要记录用户修改账号信息的时间吗?还是只记录错误和异常就可 以了?虽然我没办法替你回答这些问题,但我可以向你提供一种将最新出现的日志消息以 列表的形式存储到Redis里面的方法,这个列表可以帮助你随时了解最新出现的日志都是什 么样子的。
代码清单5-1的log_recent ()函数展示了将最新日志记录到Redis里面的方法:为了维持 一个包含最新日志的列表,程序使用LPUSH命令将日志消息推入一个列表里面。之后,如果我 们想要查看已有日志消息的话,那么可以使用LRANGE命令来取出列表中的消息。除了 LPUSH 之外,函数还加入了一些额外的代码,用于命名不同的日志消息队列,并根据问题的严重性对日 志进行分级,如果你觉得自己并不需要这些附加功能的话,也可以把相关的代码删掉,只保留基 本的日志添加功能。

如何使用Redis来记录日志?

常见日志

如果实际运行一下log_recent ()函数的话,你可能就会发现,尽管log_recent ()函数 非常适用于记录当前发生的事情,但它并不擅长告诉你哪些消息是重要的,哪些消息是不重要的。 为了解决这个问题,我们可以让程序记录特定消息出现的频率,并根据出现频率的高低来决定消 息的排列顺序,从而帮助我们找出最重要的消息。
代码清单5.2的log^commonO函数展示了记录并轮换最常见日志消息的方法:程序会将 消息作为成员存储到有序集合里面,并将消息出现的频率设置为成员的分值。为了确保我们看见 的常见消息都是最新的,程序会以每小时一次的频率对消息进行轮换,并在轮换日志的时候保留 上一个小时记录的常见消息,从而防止没有任何消息存在的情况出现。
如何使用Redis来记录日志?