百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

使用cron&logrotate处理Linux系统日志文件

nanshan 2024-10-22 13:04 16 浏览 0 评论

日志文件包含了关于系统中发生的事件的有用信息,在排障或者系统性能分析时经常会用到。如果条件允许,应该尽可能多的保存历史日志文件。但是对于忙碌的服务器,日志文件大小增长会很快,造成硬盘空间吃紧。依赖“cron”和“logrotate”可以方便地管理日志文件。

什么是Logrotate?

可以使用“logrotate”来管理系统服务产生的日志文件。logrotate是个非常有用的工具,它可以自动对日志进行截断(或轮循)、压缩以及删除旧的日志文件,同时提供一些高级功能,比如日志轮转怎么被处理,处理的频次如何,都可以控制。通常,logrotate由一个每天运行的“cron”任务控制。

什么是Cron?

“Cron”是Linux系统中一个基于时间的调度工具,书写的脚本或者特定命令通过“Cron”可以配置在特定时间点周期运行。由“Cron”调度的命令作为“cron jobs”在后台运行。

管理系统日志

服务器的系统日志记录操作系统和后台服务的运行状态,如果服务器比较繁忙,日志文件增长会比较快,最适合使用“logrotate”和“cron”将其管理起来。下面通过实际配置文件阐述相关配置。

logrotate配置文件

/etc/logrotate.d/rsyslog

/var/log/syslog
{
	rotate 7          # 一次将存储7个归档日志。对于第八个归档,时间最久的归档将被删除
	daily               # 日志文件将按日轮询
	missingok      # 在日志轮循期间,任何错误将被忽略,例如“文件无法找到”之类的错误。
	notifempty    # 如果日志文件为空,轮循不会进行。
	delaycompress  # 总是与compress选项一起用,delaycompress选项指示logrotate不要将最近的归档压缩,
                            #压缩将在下一次轮循周期进行。这在你或任何软件仍然需要读取最新归档时很有用。
	compress      # 在轮循任务完成后,已轮循的归档将使用gzip进行压缩
	postrotate      # 在所有其它指令完成后,postrotate和endscript里面指定的命令将被执行。
		/usr/lib/rsyslog/rsyslog-rotate # rsyslogd 进程将立即再次读取其配置并继续运行
	endscript
}

为了兼容systemd和init,使用定制脚本“/usr/lib/rsyslog/rsyslog-rotate”,

#!/bin/sh

if [ -d /run/systemd/system ]; then
    systemctl kill -s HUP rsyslog.service
else
    invoke-rc.d rsyslog rotate > /dev/null
fi

cron配置文件

/etc/cron.daily/logrotate

#!/bin/sh

# skip in favour of systemd timer
if [ -d /run/systemd/system ]; then
    exit 0
fi

# this cronjob persists removals (but not purges)
if [ ! -x /usr/sbin/logrotate ]; then
    exit 0
fi

/usr/sbin/logrotate /etc/logrotate.conf  #通过cron管理,每天运行一次logrotate命令
EXITVALUE=$?
if [ $EXITVALUE != 0 ]; then
    /usr/bin/logger -t logrotate "ALERT exited abnormally with [$EXITVALUE]"
fi
exit $EXITVALUE

从上面看,logrotate位于目录“/etc/cron.daily”下,即每天运行一次,问题来了,在一天中的具体什么时间运行呢?通过下面命令查看(笔者的操作系统是Debian buster),

aneirin@host-1:~$ grep run-parts /etc/crontab
17 *	* * *	root    cd / && run-parts --report /etc/cron.hourly
25 6	* * *	root	test -x /usr/sbin/anacron || ( cd / && run-parts --report /etc/cron.daily )
47 6	* * 7	root	test -x /usr/sbin/anacron || ( cd / && run-parts --report /etc/cron.weekly )
52 6	1 * *	root	test -x /usr/sbin/anacron || ( cd / && run-parts --report /etc/cron.monthly )

可以看到每天6:25分运行目录“/etc/cron.daily”下的文件。

总结

通过“logrotate”和“cron”可以方便地管理服务器上的日志文件,不仅可以压缩、删除文件,也可以通过特殊配置对文件进行转储。“cron”除了对日志文件进行管理,也可以对任何需要周期性运行的命令进行管理。

希望这篇文章能帮到正在努力的你,欢迎点赞评论!

相关推荐

Linux 的磁盘系统,和你了解的Windows差别很大

我的C盘去哪了?一个系统,如果没有存储,那么也就不能称之为系统。存储性是一个完整系统的重要组成部分。例如AWS最开始的服务就是S3(用来存储数据的云服务),足以见得存储对于一个应用平台是多么的重要。...

一文读懂 Linux 硬盘挂载:从问题到解决方案

各位互联网大厂的后端开发伙伴们!在咱们日常工作中,操作Linux系统是常有的事儿吧。你们有没有遇到过这样的场景:新添加了一块硬盘,满心欢喜准备用来存储重要数据或者部署新的应用服务,却突然发现不知道...

硬盘分区(硬盘分区格式)

 磁盘(硬盘)分区,可以分C、D、E等分区,大家可能都会用,会根据自已的需要确定所需的空间,但分区是如何工作的呢,内容如下。Windows中有3类:MBR分区:MasterBootRecord,也...

parted命令工具分区介绍(particle命令)

linux系统磁盘分区通常可以使用fdisk和parted命令,当分区大小小于2TB的时候,两种皆可以使用,当分区大于2TB的话,就需要用parted分区。以下介绍parted命令相关使用,以sdb为...

Linux 服务器上查看磁盘类型的方法

方法1:使用lsblk命令lsblk输出说明:TYPE列显示设备类型,如disk(物理磁盘)、part(分区)、rom(只读存储)等。NAME列显示设备名称(如sda、nvme0n1)。TR...

Linux分区命令fdisk和parted使用介绍

摘要:一般情况下,Linux分区都是选择fdisk工具,要求硬盘格式为MBR格式,能支持的最大分区空间为2T。但是目前在实际生产环境中使用的磁盘空间越来越大,呈TB级别增长;而常用的fdisk这个工具...

linux 分区原理与名词解释(linux操作系统中的分区类型)

分区的意义将磁盘分成几份,每份挂在到文件系统的那个目录在linux里的文件系统Ext2:早期的格式,不支持日志功能Ext3:ext2改良版,增加了日志功能,是最基本且最常用的使用格式了Ext4:针对e...

linux 分区合并(linux合理分区)

查看虚拟机当前磁盘挂载情况fdisk-l选择磁盘fdisk/dev/sda查看磁盘分区情况p重新选择分区n选择主分区p保存w创建物理卷pvcreate/dev/sda3查看物理卷信息pvdi...

如何在 Linux 系统中永久禁用交换分区 ?

Linux操作系统中的交换分区或交换文件充当硬盘上的临时存储区域,当物理内存(RAM)满时,系统使用该存储区域。它用于交换较少使用的内存页,这样系统就不会因为运行应用程序而耗尽物理内存。随着技术的发...

Linux 如何知道硬盘已用多少空间、未用多少空间

刚出社会时,去了一家公司上班,老板为了省钱,买的服务器是低配的,硬盘大小只有40G,有一次网站突然不能访问了,排查半天才知道原来服务器的硬盘空间已用完,已无可用空间。第一步是查看硬盘的使用情况,第二步...

用Linux系统管理磁盘空间 就该这么来

要想充分有效的管理使用Linux系统中的存储空间,用户必须要做的就是双管齐下,一边扩充空间一边限制空间。不得不说的就是很多时候磁盘空间就像水资源,需节制水流。说到要如何实现限制空间就离不开使用LVM技...

Windows 11 磁盘怎么分区?(windows11磁盘怎么分区)

Windows11磁盘分区技术解析与操作指南:构建高效存储体系一、磁盘分区的技术本质与系统价值磁盘分区作为存储系统的基础架构,通过逻辑划分实现数据隔离与管理优化。Windows11采用NTF...

linux上创建多个文件分区,格式化为 ext2、ext3、ext4、XFS 文件

以下是在Linux系统上创建多个20GB文件分区并格式化为不同文件系统的分步指南:步骤1:创建基础文件(4个20GB文件)bash#创建4个20GB稀疏文件(实际占用空间随写入量增长)ddif=/...

救命的U盘低格哪家最强?(低格优盘)

周二时有位童鞋留言说U盘之前做过引导盘,现在格式化不了,用各种工具都不行,而且因为U盘厂商的关系,查不到U盘主控,无法量产恢复,特来求助。小编花了点时间特意弄坏一个U盘分区,终于试出方法了,特来分享一...

Linux 查看硬件磁盘存储大小和磁盘阵列(RAID)的组合方式

一、查看硬件磁盘存储大小查看所有磁盘信息:#lsblk该命令会列出所有磁盘(如/dev/sda、/dev/nvme0n1)及其分区和挂载点。查看磁盘总容量:fdisk-l#或parted-...

取消回复欢迎 发表评论: