Linux 使用 crontab 定时拆分日志、清理过期文件

合集 - Linux(1)

1.Linux 使用 crontab 定时拆分日志、清理过期文件04-08

收起

@

目录

• 前言
• 简介
• 一、准备工作
  • 1.1 创建写入脚本
  • 1.2 设置执行权限
  • 1.3 添加定时任务
  • 1.4 配置生效
• 二、Tomcat日志 按每天分割
  • 2.1 创建一个 sh文件
  • 2.2 设置执行权限
  • 2.3 设置crontab指令,指定每日定时任务
  • 2.4 配置生效
• 总结

---

前言

请各大网友尊重本人原创知识分享，谨记本人博客：南国以南i、

---

提示：以下是本篇文章正文内容，下面案例可供参考

简介

在Linux中可以使用crontab来定时执行脚本。crontab是一个用于管理定时任务的工具，可以让在特定的时间间隔内自动运行脚本或命令。

需求： 在Linux中每分钟写入一条信息到指定文件中，使用cron来定期执行一个写入命令或脚本

在Linux中，定时执行脚本具有多种作用和用途，包括但不限于以下几个方面：

1. 自动化任务：定时执行脚本可用于自动化重复性的任务。例如，定时备份数据、定时清理临时文件、定时运行系统维护任务等。通过将这些任务脚本定期执行，可以减轻管理员的工作负担，并确保任务按计划执行，提高系统的可靠性和稳定性。
2. 监控和报告：定时执行脚本可用于监控系统状态、资源使用情况和日志文件，并生成相应的报告。例如，定时检查服务器的CPU使用率、磁盘空间占用情况、网络连接状态等，并将报告发送给管理员或其他相关人员。这样可以帮助及时发现问题并采取适当的措施。
3. 数据处理和分析：定时执行脚本可用于处理和分析数据。例如，定期从外部数据源获取数据，并将其导入到数据库中进行进一步处理和分析。这对于数据采集、数据清洗、数据转换和数据分析等任务非常有用。
4. 定时提醒和通知：定时执行脚本可用于生成提醒和通知。例如，定时发送电子邮件或短信提醒，以及生成日程安排或事件提醒。这对于个人、团队或组织来管理任务、安排会议或发送重要通知非常有帮助。
5. 自定义批处理任务：定时执行脚本可用于运行自定义的批处理任务。根据特定的需求和工作流程，你可以编写脚本来执行一系列操作，如文件处理、数据转换、编译构建等。通过定时运行这些脚本，可以简化复杂的工作流程并提高工作效率。

总之，定时执行脚本在Linux系统中具有广泛的应用。通过利用定时任务，可以实现自动化、监控、报告、数据处理等各种任务，从而提高系统的可靠性、效率和管理效果

一、准备工作

1.1 创建写入脚本

注意：首先，在home目录下创建一个名为testscript.sh的脚本文件，并添加以下内容：

 #!/bin/bash
echo "This is a log message $(date)" > /home/out.log

在这个示例中，脚本会将一条带有当前日期和时间的日志消息附加到指定的日志文件中。确保将/home/out.log替换为实际的日志文件路径。

保存并关闭文件。

1.2 设置执行权限

注意：在执行脚本之前，确保为其设置执行权限。在终端中运行以下命令：

chmod 755 /home/testscript.sh

1.3 添加定时任务

crontab表的每一行代表一个定时任务，定时任务语法格式如下：

* * * * * command
 
第一个*表示分钟数（0-59）
第二个*表示小时数（0-23）
第三个*表示一个月中的第几天（1-31）
第四个*表示月份（1-12）
第五个*表示一周中的第几天（0-7，0和7都表示星期日）
command是要执行的命令或脚本

例如，要在每天的凌晨12点执行脚本，添加以下行到cron表中：
我们可以在 Crontab 的命令中添加重定向符号 ">>" 将输出重定向到指定的文件中。例如：

crontab -l # 查看当前是否存在任务
crontab -e # 编辑 指定执行哪个脚本以及执行时间

# 每日凌晨执行脚本
0 0 * * * /home/testscript.sh >> /home/testscript.log 2>&1     

1.4 配置生效

service crond reload    //重新载入配置  前提是crond已经启动

二、Tomcat日志 按每天分割

2.1 创建一个 sh文件

创建脚本

#创建脚本
vim auto-deal-log.sh

脚本内容：

#! /bin/bash
echo "date is `date +%Y-%m-%d,%H:%M:%S`"
echo "tomcat-sca日志分割"
sca_log_path=/home/admin/sca/tomcat-sca/logs
cp $sca_log_path/catalina.out $sca_log_path/catalina.`date +%Y-%m-%d`.log

# 清空tomcat默认日志输出文件
echo "" > $sca_log_path/catalina.out

echo "nginx日志分割"
nginx_log_path=/home/admin/mid/nginx/logs
cp $nginx_log_path/access.log $nginx_log_path/access.`date +%Y-%m-%d`.log
cp $nginx_log_path/error.log $nginx_log_path/error.`date +%Y-%m-%d`.log
echo "" > $nginx_log_path/access.log
echo "" > $nginx_log_path/error.log


# 查找并清理不需要的文件
echo "清理tomcat*，保留30天"
find /home/admin/sca/tomcat*/logs/ -mtime +30 -name "*" -exec rm -rf {} \;
echo "清理batch日志，保留30天"
find /home/admin/sca/log/batch/ -mtime +30 -name "*" -exec rm -rf {} \;
echo "清理xxl-job日志，保留7天"
find /home/admin/sca/log/xxl-job/ -mtime +7 -name "*" -exec rm -rf {} \;
echo "清理auto-split-deal-log日志，保留7天"
find /home/admin/sca/log/auto-split-deal-log/ -mtime +7 -name "*" -exec rm -rf {} \;
echo "清理视频文件，保留5天"
find /home/admin/sca/ccrecord/ -mtime +5 -name "*.wev" -exec rm -rf {} \;
echo "日志分割及清理完毕"

2.2 设置执行权限

chmod +x auto-deal-log.sh

2.3 设置crontab指令,指定每日定时任务

# 每日凌晨执行分割日志脚本
0 0 * * * /opt/sh/auto-deal-log.sh  >> /path/to/auto-deal-log.log 2>&1   

2.4 配置生效

service crond reload    //重新载入配置  前提是crond已经启动

总结

我是南国以南i记录点滴每天成长一点点，学习是永无止境的！转载请附原文链接！！！

• 前言
• 简介
• 一、准备工作
•     1.1 创建写入脚本
•     1.2 设置执行权限
•     1.3 添加定时任务
•     1.4 配置生效
• 二、Tomcat日志 按每天分割
•     2.1 创建一个 sh文件
•     2.2 设置执行权限
•     2.3 设置crontab指令,指定每日定时任务
•     2.4 配置生效
• 总结

__EOF__