0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

linux定时任务如何判断文件差异?

Q4MP_gh_c472c21 来源:写个解 作者:吴解君 2021-03-17 10:05 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

本文能学到•busybox为例粗略跟踪软件执行过程方法•如何判断文件差异•cron 对任务计划文件要求

1. 背景

无意中瞟一眼出厂产品的日志文件 /app/recode 大小居然有9MB,按照设计每10min执行任务检查/app/recode文件大小,该文件不会超过4MB,超过此大小则压缩处理,仅保留最近的日志内容。立马着手检查linux定时任务cron运行情况。

2. 初步排查

执 crontab -e 查看定时任务配置情况,其实是以root权限打开 var/spool/cron/crontabs/root 文件,第二行是本背景该执行的脚本,乍看一下没有任何问题。检查 /var/log/message 看是否有被执行的记录,“cat /var/log/message | grep cron”,干干净净!!!的确没被执行。

本来事情到此为止只算工程师一个平常无奇的日常,不过10min后再查看 /app/recode 居然从9MB变成4KB,/var/log/message也有执行记录,发生了什么?

3. 分析

为了分析具体原因,准备一新烧录的板卡作为排查对象。怀疑方向有三个,这三方面都是引起任务计划不被执行的诱因:crontab file格式不正确

文件系统被改写

crontab file所属用户不合法

3.1. x11 crontab file 格式不正确

crontab file文件位于 var/spool/cron/crontabs/root,当使用crontab -e命令打开该文件,不做任何修改并退出,cron任务计划能被运行。怀疑var/spool/cron/crontabs/root文件里可能包含不合法字符或语法不正确,如:文件末尾有 、 、一行里有多个空格会影响cron解析该文件。于是执行如下步骤排查:1.备份配置文件cp var/spool/cron/crontabs/root var/spool/cron/crontabs/root.bak;

2.执行crontab -e;

3.cron任务计划是否被执行,需查看记录watch -n 1 cat /var/log/message。

4.计算两文件md5是否一致md5sum var/spool/cron/crontabs/root var/spool/cron/crontabs/root.bak;

结果:文件一致。

证明:“crontab file 格式不正确”不是诱因。

3.2. x12 文件系统被改写

crontab -e虽然没有修改var/spool/cron/crontabs/root,但无法证明它有没有改写文件系统其他文件。于是在一块重新烧录镜像的板卡执行如下步骤排查:获取文件系统所有文件的MD5保存为/tmp/a.txt;

find arch bin etc home lib media opt root sbin tmp usr var -name “*” | xargs md5sum 》 /unuse/a.txt

执行crontab -e;

获取文件系统所有文件的MD5保存为/tmp/b.txt;

find arch bin etc home lib media opt root sbin tmp usr var -name “*” | xargs md5sum 》 /unuse/b.txt比较a.txt和b.txt是否一致,从而证明crontab -e是否修改文件系统内容

结果:a.txt,b.txt文件一致。 证明:“x12 文件系统被改写”不是诱因。

3.3. x13 crontab file所属用户不合法

产品的cron是busybox的组件,源码面前无秘密。开始跟踪crond执行过程。 在busybox源码的miscutils/crond.c添加若干 “printf(”LINE %d“, __ LINE __);”跟踪程序运行。cron在前台运行,执行crond -f var/spool/cron/crontabs/root; 发现947行没有被执行,且文件指针是0;推断:var/spool/cron/crontabs/root没有被读取。

跟踪文件读取函数load_crontab发现438行的if第二个条件不满足,DEAMON_UID是0,只有当sbuf.st_uid也等于0时才能执行文件读取,实际返回1000。变量sbuf.st_uid表示文件所属用户的UID。

•修改crontab file文件的UID和GID都是0,chown 0:0 /var/spool/cron/crontabs/root;

•重新启动crond:crond -f var/spool/cron/crontabs/

•10min后在/var/log/message里看到任务计划执行痕迹

Jan 10 1200 (none) cron.info crond[854]: USER root pid 3506 cmd /usr/bin/compresslog.shJan 10 1200 (none) cron.info crond[854]: USER root pid 3508 cmd /usr/local/bin/recode_check.shJan 10 1200 (none) cron.info crond[854]: USER root pid 5007 cmd /usr/local/bin/recode_check.shJan 10 1200 (none) cron.info crond[854]: USER root pid 6506 cmd /usr/local/bin/recode_check.sh结果:修改“crontab file所属用户”有效,任务计划可以正常运行。 证明:“crontab file所属用户不合法”是诱因

4. 推断过程

看到这个1000我已经觉察到问题根本原因,看我娓娓道来。/etc/passwd记录linux用户所属UID、GID。UID=0、GID=0属于root用户。passwd有若干ID号,普通预设的用户的UID、GID在1~999,adduser创建的用户ID从1000开始,启动crond守护进程时会根据当前用名去/var/spool/cron/crontabs/目录下寻找与用户名同名的文件,顺带检查该文件的所属用户UID,只有文件存在、UID相同才读取该文件。按照设想,那么crontab -e执行后应该会修改用户所属ID,下面是实验步骤。再修改用户组为 1000 “chown 1000:root /var/spool/cron/crontabs/root”

观察crontab -e执行前后文件所属用户是否改变

实践和设想一致:crontab会修改文件所属用户。

5. 为什么测试阶段没发现问题

我的Linux系统开发环境普通用户编码从1000开始,为避免使用root用户误操作危害开发环境,一切文件均在普通用户环境下编辑,为有编辑权限,曾执行过 chown up /var/spool/cron/crontabs/root(不理解cron设计者为什么要去检查文件所属UID,即使当前已经是root权限),这个up就是我的用户名,up的UID=1000。之所以在软件测试阶段未发现问题,原因在于任务计划默认10min才执行一次,为缩短测试时间而修改任务计划执行频率,提高测试效率,修改方法就是crontab -e编辑 /var/spool/cron/crontabs/root。 当初只注重recode_check.sh执行的正确性。

原文标题:揪出元凶:linux定时任务crontab居然没执行

文章出处:【微信公众号:嵌入式ARM】欢迎添加关注!文章转载请注明出处。

责任编辑:haq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • Linux
    +关注

    关注

    88

    文章

    11627

    浏览量

    217891
  • 代码
    +关注

    关注

    30

    文章

    4940

    浏览量

    73116

原文标题:揪出元凶:linux定时任务crontab居然没执行

文章出处:【微信号:gh_c472c2199c88,微信公众号:嵌入式微处理器】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    Linux-RT特点及简单应用

    Linux-RT支持优先级继承(Priority Inheritance),避免了优先级反转问题,提高了实时任务的响应性能。 标准Linux内核的调度器(也称为CFS调度器)和实时内核调度器 标准
    发表于 12-05 07:37

    Linux新手通关!5分钟掌握文件/目录管理,告别“找不到北”

    新手入门:Linux 文件 / 目录管理实操指南 刚上手 Linux 的小伙伴,是不是常陷入这些 “混乱时刻”:想找的文件藏在层层目录里,翻半天找不到;误删
    的头像 发表于 11-17 10:42 152次阅读
    <b class='flag-5'>Linux</b>新手通关!5分钟掌握<b class='flag-5'>文件</b>/目录管理,告别“找不到北”

    【米尔RK3506国产开发板评测】3、实时补丁以及EtherCAT IGH移植

    使用了更加高效和优化的任务调度算法,如基于优先级的实时调度算法,以确保高优先级任务能够及时响应并完成,而低优先级任务不会影响到实时任务的执行。 中断处理: Preempt-RT针对中断
    发表于 10-27 10:09

    Crontab定时任务完全指南

    在凌晨3点,当大多数人还在熟睡时,一位运维工程师的手机突然响起——线上数据库备份失败了。他匆忙起床,打开电脑,手动执行备份脚本,整个过程耗时2小时。这样的场景,在我刚入行时经常遇到。直到我真正掌握了crontab定时任务,才彻底摆脱了"人肉运维"的窘境。
    的头像 发表于 09-05 10:03 581次阅读

    使用C#实现西门子PLC数据定时读取保存

    在平时开发中,我们时常会遇到需要后台静默运行的应用场景,这些程序不需要用户的直接操作或界面展示,而是专注于定时任务的执行。比如说,我们需要定期从西门子PLC(可编程逻辑控制器)中读取数据并进行保存,以便后续分析使用。
    的头像 发表于 08-07 16:17 2154次阅读
    使用C#实现西门子PLC数据<b class='flag-5'>定时</b>读取保存

    Linux三大主流文件系统解析

    还在为选择哪个文件系统而纠结?作为一名摸爬滚打多年的运维老鸟,我将用最接地气的方式,带你彻底搞懂 Linux 三大主流文件系统的奥秘。
    的头像 发表于 08-05 17:37 1037次阅读

    【HZ-RK3568开发板免费体验】3、开启Linux Kernel RT功能

    基于优先级的实时调度算法,以确保高优先级任务能够及时响应并完成,而低优先级任务不会影响到实时任务的执行。 中断处理: Preempt-RT针对中断处理进行了优化,使得中断的响应时间更短,能够更快地响应外部
    发表于 07-22 14:03

    一文读懂:嵌入式Linux实时性进阶

    强实时的微内核,它与Linux内核共同运行于硬件平台上。 实时内核的优先级高于Linux内核,负责处理系统的实时任务,而Linux则负责处理非实
    发表于 07-10 15:26

    配置文件差异介绍

    配置文件差异 FA模型应用在config.json文件中描述应用的基本信息,一个应用工程中可以创建多个Module,每个Module中都有一份config.json文件。confi
    发表于 06-05 06:50

    Linux常用命令大全

    Linux常用命令是指在Linux操作系统中广泛使用的命令工具,这些命令工具可以完成各种不同的任务,如管理文件和目录、操作进程、网络通信、软件安装等。
    的头像 发表于 05-03 18:08 1609次阅读

    Linux主要的性能有哪些?

      什么是Linux?   Linux是一套自由传播的类Unix操作系统,是一个基于posix和unix的多用户、多任务、支持多线程和多cpu的操作系统。它的基本思想有两点,一切都是文件
    的头像 发表于 04-30 18:09 483次阅读
    <b class='flag-5'>Linux</b>主要的性能有哪些?

    linux服务器挖矿病毒处理方案

    情况说明:挖矿进程被隐藏(CPU占用50%,htop/top却看不到异常进程),结束挖矿进程后马上又会运行起来(crontab -l查看发现没有定时任务)。
    的头像 发表于 04-09 10:33 940次阅读
    <b class='flag-5'>linux</b>服务器挖矿病毒处理方案

    【第四章 定时任务】手把手教你玩转新版正点原子云

    【第四章 定时任务】手把手教你玩转新版正点原子云 承接上篇,除了报警联动这个功能,原子云还有一个特色功能也是各开发者喜欢用的,定时任务功能。 【正点原子】云平台:原子云(点击登录原子云) 前言
    发表于 03-13 10:19

    Linux计划任务cron详解

    cron是linux下用来周期性的执行某种任务或等待处理某些事件的一个守护进程,与windows下的计划任务类似,当安装完成操作系统后,默认会安装此服务 工具,并且会自动启动crond进程,crond进程每分钟会定期检查是否有要
    的头像 发表于 02-07 15:31 1525次阅读
    <b class='flag-5'>Linux</b>计划<b class='flag-5'>任务</b>cron详解

    Linux文件查找神器对决:Locate与find选谁

    linux 中有很多查找工具,今天主要讲解locate,find两个工具。 一、 locate 1、性能介绍 查询系统上预建的文件索引 数据库 /var/lib/mlocate/mlocate.db
    的头像 发表于 12-18 14:00 887次阅读
    <b class='flag-5'>Linux</b><b class='flag-5'>文件</b>查找神器对决:Locate与find选谁