0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

一行log日志,引发了P1的线上事故

jf_ro2CN3Fa 来源:芋道源码 作者:芋道源码 2022-11-07 15:48 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群


线上事故回顾

前段时间同事新增了一个特别简单的功能,晚上上线前review代码时想到公司拼搏进取的价值观临时他加一行 log 日志,觉得就一行简单的日志基本上没啥问题,结果刚上完线后一堆报警,赶紧回滚了代码,找到问题删除了添加日志的代码,重新上线完毕。

基于 Spring Boot + MyBatis Plus + Vue & Element 实现的后台管理系统 + 用户小程序,支持 RBAC 动态权限、多租户、数据权限、工作流、三方登录、支付、短信、商城等功能

  • 项目地址:https://gitee.com/zhijiantianya/ruoyi-vue-pro
  • 视频教程:https://doc.iocoder.cn/video/

情景还原

定义了一个 CountryDTO

publicclassCountryDTO{
privateStringcountry;

publicvoidsetCountry(Stringcountry){
this.country=country;
}

publicStringgetCountry(){
returnthis.country;
}

publicBooleanisChinaName(){
returnthis.country.equals("中国");
}
}

定义测试类 FastJonTest

publicclassFastJonTest{
@Test
publicvoidtestSerialize(){
CountryDTOcountryDTO=newCountryDTO();
Stringstr=JSON.toJSONString(countryDTO);
System.out.println(str);
}
}

运行时报空指针错误:

64775822-5d7b-11ed-a3b6-dac502259ad0.png空指针

通过报错信息可以看出来是序列化的过程中执行了isChinaName()方法,这时候this.country变量为空,那么问题来了:

  • 序列化为什么会执行isChinaName()呢?
  • 引申一下,序列化过程中会执行那些方法呢?

基于 Spring Cloud Alibaba + Gateway + Nacos + RocketMQ + Vue & Element 实现的后台管理系统 + 用户小程序,支持 RBAC 动态权限、多租户、数据权限、工作流、三方登录、支付、短信、商城等功能

  • 项目地址:https://gitee.com/zhijiantianya/yudao-cloud
  • 视频教程:https://doc.iocoder.cn/video/

源码分析

通过 debug 观察调用链路的堆栈信息

652d8e80-5d7b-11ed-a3b6-dac502259ad0.png65920e46-5d7b-11ed-a3b6-dac502259ad0.jpg

调用链中的ASMSerializer_1_CountryDTO.writeFastJson使用asm技术动态生成了一个类ASMSerializer_1_CountryDTO

asm技术其中一项使用场景就是通过到动态生成类用来代替java反射,从而避免重复执行时的反射开销

JavaBeanSerizlier序列化原理

通过下图看出序列化的过程中,主要是调用JavaBeanSerializer类的write()方法。

65b3b3de-5d7b-11ed-a3b6-dac502259ad0.pngObjectSerializer实现类JavaBeanSerializer

JavaBeanSerializer主要是通过getObjectWriter()方法获取,通过对getObjectWriter()执行过程的调试,找到比较关键的com.alibaba.fastjson.serializer.SerializeConfig#createJavaBeanSerializer方法,进而找到 com.alibaba.fastjson.util.TypeUtils#computeGetters

publicstaticListcomputeGetters(Classclazz,//
JSONTypejsonType,//
MapaliasMap,//
MapfieldCacheMap,//
booleansorted,//
PropertyNamingStrategypropertyNamingStrategy//
){
//省略部分代码....
Method[]methods=clazz.getMethods();
for(Methodmethod:methods){
//省略部分代码...
if(method.getReturnType().equals(Void.TYPE)){
continue;
}
if(method.getParameterTypes().length!=0){
continue;
}
//省略部分代码...
JSONFieldannotation=TypeUtils.getAnnotation(method,JSONField.class);
//省略部分代码...
if(annotation!=null){
if(!annotation.serialize()){
continue;
}
if(annotation.name().length()!=0){
//省略部分代码...
}
}
if(methodName.startsWith("get")){
//省略部分代码...
}
if(methodName.startsWith("is")){
//省略部分代码...
}
}
}

从代码中大致分为三种情况:

  • @JSONField(.serialize = false, name = "xxx")注解
  • getXxx() : get开头的方法
  • isXxx():is开头的方法

序列化流程图

65d61064-5d7b-11ed-a3b6-dac502259ad0.png序列化流程图

示例代码

/**
*case1:@JSONField(serialize=false)
*case2:getXxx()返回值为void
*case3:isXxx()返回值不等于布尔类型
*case4:@JSONType(ignores="xxx")
*/
@JSONType(ignores="otherName")
publicclassCountryDTO{
privateStringcountry;

publicvoidsetCountry(Stringcountry){
this.country=country;
}

publicStringgetCountry(){
returnthis.country;
}

publicstaticvoidqueryCountryList(){
System.out.println("queryCountryList()执行!!");
}

publicBooleanisChinaName(){
System.out.println("isChinaName()执行!!");
returntrue;
}

publicStringgetEnglishName(){
System.out.println("getEnglishName()执行!!");
return"lucy";
}

publicStringgetOtherName(){
System.out.println("getOtherName()执行!!");
return"lucy";
}

/**
*case1:@JSONField(serialize=false)
*/
@JSONField(serialize=false)
publicStringgetEnglishName2(){
System.out.println("getEnglishName2()执行!!");
return"lucy";
}

/**
*case2:getXxx()返回值为void
*/
publicvoidgetEnglishName3(){
System.out.println("getEnglishName3()执行!!");
}

/**
*case3:isXxx()返回值不等于布尔类型
*/
publicStringisChinaName2(){
System.out.println("isChinaName2()执行!!");
return"isChinaName2";
}
}

运行结果为:

isChinaName()执行!!
getEnglishName()执行!!
{"chinaName":true,"englishName":"lucy"}

代码规范

可以看出来序列化的规则还是很多的,比如有时需要关注返回值,有时需要关注参数个数,有时需要关注@JSONType注解,有时需要关注@JSONField注解;当一个事物的判别方式有多种的时候,由于团队人员掌握知识点的程度不一样,这个方差很容易导致代码问题,所以尽量有一种推荐方案。

这里推荐使用@JSONField(serialize = false)来显式的标注方法不参与序列化,下面是使用@JSONField注解后的代码,是不是一眼就能看出来哪些方法不需要参与序列化了。

publicclassCountryDTO{
privateStringcountry;

publicvoidsetCountry(Stringcountry){
this.country=country;
}

publicStringgetCountry(){
returnthis.country;
}

@JSONField(serialize=false)
publicstaticvoidqueryCountryList(){
System.out.println("queryCountryList()执行!!");
}

publicBooleanisChinaName(){
System.out.println("isChinaName()执行!!");
returntrue;
}

publicStringgetEnglishName(){
System.out.println("getEnglishName()执行!!");
return"lucy";
}

@JSONField(serialize=false)
publicStringgetOtherName(){
System.out.println("getOtherName()执行!!");
return"lucy";
}

@JSONField(serialize=false)
publicStringgetEnglishName2(){
System.out.println("getEnglishName2()执行!!");
return"lucy";
}

@JSONField(serialize=false)
publicvoidgetEnglishName3(){
System.out.println("getEnglishName3()执行!!");
}

@JSONField(serialize=false)
publicStringisChinaName2(){
System.out.println("isChinaName2()执行!!");
return"isChinaName2";
}
}

三个频率高的序列化的情况

65fbca66-5d7b-11ed-a3b6-dac502259ad0.png三个频率高的序列化的情况

以上流程基本遵循,发现问题 --> 原理分析 --> 解决问题 --> 升华(编程规范)。

  • 围绕业务上:解决问题 -> 如何选择一种好的额解决方案 -> 好的解决方式如何扩展 n 个系统应用;
  • 围绕技术上:解决单个问题,顺着单个问题掌握这条线上的原理。

但其实这段代码我并不满意,原因是和 FastJson 依赖太高了。我想要的效果是,不依赖任何特定的 JSON 序列化框架。当我需要替换掉它的时候,随时可以替换掉。

并且在写代码时,不要过于依赖日志。打日志只需要打紧要且关键的信息即可,不要什么日志都打,我曾见过一个系统,一个小时,把 128G 磁盘跑满的管理系统。几乎没啥并发,但几乎每个请求都输出几 M 的日志,这件事我后面会单独拿出来讲讲。

关于@JSONField@JSONType等特性注解,后面我会在团队内规范并给出新的解耦方案,把它们移除掉。



审核编辑 :李倩


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 代码
    +关注

    关注

    30

    文章

    4941

    浏览量

    73123
  • 日志
    +关注

    关注

    0

    文章

    145

    浏览量

    11025

原文标题:一行log日志,引发了P1的线上事故

文章出处:【微信号:芋道源码,微信公众号:芋道源码】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    MediaTek发布天玑座舱P1 Ultra芯片

    MediaTek 正式发布旗下全新座舱芯片——天玑座舱 P1 Ultra。天玑座舱 P1 Ultra 凭借先进的生成式 AI 技术和 4nm 制程工艺,带来同级优异的算力突破与智能座舱体验,首批搭载该芯片的车型也即将上市。
    的头像 发表于 11-26 11:48 261次阅读

    韩国交通部部长一行参访小马智

    10月17日,韩国国土交通部部长金润德一行抵达北京亦庄参观小马智,并试乘了无人驾驶Robotaxi。小马智副总裁高天带队接待了代表团一行。随团参访成员包括韩国国土交通部移动出行与汽
    的头像 发表于 10-24 16:59 1116次阅读

    P1电表:欧洲能源管理的工业级“解码引擎”

    下,智能电表上不起眼的P1端口,成了破解精细化能源管理难题的关键入口。 什么是P1电表? P1电表是种专业级能源监测设备,通过智能电表上的标准化P
    的头像 发表于 10-13 16:00 307次阅读
    <b class='flag-5'>P1</b>电表:欧洲能源管理的工业级“解码引擎”

    广西政府领导一行到访西井科技

    近日,广西壮族自治区人民政府副秘书长,自治区大数据发展局党组书记、局长赵志刚一行到访西井科技上海总部。
    的头像 发表于 07-26 15:30 1022次阅读

    东鸿ES-P1P1智能电表的&quot;数据破壁者&quot;

    东鸿ES-P1电能追踪器解决欧洲P1电表数据获取难题。即插即用接口,直连欧洲电表P1端口。无线同步实时用电数据至本地设备,随时查看能耗趋势与成本分析,为节能管理提供智能化方案。产品兼容欧洲主流电表标准,安装便捷且保障数据安全,适
    的头像 发表于 06-23 17:33 729次阅读

    上海雷克萨斯一行到访中汽中心

    近日,雷克萨斯(上海)新能源有限公司(以下简称“上海雷克萨斯”)总经理加藤武郎一行到访中汽中心,与中汽中心党委副书记王晓杉进行了座谈交流。
    的头像 发表于 06-13 15:18 861次阅读

    中汽中心一行到访理想汽车

    近日,中汽中心副总经理周华一行赴理想汽车走访交流,受到理想汽车总裁马东辉等领导的热情接待。
    的头像 发表于 06-11 13:45 652次阅读

    全栈开发进阶指南:LuatOS-log库从入门到实战!

    本文将带你深入探索LuatOS系统中log库的核心原理与实战技巧,通过代码示例解析日志管理、错误追踪及性能优化的最佳实践,助力全栈工程师构建更稳健的物联网应用。 今天,我们起来认识LuatOS
    的头像 发表于 05-15 16:12 2672次阅读
    全栈开发进阶指南:LuatOS-<b class='flag-5'>log</b>库从入门到实战!

    全球能源巨头沙特阿美一行到访维智科技

    近日,场意义非凡的交流在上海维智科技总部展开。全球能源巨头沙特阿美执行副总裁兼首席技术官Ahmed Al-Khowaiter、中东知名科技投资基金 P7 管理人Raed Twaily一行到访,双方围绕时空人工智能技术的全球化应
    的头像 发表于 05-14 09:41 743次阅读

    解锁LuatOS-log库:全栈工程师的日志管理实战课!

    针对全栈开发者设计的实战教程,本文聚焦LuatOS平台log库的高效使用,从基础配置到高级调试策略,手把手教你搭建可扩展的日志系统,提升项目维护效率。 今天,我们起来认识LuatOS的log
    的头像 发表于 05-12 15:23 1314次阅读
    解锁LuatOS-<b class='flag-5'>log</b>库:全栈工程师的<b class='flag-5'>日志</b>管理实战课!

    打造AI工控新高度:基于此芯P1的EVB设计方案

    此芯P1的EVB设计方案以其强大的算力、丰富的接口和低功耗特性,为AI工控、边缘计算等领域提供了全新的解决方案。如果您正在寻找款高性能、灵活适配的计算平台,此芯P1无疑是您的不二之选。
    的头像 发表于 05-12 11:30 900次阅读
    打造AI工控新高度:基于此芯<b class='flag-5'>P1</b>的EVB设计方案

    浙江大学师生一行莅临行芯科技参观交流

    日前,浙江大学竺可桢学院师生一行来到杭州芯科技有限公司参观交流。
    的头像 发表于 05-06 10:28 834次阅读

    越南副总理一行到访商汤科技

    近日,越南副总理阮志勇率代表团一行到访商汤。深圳商汤总经理李廷波主介绍、商汤科技首席人力资源官张春娟及商汤科技联合创始人、元萝卜智能科技有限公司总裁马堃等陪同热情接待考察团一行
    的头像 发表于 03-24 10:01 886次阅读

    此芯首款高算力AI SoC芯片P1:性能与应用全解析

    此芯推出首款高算力AI SOC芯片P1,采用6nm工艺,集成45TOPS AI算力,支持100亿参数以内的大模型部署,适配计算机视觉、自然语言处理等多场景。P1搭载Armv9架构CPU,8性能核+4
    的头像 发表于 03-14 16:32 1361次阅读
    此芯首款高算力AI SoC芯片<b class='flag-5'>P1</b>:性能与应用全解析

    TFP401AMP第一行丢失4个像素是什么原因导致的?

    PC送出来的HDMI信号通过TFP401AMP转RGB后送到LCD,发现图片第一行会有4个像素丢失,经过逻辑分析仪抓取HS信号发现:HS在DE信号low的时间段里周期为31.774
    发表于 12-30 08:39