当前位置:首页 > 科技  > 软件

一个诡异的Json反序列化问题

来源: 责编: 时间:2024-06-28 17:16:02 108观看
导读前言最近我在做知识星球中的商品秒杀系统,昨天遇到了一个诡异的json反序列化问题,感觉挺有意思的,现在拿出来跟大家一起分享一下,希望对你会有所帮助。案发现场我最近在做知识星球中的商品秒杀系统,写了一个filter,获取用户

前言

最近我在做知识星球中的商品秒杀系统,昨天遇到了一个诡异的json反序列化问题,感觉挺有意思的,现在拿出来跟大家一起分享一下,希望对你会有所帮助。y0m28资讯网——每日最新资讯28at.com

案发现场

我最近在做知识星球中的商品秒杀系统,写了一个filter,获取用户请求的header中获取JWT的token信息。y0m28资讯网——每日最新资讯28at.com

然后根据token信息,获取到用户信息。y0m28资讯网——每日最新资讯28at.com

在转发到业务接口之前,将用户信息设置到用户上下文当中。y0m28资讯网——每日最新资讯28at.com

这样接口中的业务代码,就能通过用户上下文,获取到当前登录的用户信息了。y0m28资讯网——每日最新资讯28at.com

我们的token和用户信息,为了性能考虑都保存到了Redis当中。y0m28资讯网——每日最新资讯28at.com

用户信息是一个json字符串。y0m28资讯网——每日最新资讯28at.com

当时在用户登录接口中,将用户实体,使用fastjson工具,转换成了字符串:y0m28资讯网——每日最新资讯28at.com

JSON.toJSONString(userDetails);

保存到了Redis当中。y0m28资讯网——每日最新资讯28at.com

然后在filter中,通过一定的key,获取Redis中的字符串,反序列化成用户实体。y0m28资讯网——每日最新资讯28at.com

使用的同样是fastjson工具:y0m28资讯网——每日最新资讯28at.com

JSON.parseObject(json, UserEntity.class);

但在反序列化的过程中,filter抛异常了:com.alibaba.fastjson.JSONException: illegal identifier : /pos 1, line 1, column 2{/"accountNonExpired/":true,/"accountNonLocked/":true,/"authorities/":[{/"authority/":/"admin/"}],/"credentialsNonExpired/":true,/"enabled/":true,/"id/":13,/"password/":/"$2a$10$o3XfeGr0SHStAwLuJRW6y.kE0UTerQfv3SXrAcVLuJ6M3hEsC9RKe/",/"roles/":[/"admin/"],/"username/":/"admin/"}y0m28资讯网——每日最新资讯28at.com

2 分析问题

我刚开始以为是json数据格式有问题。y0m28资讯网——每日最新资讯28at.com

将json字符串复制到在线json工具:https://www.sojson.com,先去掉化之后,再格式数据,发现json格式没有问题:y0m28资讯网——每日最新资讯28at.com

图片图片y0m28资讯网——每日最新资讯28at.com

然后写了一个专门的测试类,将日志中打印的json字符串复制到json变量那里,使用JSON.parseObject方法,将json字符串转换成Map对象:y0m28资讯网——每日最新资讯28at.com

public class Test {    public static void main(String[] args) {        String json = "{/"accountNonExpired/":true,/"accountNonLocked/":true,/"authorities/":[{/"authority/":/"admin/"}],/"credentialsNonExpired/":true,/"enabled/":true,/"id/":13,/"password/":/"$2a$10$o3XfeGr0SHStAwLuJRW6y.kE0UTerQfv3SXrAcVLuJ6M3hEsC9RKe/",/"roles/":[/"admin/"],/"username/":/"admin/"}";        Map map = JSON.parseObject(json, Map.class);        // 输出解析后的 JSON 对象        System.out.println(map);    }}

执行结果:y0m28资讯网——每日最新资讯28at.com

{password=$2a$10$o3XfeGr0SHStAwLuJRW6y.kE0UTerQfv3SXrAcVLuJ6M3hEsC9RKe, credentialsNnotallow=true, roles=["admin"], accountNnotallow=true, id=13, authorities=[{"authority":"admin"}], enabled=true, accountNnotallow=true, username=admin}

竟然转换成功了。y0m28资讯网——每日最新资讯28at.com

这就让我有点懵逼了。。。y0m28资讯网——每日最新资讯28at.com

为什么相同的json字符串,在Test类中能够正常解析,而在filter当中却不行?y0m28资讯网——每日最新资讯28at.com

当时怕搞错了,debug了一下filter,发现获取到的json数据,跟Test类中的一模一样:y0m28资讯网——每日最新资讯28at.com

图片图片y0m28资讯网——每日最新资讯28at.com

带着一脸的疑惑,我做了下面的测试。y0m28资讯网——每日最新资讯28at.com

莫非是反序列化工具有bug?y0m28资讯网——每日最新资讯28at.com

3 改成gson工具

我尝试了一下将json的反序列化工具改成google的gson,代码如下:y0m28资讯网——每日最新资讯28at.com

Map map = new Gson().fromJson(userJson, Map.class);

运行之后,报了一个新的异常:com.google.gson.JsonSyntaxException: java.lang.IllegalStateException: Expected BEGIN_OBJECT but was STRING at line 1 column 2 path $y0m28资讯网——每日最新资讯28at.com

这里提示json字符串中包含了:$。y0m28资讯网——每日最新资讯28at.com

而$是特殊字符,password是做了加密处理的,里面包含$和.,这两种特殊字符。y0m28资讯网——每日最新资讯28at.com

为了快速解决问题,我先将这两个特字符替换成空字符串:y0m28资讯网——每日最新资讯28at.com

json = json.replace("$","").replace(".","");

日志中打印出的json中的password,已经不包含这两个特殊字符了:y0m28资讯网——每日最新资讯28at.com

2a10o3XfeGr0SHStAwLuJRW6ykE0UTerQfv3SXrAcVLuJ6M3hEsC9RKe

但调整之后代码报了下面的异常:com.google.gson.JsonSyntaxException: com.google.gson.stream.MalformedJsonException: Expected name at line 1 column 2 path $.y0m28资讯网——每日最新资讯28at.com

跟刚刚有点区别,但还是有问题。y0m28资讯网——每日最新资讯28at.com

4 改成jackson工具

我又尝试了一下json的反序列化工具,改成Spring自带的的jackson工具,代码如下:y0m28资讯网——每日最新资讯28at.com

ObjectMapper objectMapper = new ObjectMapper();try {    Map map = objectMapper.readValue(json, Map.class);} catch (JsonProcessingException e) {    e.printStackTrace();}

调整之后,反序列化还是报错:com.fasterxml.jackson.core.JsonParseException: Unexpected character ('/' (code 92)): was expecting double-quote to start field namey0m28资讯网——每日最新资讯28at.com

3种反序列化工具都不行,说明应该不是fastjson的bug导致的当前json字符串,反序列化失败。y0m28资讯网——每日最新资讯28at.com

到底是什么问题呢?y0m28资讯网——每日最新资讯28at.com

5 转义

之前的数据,我在仔细看了看。y0m28资讯网——每日最新资讯28at.com

里面是对双引号,是使用了转义的,具体是这样做的:/"。y0m28资讯网——每日最新资讯28at.com

莫非还是这个转义的问题?y0m28资讯网——每日最新资讯28at.com

其实我之前已经注意到了转义的问题,但使用Test类测试过,没有问题。y0m28资讯网——每日最新资讯28at.com

当时的代码是这样的:y0m28资讯网——每日最新资讯28at.com

public class Test {    public static void main(String[] args) {        String json = "{/"accountNonExpired/":true,/"accountNonLocked/":true,/"authorities/":[{/"authority/":/"admin/"}],/"credentialsNonExpired/":true,/"enabled/":true,/"id/":13,/"password/":/"$2a$10$o3XfeGr0SHStAwLuJRW6y.kE0UTerQfv3SXrAcVLuJ6M3hEsC9RKe/",/"roles/":[/"admin/"],/"username/":/"admin/"}";        Map map = JSON.parseObject(json, Map.class);        // 输出解析后的 JSON 对象        System.out.println(map);    }}

里面也包含了一些转义字符。y0m28资讯网——每日最新资讯28at.com

我带着试一试的心态,接下来,打算将转义字符去掉。y0m28资讯网——每日最新资讯28at.com

看看原始的json字符串,解析有没有问题。y0m28资讯网——每日最新资讯28at.com

怎么去掉转义字符呢?y0m28资讯网——每日最新资讯28at.com

手写工具类,感觉不太好,可能会写漏一些特殊字符的场景。y0m28资讯网——每日最新资讯28at.com

我想到了org.apache.commons包下的StringEscapeUtils类,它里面的unescapeJava方法,可以轻松去掉Java代码中的转义字符。y0m28资讯网——每日最新资讯28at.com

于是,我调整了一下代码:y0m28资讯网——每日最新资讯28at.com

json = StringEscapeUtils.unescapeJava(json);JSON.parseObject(json, UserEntity.class);

这样处理之后,发现反序列化成功了。y0m28资讯网——每日最新资讯28at.com

总结

这个问题最终发现还是转义的问题。y0m28资讯网——每日最新资讯28at.com

那么,之前Test类中json字符串,也使用了转义,为什么没有问题?y0m28资讯网——每日最新资讯28at.com

当时的代码是这样的:y0m28资讯网——每日最新资讯28at.com

public class Test {    public static void main(String[] args) {        String json = "{/"accountNonExpired/":true,/"accountNonLocked/":true,/"authorities/":[{/"authority/":/"admin/"}],/"credentialsNonExpired/":true,/"enabled/":true,/"id/":13,/"password/":/"$2a$10$o3XfeGr0SHStAwLuJRW6y.kE0UTerQfv3SXrAcVLuJ6M3hEsC9RKe/",/"roles/":[/"admin/"],/"username/":/"admin/"}";        Map map = JSON.parseObject(json, Map.class);        System.out.println(map);    }}

但在filter中的程序,在读取到这个json字符串之后,发现该字符串中包含了/转义符号,程序自动把它变成了///。y0m28资讯网——每日最新资讯28at.com

调整一下Test类的main方法,改成三个斜杠的json字符串:y0m28资讯网——每日最新资讯28at.com

public static void main(String[] args) {    String json = "{///"accountNonExpired///":true,///"accountNonLocked///":true,///"authorities///":[{///"authority///":///"admin///"}],///"credentialsNonExpired///":true,///"enabled///":true,///"id///":13,///"password///":///"$2a$10$o3XfeGr0SHStAwLuJRW6y.kE0UTerQfv3SXrAcVLuJ6M3hEsC9RKe///",///"roles///":[///"admin///"],///"username///":///"admin///"}";    Map map = JSON.parseObject(json, Map.class);    System.out.println(map);}

执行结果:Exception in thread "main" com.alibaba.fastjson.JSONException: illegal identifier : /pos 1, line 1, column 2{/"accountNonExpired/":true,/"accountNonLocked/":true,/"authorities/":[{/"authority/":/"admin/"}],/"credentialsNonExpired/":true,/"enabled/":true,/"id/":13,/"password/":/"$2a$10$o3XfeGr0SHStAwLuJRW6y.kE0UTerQfv3SXrAcVLuJ6M3hEsC9RKe/",/"roles/":[/"admin/"],/"username/":/"admin/"}抛出了跟文章最开始一样的异常。y0m28资讯网——每日最新资讯28at.com

说明其实就是转义的问题。y0m28资讯网——每日最新资讯28at.com

之前,我将项目的日志中的json字符串,复制到idea的Test的json变量中,当时将最外层的双引号一起复制过来了,保存的是1个斜杠的数据。y0m28资讯网——每日最新资讯28at.com

这个操作把我误导了。y0m28资讯网——每日最新资讯28at.com

而后面从在线的json工具中,把相同的json字符串,复制到idea的Test的json变量中,在双引号当中粘贴数据,保存的却是3个斜杠的数据,它会自动转义。y0m28资讯网——每日最新资讯28at.com

让我意识到了问题。y0m28资讯网——每日最新资讯28at.com

好了,下次如果遇到类似的问题,可以直接使用org.apache.commons包下的StringEscapeUtils类,先去掉转义,再反序列化,这样可以快速解决问题。y0m28资讯网——每日最新资讯28at.com

此外,这次使用了3种不同的反序列化工具,也看到了其中的一些差异。y0m28资讯网——每日最新资讯28at.com

本文链接://www.dmpip.com//www.dmpip.com/showinfo-26-97297-0.html一个诡异的Json反序列化问题

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: RecyclerView的缓存机制及使用策略

下一篇: 图解 Jenkins Pipeline 的前端自动化部署,用上后真香!

标签:
  • 热门焦点
  • 鸿蒙OS 4.0公测机型公布:甚至连nova6都支持

    鸿蒙OS 4.0公测机型公布:甚至连nova6都支持

    华为全新的HarmonyOS 4.0操作系统将于今天下午正式登场,官方在发布会之前也已经正式给出了可升级的机型产品,这意味着这些机型会率先支持升级享用。这次的HarmonyOS 4.0支持
  • 得物效率前端微应用推进过程与思考

    得物效率前端微应用推进过程与思考

    一、背景效率工程随着业务的发展,组织规模的扩大,越来越多的企业开始意识到协作效率对于企业团队的重要性,甚至是决定其在某个行业竞争中突围的关键,是企业长久生存的根本。得物
  • 十个简单但很有用的Python装饰器

    十个简单但很有用的Python装饰器

    装饰器(Decorators)是Python中一种强大而灵活的功能,用于修改或增强函数或类的行为。装饰器本质上是一个函数,它接受另一个函数或类作为参数,并返回一个新的函数或类。它们通常用
  • 每天一道面试题-CPU伪共享

    每天一道面试题-CPU伪共享

    前言:了不起:又到了每天一到面试题的时候了!学弟,最近学习的怎么样啊 了不起学弟:最近学习的还不错,每天都在学习,每天都在进步! 了不起:那你最近学习的什么呢? 了不起学弟:最近在学习C
  • 小红书1周涨粉49W+,我总结了小白可以用的N条涨粉笔记

    小红书1周涨粉49W+,我总结了小白可以用的N条涨粉笔记

    作者:黄河懂运营一条性教育视频,被54万人“珍藏”是什么体验?最近,情感博主@公主是用鲜花做的,火了!仅仅凭借一条视频,光小红书就有超过128万人,为她疯狂点赞!更疯狂的是,这
  • 自律,给不了Keep自由!

    自律,给不了Keep自由!

    来源 | 互联网品牌官作者 | 李大为编排 | 又耳 审核 | 谷晓辉自律能不能给用户自由暂时不好说,但大概率不能给Keep自由。近日,全球最大的在线健身平台Keep正式登陆港交所,努力
  • 造车两年股价跌六成,小米的估值逻辑变了吗?

    造车两年股价跌六成,小米的估值逻辑变了吗?

    如果从小米官宣造车后的首个交易日起持有小米集团的股票,那么截至2023年上半年最后一个交易日,投资者将浮亏59.16%,同区间的恒生科技指数跌幅为52.78%
  • 三星折叠屏手机去年销售近1000万台 今年目标定为1500万

    三星折叠屏手机去年销售近1000万台 今年目标定为1500万

    7月29日消息,三星率先发力可折叠手机市场,在全球市场已经取得了非常亮眼的成绩,接下来会进一步巩固和扩大这一优势。三星在推出Galaxy Z Flip5和Galax
  • OPPO Reno10 Pro英雄联盟定制礼盒公布:萨勒芬妮同款配色梦幻十足

    OPPO Reno10 Pro英雄联盟定制礼盒公布:萨勒芬妮同款配色梦幻十足

    5月24日,OPPO推出了全新的OPPO Reno 10系列,包含OPPO Reno10、OPPO Reno10 Pro和OPPO Reno10 Pro+三款新机,全系标配了超光影长焦镜头,是迄今为止拍照
Top
Baidu
map