我的编程空间,编程开发者的网络收藏夹
学习永远不晚

使用Jedis线程池returnResource异常注意事项是什么

短信预约 -IT技能 免费直播动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

使用Jedis线程池returnResource异常注意事项是什么

小编给大家分享一下使用Jedis线程池returnResource异常注意事项是什么,希望大家阅读完这篇文章之后都有所收获,下面让我们一起去探讨吧!

    在线上环境发现了一个工作线程异常终止,看日志先是一些SocketTimeoutException,然后突然有一个ClassCastException

    redis.clients.jedis.exceptions.JedisConnectionException: java.net.SocketTimeoutException: Read timed out...java.lang.ClassCastException: [B cannot be cast to java.lang.Long        at redis.clients.jedis.Connection.getIntegerReply(Connection.java:208)        at redis.clients.jedis.Jedis.sismember(Jedis.java:1307)

    经过在本地人工模拟网络异常的情境,最终复现了线上的这一异常。又经过深入分析(提出假设-->验证假设),最终找出了导致这一问题的原因。见如下示例代码:

    JedisPool pool = ...;Jedis jedis = pool.getResource();String value = jedis.get("foo");System.out.println("Make SocketTimeoutException");System.in.read(); //等待制造SocketTimeoutExceptiontry {    value = jedis.get("foo");    System.out.println(value);} catch (JedisConnectionException e) {    e.printStackTrace();}System.out.println("Recover from SocketTimeoutException");System.in.read();  //等待恢复Thread.sleep(5000); // 继续休眠一段时间 等待网络完全恢复boolean isMember = jedis.sismember("urls", "baidu.com");

    以及日志输出:

    barMake SocketTimeoutExceptionredis.clients.jedis.exceptions.JedisConnectionException: java.net.SocketTimeoutException: Read timed outRecover from SocketTimeoutException    at redis.clients.util.RedisInputStream.ensureFill(RedisInputStream.java:210)    at redis.clients.util.RedisInputStream.readByte(RedisInputStream.java:47)    at redis.clients.jedis.Protocol.process(Protocol.java:131)    at redis.clients.jedis.Protocol.read(Protocol.java:196)    at redis.clients.jedis.Connection.readProtocolWithCheckingBroken(Connection.java:283)    at redis.clients.jedis.Connection.getBinaryBulkReply(Connection.java:202)    at redis.clients.jedis.Connection.getBulkReply(Connection.java:191)    at redis.clients.jedis.Jedis.get(Jedis.java:101)    at com.tcl.recipevideohunter.JedisTest.main(JedisTest.java:23)Caused by: java.net.SocketTimeoutException: Read timed out    at java.net.SocketInputStream.socketRead0(Native Method)    at java.net.SocketInputStream.read(SocketInputStream.java:152)    at java.net.SocketInputStream.read(SocketInputStream.java:122)    at java.net.SocketInputStream.read(SocketInputStream.java:108)    at redis.clients.util.RedisInputStream.ensureFill(RedisInputStream.java:204)    ... 8 moreException in thread "main" java.lang.ClassCastException: [B cannot be cast to java.lang.Long    at redis.clients.jedis.Connection.getIntegerReply(Connection.java:208)    at redis.clients.jedis.Jedis.sismember(Jedis.java:1307)    at com.tcl.recipevideohunter.JedisTest.main(JedisTest.java:32)

    分析:

    等执行第二遍的get("foo")时,网络超时,并未实际发送 get foo 命令,等执行sismember时,网络已恢复正常,并且是同一个jedis实例,于是将之前的get foo命令(已在输出流缓存中)一并发送。

    执行顺序如下所示:

    127.0.0.1:9379> get foo"bar"127.0.0.1:9379> sismember urls baidu.com(integer) 1127.0.0.1:9379> get foo"bar"127.0.0.1:9379> sismember urls baidu.com(integer) 1

    故在上述示例代码中最后的sismember得到的结果是get foo的结果,即一个字符串,而sismember需要的是一个Long型,故导致了ClassCastException。

    为什么线上会出现这一问题呢?原因是其执行redis的逻辑类似这样:

    while(true){        Jedis jedis = null;    try {        jedis = pool.getResource();        //some redis operation here.    } catch (Exception e) {       logger.error(e);    } finally {        pool.returnResource(jedis);    }}

    因若是网络异常的话,pool.returnResource(jedis)仍能成功执行,即能将其返回到池中(这时jedis并不为空)。等网络恢复后,并是多线程环境,导致后续其他某个线程获得了同一个Jedis实例(pool.getResource()),

    若该线程中的jedis操作返回类型与该jedis实例在网络异常期间第一条未执行成功的jedis操作的返回类型不匹配(如一个是get,一个是sismember),则就会出现ClassCastException异常。

    这还算幸运的,若返回的是同一类型的话(如lpop("queue_order_pay_failed"),lpop("queue_order_pay_success")),那我真不敢想象。

    如在上述示例代码中的sismember前插入一get("nonexist-key")(redis中不存在该key,即应该返回空).

    value = jedis.get("nonexist-key");System.out.println(value);boolean isMember = jedis.sismember("urls", "baidu.com");System.out.println(isMember);

    实际的日志输出为:

    barException in thread "main" java.lang.NullPointerException    at redis.clients.jedis.Jedis.sismember(Jedis.java:1307)    at com.tcl.recipevideohunter.JedisTest.main(JedisTest.java:37)

    分析:

    get("nonexist-key")得到是之前的get("foo")的结果, 而sismember得到的是get("nonexist-key")的结果,而get("nonexist-key")返回为空,于是这时是报空指针异常了.

    解决方法:不能不管什么情况都一律使用returnResource。更健壮可靠以及优雅的处理方式如下所示:

    while(true){    Jedis jedis = null;    boolean broken = false;    try {        jedis = jedisPool.getResource();        return jedisAction.action(jedis); //模板方法    } catch (JedisException e) {        broken = handleJedisException(e);        throw e;    } finally {        closeResource(jedis, broken);    }}protected boolean handleJedisException(JedisException jedisException) {    if (jedisException instanceof JedisConnectionException) {        logger.error("Redis connection " + jedisPool.getAddress() + " lost.", jedisException);    } else if (jedisException instanceof JedisDataException) {        if ((jedisException.getMessage() != null) && (jedisException.getMessage().indexOf("READONLY") != -1)) {            logger.error("Redis connection " + jedisPool.getAddress() + " are read-only slave.", jedisException);        } else {            // dataException, isBroken=false            return false;        }    } else {        logger.error("Jedis exception happen.", jedisException);    }    return true;}protected void closeResource(Jedis jedis, boolean conectionBroken) {    try {        if (conectionBroken) {            jedisPool.returnBrokenResource(jedis);        } else {            jedisPool.returnResource(jedis);        }    } catch (Exception e) {        logger.error("return back jedis failed, will fore close the jedis.", e);        JedisUtils.destroyJedis(jedis);    }}

    补充:

    Ubuntu本地模拟访问redis网络超时:

    sudo iptables -A INPUT -p tcp --dport 6379 -j DROP

    恢复网络:

    sudo iptables -F

    补充:

    若jedis操作逻辑类似下面所示的话,

    Jedis jedis = null;try {    jedis = jedisSentinelPool.getResource();    return jedis.get(key);}catch(JedisConnectionException e) {    jedisSentinelPool.returnBrokenResource(jedis);    logger.error("", e);    throw e;}catch (Exception e) {    logger.error("", e);    throw e;}finally {    jedisSentinelPool.returnResource(jedis);}

    若一旦发生了JedisConnectionException,如网络异常,会先执行returnBrokenResource,这时jedis已被destroy了。然后进入了finally,再一次执行returnResource,这时会报错:

    redis.clients.jedis.exceptions.JedisException: Could not return the resource to the pool    at redis.clients.util.Pool.returnResourceObject(Pool.java:65)    at redis.clients.jedis.JedisSentinelPool.returnResource(JedisSentinelPool.java:221)

    临时解决方法:

    jedisSentinelPool.returnBrokenResource(jedis);jedis=null; //这时不会实际执行returnResource中的相关动作了

    但不建议这样处理,更严谨的释放资源方法见前文所述。

    看完了这篇文章,相信你对“使用Jedis线程池returnResource异常注意事项是什么”有了一定的了解,如果想了解更多相关知识,欢迎关注编程网行业资讯频道,感谢各位的阅读!

    免责声明:

    ① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

    ② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

    使用Jedis线程池returnResource异常注意事项是什么

    下载Word文档到电脑,方便收藏和打印~

    下载Word文档

    猜你喜欢

    使用Jedis线程池returnResource异常注意事项是什么

    小编给大家分享一下使用Jedis线程池returnResource异常注意事项是什么,希望大家阅读完这篇文章之后都有所收获,下面让我们一起去探讨吧!在线上环境发现了一个工作线程异常终止,看日志先是一些SocketTimeoutExcepti
    2023-06-29

    PyGraphviz安装使用及注意事项是什么

    本篇内容主要讲解“PyGraphviz安装使用及注意事项是什么”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“PyGraphviz安装使用及注意事项是什么”吧!1. 工具说明PyGraphviz
    2023-07-05

    localStorage的用法及使用注意事项是什么

    这篇文章主要讲解了“localStorage的用法及使用注意事项是什么”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“localStorage的用法及使用注意事项是什么”吧!localStor
    2023-06-29

    Assert.assertEquals的使用方法及注意事项是什么

    这篇文章主要介绍了Assert.assertEquals的使用方法及注意事项是什么的相关知识,内容详细易懂,操作简单快捷,具有一定借鉴价值,相信大家阅读完这篇Assert.assertEquals的使用方法及注意事项是什么文章都会有所收获,
    2023-06-30

    使用亚马逊服务器注意事项是什么意思

    选择合适的云服务提供商:选择一个可用的云服务提供商,例如AmazonWebServices(AWS)或AmazonS3,可以确保您的应用程序能够运行在高效的云服务器上,并且可以获得更好的安全性和可扩展性。配置云服务器环境:在配置云服务器环境时,请确保您已经正确配置了您的数据库、Web服务器和其他应用程序服务器,以确保您的环境配置正确。配置应用程序服务器:在将应用程序服务器配置为AWS或AmazonS3时,请确保您正在使用与您的...
    2023-10-27

    Mybatis-Plus分页的使用与注意事项是什么

    这篇文章主要介绍“Mybatis-Plus分页的使用与注意事项是什么”的相关知识,小编通过实际案例向大家展示操作过程,操作方法简单快捷,实用性强,希望这篇“Mybatis-Plus分页的使用与注意事项是什么”文章能帮助大家解决问题。1.写个
    2023-06-30

    Java基础之Integer使用的注意事项是什么

    这篇文章主要介绍了Java基础之Integer使用的注意事项是什么,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。JAVA中Integer对象的引用JAVA中没有指针一说,但也
    2023-05-30

    sun unsafe类功能及使用注意事项是什么

    这篇文章跟大家分析一下“sun unsafe类功能及使用注意事项是什么”。内容详细易懂,对“sun unsafe类功能及使用注意事项是什么”感兴趣的朋友可以跟着小编的思路慢慢深入来阅读一下,希望阅读后能够对大家有所帮助。下面跟着小编一起深入
    2023-06-28

    使用亚马逊服务器注意事项是什么

    选择合适的服务器提供商:您需要选择一个可靠的、可扩展的服务器提供商,并了解每个服务器提供商的安全和服务级别协议(SLA)。配置正确的硬件和软件:您需要确保您的硬件和软件配置正确,并且具有足够的处理能力来处理您的业务需求。安装和配置安全软件:您需要安装和配置适当的安全软件,以确保您的数据和系统免受未经授权的访问。使用合适的管理工具:您需要使用适当的管理工具,如SSH
    2023-10-27

    golang函数注释的使用方法和注意事项是什么

    这篇文章主要介绍了golang函数注释的使用方法和注意事项是什么的相关知识,内容详细易懂,操作简单快捷,具有一定借鉴价值,相信大家阅读完这篇golang函数注释的使用方法和注意事项是什么文章都会有所收获,下面我们一起来看看吧。一、函数注释概
    2023-07-05

    React中style的使用方法及注意事项是什么

    这篇“React中style的使用方法及注意事项是什么”文章的知识点大部分人都不太理解,所以小编给大家总结了以下内容,内容详细,步骤清晰,具有一定的借鉴价值,希望大家阅读完这篇文章能有所收获,下面我们一起来看看这篇“React中style的
    2023-07-05

    Python中深浅拷贝的使用及注意事项是什么

    这篇文章主要讲解了“Python中深浅拷贝的使用及注意事项是什么”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“Python中深浅拷贝的使用及注意事项是什么”吧!一、Python深浅拷贝概念在
    2023-07-05

    编程热搜

    • Python 学习之路 - Python
      一、安装Python34Windows在Python官网(https://www.python.org/downloads/)下载安装包并安装。Python的默认安装路径是:C:\Python34配置环境变量:【右键计算机】--》【属性】-
      Python 学习之路 - Python
    • chatgpt的中文全称是什么
      chatgpt的中文全称是生成型预训练变换模型。ChatGPT是什么ChatGPT是美国人工智能研究实验室OpenAI开发的一种全新聊天机器人模型,它能够通过学习和理解人类的语言来进行对话,还能根据聊天的上下文进行互动,并协助人类完成一系列
      chatgpt的中文全称是什么
    • C/C++中extern函数使用详解
    • C/C++可变参数的使用
      可变参数的使用方法远远不止以下几种,不过在C,C++中使用可变参数时要小心,在使用printf()等函数时传入的参数个数一定不能比前面的格式化字符串中的’%’符号个数少,否则会产生访问越界,运气不好的话还会导致程序崩溃
      C/C++可变参数的使用
    • css样式文件该放在哪里
    • php中数组下标必须是连续的吗
    • Python 3 教程
      Python 3 教程 Python 的 3.0 版本,常被称为 Python 3000,或简称 Py3k。相对于 Python 的早期版本,这是一个较大的升级。为了不带入过多的累赘,Python 3.0 在设计的时候没有考虑向下兼容。 Python
      Python 3 教程
    • Python pip包管理
      一、前言    在Python中, 安装第三方模块是通过 setuptools 这个工具完成的。 Python有两个封装了 setuptools的包管理工具: easy_install  和  pip , 目前官方推荐使用 pip。    
      Python pip包管理
    • ubuntu如何重新编译内核
    • 改善Java代码之慎用java动态编译

    目录