Spring Data Redis JedisConnectionException:意外的流结束

时间:2017-06-19 09:11:48

标签: java spring multithreading redis

Redis 3.0.5
Spring Data Redis 1.3.6
jedis 2.6.3
- 我们的网络应用程序从pub / sub上的redis接收数据 - 还在redis上执行读/写数据作为键/值对 - 读/写发生在侦听器线程,独立监视线程和http请求线程上 - 我们为Listener和redis模板使用了相同的连接工厂
- 我们的redis服务器配置了“timeout = 30”

<bean id="jedisConnectionFactory"
    class="org.springframework.data.redis.connection.jedis.JedisConnectionFactory">
    <property name="hostName" value="nnnn"></property>
    <property name="port" value="nnnn"></property>
    <property name="password" value="****"></property>
</bean>
<bean id="redisTemplate" class="org.springframework.data.redis.core.StringRedisTemplate">
    <property name="connectionFactory" ref="jedisConnectionFactory" />
</bean>
<bean id="redisContainer"
    class="org.springframework.data.redis.listener.RedisMessageListenerContainer">
    <property name="connectionFactory" ref="jedisConnectionFactory" />
    <property name="messageListeners">
        <map>
            <entry key-ref="messageListener">
                <bean class="org.springframework.data.redis.listener.ChannelTopic">
                    <constructor-arg value="topic_name" />
                </bean>
            </entry>
        </map>
    </property>
    <property name="taskExecutor" ref="redisTaskExecutor" />
    <property name="subscriptionExecutor" ref="redisSubTaskExecutor" />
</bean>
<bean id="redisTaskExecutor"
    class="org.springframework.scheduling.concurrent.ThreadPoolTaskExecutor">
    <property name="threadNamePrefix" value="RedisListenerThread"></property>
    <property name="corePoolSize" value="1" />
    <property name="maxPoolSize" value="1" />
</bean>
<bean id="redisSubTaskExecutor"
    class="org.springframework.scheduling.concurrent.ThreadPoolTaskExecutor">
    <property name="threadNamePrefix" value="RedisSubscribeThread"></property>
    <property name="corePoolSize" value="1" />
    <property name="maxPoolSize" value="1" />
</bean>
<bean id="messageListener"
    class="org.springframework.data.redis.listener.adapter.MessageListenerAdapter">
    <constructor-arg index="0">
        <bean class="my.data.Receiver" />
    </constructor-arg>
    <constructor-arg index="1"><value>receive</value></constructor-arg>
</bean>

我们偶尔会在数据读取过程中面临生产问题。

  

org.springframework.data.redis.RedisConnectionFailureException:意外的流结束。嵌套异常是redis.clients.jedis.exceptions.JedisConnectionException:意外的流结束。       在org.springframework.data.redis.connection.jedis.JedisExceptionConverter.convert(JedisExceptionConverter.java:47)       在org.springframework.data.redis.connection.jedis.JedisExceptionConverter.convert(JedisExceptionConverter.java:36)       在org.springframework.data.redis.PassThroughExceptionTranslationStrategy.translate(PassThroughExceptionTranslationStrategy.java:37)       在org.springframework.data.redis.FallbackExceptionTranslationStrategy.translate(FallbackExceptionTranslationStrategy.java:37)       在org.springframework.data.redis.connection.jedis.JedisConnection.convertJedisAccessException(JedisConnection.java:182)       在org.springframework.data.redis.connection.jedis.JedisConnection.get(JedisConnection.java:1087)       在org.springframework.data.redis.connection.DefaultStringRedisConnection.get(DefaultStringRedisConnection.java:276)       在org.springframework.data.redis.core.DefaultValueOperations $ 1.inRedis(DefaultValueOperations.java:46)       在org.springframework.data.redis.core.AbstractOperations $ ValueDeserializingRedisCallback.doInRedis(AbstractOperations.java:50)       在org.springframework.data.redis.core.RedisTemplate.execute(RedisTemplate.java:190)       在org.springframework.data.redis.core.RedisTemplate.execute(RedisTemplate.java:152)       在org.springframework.data.redis.core.AbstractOperations.execute(AbstractOperations.java:84)       在org.springframework.data.redis.core.DefaultValueOperations.get(DefaultValueOperations.java:43)

我已经阅读了其他讨论使用单线程进行读/写的线程。但在我们的例子中,很难使用单线程。另外,根据RedisTemplate文档,它是线程安全的。 问题是偶然的,我们无法在任何dev / testing / uat环境中重现。因此无法找到相同的确切原因。 我们做错了什么?

2 个答案:

答案 0 :(得分:4)

我们已经能够重现该问题,原因是Redis中的“timeout = 30”设置。

方案

  1. 连接空闲30秒,Redis杀死相同的连接。
  2. 在应用程序中的“Redis连接工厂”之前检测到损坏 连接,它获取读或写请求的分配
  3. 代码 尝试使用此连接,但由于它已被破坏,它无法使用 发送读/写命令。因此我们得到“JedisConnectionException: 意外的流结束“异常
  4. 解决方案

    1. 将Redis超时设置为零
    2. 使用自定义JedisPoolConfig设置 minEvictableIdleTimeMillis为期望值。这将确保 空闲连接从Jedis连接池中释放

答案 1 :(得分:0)

对于那些在 docker 中运行 redis 的人:不要忘记将其绑定到 0.0.0.0 而不是 127.0.0.1