V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
dododada
V2EX  ›  Redis

redis 数据分析问题

  •  
  •   dododada · 2016-03-10 21:36:33 +08:00 · 4062 次点击
    这是一个创建于 3174 天前的主题,其中的信息可能已经有所发展或是发生改变。

    大家好,手上有个 IM 系统,大部分消息数据都用的 redis ,都存内存里面,内存块耗到一半了,我们现在要分析一下有哪些大的 key ,或者有哪些增长特别快的数据。
    暂时用 redis-memory-alalyzer 把比较大的 key 楼出来了,根据数据过期时间删了一些数据,效果不明显,每天依然会增长 2G 左右的数据。
    我们打算找出两类 key 做分析,一类是大 key ,一类是数量增长快的 key
    当初的业务设计都使用相同的 redis 实例, key 的使用也没有规范,哪位大侠有没有什么有效的方法,可以分析 redis 数据增长的原因,求赐教!

    6 条回复    2016-03-11 13:48:01 +08:00
    leon4770
        1
    leon4770  
       2016-03-11 09:46:15 +08:00
    对于增长过快的 key ,那么缓存时间是不是可以短点
    knightdf
        2
    knightdf  
       2016-03-11 10:11:38 +08:00
    我们做 redis 内存优化是从两方面,一是 key 的个数,二是 key/value 的长度,当然自动删除过期这个是肯定需要的
    michaelOoO
        3
    michaelOoO  
       2016-03-11 10:11:45 +08:00
    https://github.com/hirose31/redis-traffic-stats 这个似乎能找到, 增长速率快的操作。
    dododada
        4
    dododada  
    OP
       2016-03-11 11:16:22 +08:00
    @knightdf redis 的过期策略不是过期之后立即删除,总会留存一些数据
    dododada
        5
    dododada  
    OP
       2016-03-11 11:16:37 +08:00
    @michaelOoO 我研究研究
    knightdf
        6
    knightdf  
       2016-03-11 13:48:01 +08:00
    @dododada 过期策略有主动式和被动式的,主动式取决于你的扫描间隔
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5686 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 08:27 · PVG 16:27 · LAX 00:27 · JFK 03:27
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.