drymonfidelia
V2EX  ›  数据库

计数器的最佳实践是存 Redis,每次启动时统计存量数据吗?用 MySQL 的触发器每次操作都实时写盘影响高并发写性能,用 Redis 断电没写盘会导致计数不准

  •  
  •   drymonfidelia · Sep 12, 2024 · 2794 views
    This topic created in 801 days ago, the information mentioned may be changed or developed.
    9 replies  •  2024-09-13 16:19:27 +08:00
    D0n9
    D0n9
    Sep 12, 2024
    1
    在说什么?
    ZhLTE
    ZhLTE
    Sep 12, 2024
    2
    多搞几台服务器,做集群,定时检测是否断电,定时同步状态,定时持久化数据备份
    drymonfidelia
    drymonfidelia
    OP
    Sep 12, 2024
    3
    @D0n9 例如每个商品订单量之类的计数器,如果下单时+1 会增加查询数量
    momo1999
    momo1999
    Sep 12, 2024
    4
    既然 redis 断电不写盘,那为什么 mysql 能写盘。
    IvanLi127
    IvanLi127
    Sep 12, 2024
    5
    上 redis 集群,每个节点独立供电。
    Chinsung
    Chinsung
    Sep 13, 2024
    6
    这种一般是 redis 没有就从 DB 读,然后有的话就 redis 里加加,定时任务或者 mq 这些异步机制去做同步吧,不过这样本质和 redis 的 aof 其实就是只处理这个值的而已,开销少很多,因为 aof 本身是所有写都记录的,如果你的计数器更新频繁,断电了你的部分更新大概率还在 buffer 里,肯定没写盘
    一致性要求高点,可以 redis 里加完,丢一条 mq 更新 db ,要么 mq 里直接记着当前值,要么消费 mq 的时候去 redis 查一下再更新 db 的值,保证下不要往小更新或者注意下更新时间就行
    一致性要求再高点,那就 db 不存数值,每次启动 count 订单数到 redis 里去维护
    wxf666
    wxf666
    Sep 13, 2024
    7
    @Chinsung #6

    1. 会不会多个请求,同时发现 redis 里没有,又都从 DB 读,导致多次消耗,却只有一次记录呢?

    2. 感觉楼主不是关注一致性问题,而是 redis 持久性没得到保证问题。。
    fuis
    fuis
    Sep 13, 2024
    8
    这个问题,可以换高性能 SSD 解决;如果还是不想落盘,服务器可以增加 UPS ,断电的有通知,用电池的电量撑到落盘结束再下电。
    Chinsung
    Chinsung
    Sep 13, 2024
    9
    @wxf666 #7
    1. 这种没有银弹的,如果访问频率不高,那么就允许这部分性能突刺,如果高,就要考虑预热方案
    2. 这个场景下持久化失败或者持久化的延迟,带来的就是一致性问题啊,redis 这种 aof 的异步写不可能保证内存和硬盘强一致的,本身 mysql 就是考虑这种权衡做了 trade-off ,你如果既要又要,那么得针对这种场景定制一个持久化方案了

    其实还有个办法,把硬盘的性能提升到支持足够低的 aof 延迟并且修改下 aof 的策略,或者单独拆一个 redis 出来专门搞这个 key ,这样在量不大的情况下,或许可以满足当下的场景
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   2097 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 34ms · UTC 12:59 · PVG 20:59 · LAX 04:59 · JFK 07:59
    ♥ Do have faith in what you're doing.