humbass
V2EX  ›  Node.js

数据同步大家都有什么方法?

  •  
  •   humbass · Oct 19, 2022 · 6938 views
    This topic created in 1492 days ago, the information mentioned may be changed or developed.

    1 台主服务器 有用户数据,可能有用户信息的增删改 N 台从服务器 同步主服务器用户最新的数据

    数据库不一定是 mysql ,也可能是 mongodb, 如果有第三方的机制更好,请教各位有没有简单易操作的方法?

    13 replies  •  2024-09-14 15:44:27 +08:00
    lmshl
    lmshl
    Oct 19, 2022
    1
    jabari
    jabari
    Oct 19, 2022
    2
    cdc(change data capture)
    daoqiongsi1101
    daoqiongsi1101
    Oct 19, 2022
    3
    不同的数据源可以把数据变更同步到 kafka 的 topic ,其他服务器订阅 topic
    humbass
    humbass
    OP
    Oct 19, 2022
    4
    @jabari 这个比较容易理解,正在看阿里云的 rocketMQ
    humbass
    humbass
    OP
    Oct 19, 2022
    5
    @daoqiongsi1101 正在看阿里云的 队列服务,感谢!
    Jemini
    Jemini
    Oct 19, 2022 via iPhone
    6
    冷门的 kafka connect
    brader
    brader
    Oct 19, 2022
    7
    可以看下这个中间件适合不适合你用 https://github.com/brokercap/Bifrost
    humbass
    humbass
    OP
    Oct 19, 2022
    8
    @brader 页面介绍做的相当酷!
    tyrantlucifer
    tyrantlucifer
    Oct 20, 2022
    9
    Apache SeaTunnel 或者 DataX
    frank1256
    frank1256
    Oct 20, 2022
    10
    dataX
    HappyXiaoxin
    HappyXiaoxin
    Oct 20, 2022
    11
    kettle
    gabriel_zhen
    gabriel_zhen
    Oct 20, 2022
    12
    简单的 国内有个 restcloud 社区版 是类似 kettle 的工具 ,图形化界面 ,好像有同步组件 同步是 sql 级别的 不是日志级的 数据量小的可以用用
    qbmiller
    qbmiller
    Sep 14, 2024
    13
    @gabriel_zhen 这么多年,还没开源....
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   2337 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 39ms · UTC 13:42 · PVG 21:42 · LAX 05:42 · JFK 08:42
    ♥ Do have faith in what you're doing.