V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
S2Line
V2EX  ›  问与答

异构数据库实时同步问题(解决方案)

  •  
  •   S2Line · 2021-02-26 19:12:28 +08:00 · 1108 次点击
    这是一个创建于 1400 天前的主题,其中的信息可能已经有所发展或是发生改变。

    老哥们有遇到异构数据库同步的场景吗?\n 有没有好的解决方案,我目前知道的有:\n 一、商业的数据库同步软件:IBM CDC 、各大云厂商售卖的服务。\n 优点:有厂商提供服务、风险较低。 \n 缺点:数据库类型支持较少(一般只支持自己公司的数据库和开源数据库,不支持其他商用数据库)。\n

    二、开源的数据库同步软件:otter 、datax 、canal 等\n 优点:可以进行二次开发,灵活支持各种类型数据库数据源。\n
    缺点:风险不可控,需要投入较大成本。\n

    需求是多种不同数据库需要实现实时同步,比如 GaussDB 、TiDB 、TDSQL 、OceanBase 、MySQL 、oracle 之间的 \n 网上找了找、和厂商也沟通过,好像没有成熟的解决方案,是不是必需要自己实现? \n

    10 条回复    2021-03-03 20:54:00 +08:00
    S2Line
        1
    S2Line  
    OP
       2021-02-26 19:18:25 +08:00
    这个格式也是醉了,V 站怎么让文本换行呢?
    S2Line
        2
    S2Line  
    OP
       2021-02-26 19:20:42 +08:00
    有没有大佬能提点一下,扩展思路。并且自己写还会引入很多其他问题,比如高可用之类的,难顶啊。
    有没有成熟的商用异构数据库同步软件推荐?
    icedir
        3
    icedir  
       2021-02-26 19:21:54 +08:00
    我们是用 canal
    S2Line
        4
    S2Line  
    OP
       2021-02-26 19:23:31 +08:00
    @icedir 能说明下使用的场景吗?
    zxCoder
        5
    zxCoder  
       2021-02-27 11:03:51 +08:00
    @S2Line markdown 中间空一行
    icedir
        6
    icedir  
       2021-03-01 11:56:31 +08:00
    @S2Line 给我们的内部管理系统使用,解决近实时异构数据的复杂查询的问题。
    icedir
        7
    icedir  
       2021-03-01 11:57:00 +08:00
    @S2Line 因为是内部系统查询用,所以稳定性不需要特别高。
    S2Line
        8
    S2Line  
    OP
       2021-03-01 19:51:30 +08:00
    @icedir 好吧,那场景不太一样,我们需要可靠性极高(要对同步软件做高可用),我在研究研究。
    icedir
        9
    icedir  
       2021-03-03 11:11:41 +08:00
    @S2Line 哈哈,有结论了可以在 V 站 po 一下啊
    S2Line
        10
    S2Line  
    OP
       2021-03-03 20:54:00 +08:00
    @icedir OK
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2856 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 22ms · UTC 08:35 · PVG 16:35 · LAX 00:35 · JFK 03:35
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.