V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
Distributions
Ubuntu
Fedora
CentOS
中文资源站
网易开源镜像站
workaholic
V2EX  ›  Linux

求推荐一种更加稳定架构来定时获取 api 即时数据

  •  
  •   workaholic · 2020-08-01 13:46:34 +08:00 · 1791 次点击
    这是一个创建于 1335 天前的主题,其中的信息可能已经有所发展或是发生改变。

    目前开发需要积累行业数据,数据需要通过 api 每日定期获取,是一种即时数据,过期获取不到历史数据。 除了 linux 的 crond 来执行任务,能否推荐一种更加稳定架构,保证数据 365*24 及时获取不丢数据,谢谢!

    4 条回复    2020-08-02 21:28:13 +08:00
    ragnaroks
        1
    ragnaroks  
       2020-08-01 14:16:04 +08:00   ❤️ 1
    水平拓展任务实例,用量去保证
    hangszhang
        2
    hangszhang  
       2020-08-01 21:07:24 +08:00
    用开源的任务调度框架,那种支持任务失败自动转移的,部署多个执行节点,某个执行节点失败了转移到另外一个去执行
    jimrok
        3
    jimrok  
       2020-08-02 12:54:31 +08:00
    java 跑 akka 的 actor,如果对 actor 模型很熟悉的话
    workaholic
        4
    workaholic  
    OP
       2020-08-02 21:28:13 +08:00
    @hangszhang
    @jimrok
    感谢!
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   2432 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 25ms · UTC 16:09 · PVG 00:09 · LAX 09:09 · JFK 12:09
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.