V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
huzhikuizainali
V2EX  ›  机器学习

colab 上如何使用数据库?

  •  
  •   huzhikuizainali · 2021-07-18 23:00:25 +08:00 · 1105 次点击
    这是一个创建于 1258 天前的主题,其中的信息可能已经有所发展或是发生改变。
    我在网上搜了一圈,介绍上传数据的两种方式是:
    1 、将本地 CSV 文件上传到 google drive,然后在在 colab 中用 python 调用 csv 文件中的数据。
    2 、用将数据导入本地数据库例如 sqllite,google drive 的客户端中进行一份设置。使 colab 通过命令经过 google drive 通过网络调用本地 sqllite 中的数据。


    想了想,上述两种方式都有不足。
    第一种方式 csv 文件毕竟不是数据库文件。能承载的数据数量,维度都有限。用 colab 看中的就是 GPU 的算力。如果数据不多,还用 colab 干什么?
    第二种方式考虑到网络传输速率,让 colab 从本机数据库读取数据,这个速度是不是成问题。而且中途网络中断是不是要重读?

    所以,有没有哪位老师知道如何在 colab 上建立数据库,并将本地数据导入到云端数据库并在自己的 colab 环境中直接调用?
    kidcvs
        1
    kidcvs  
       162 天前
    大佬,这么多年过去了,问题解决了么?方便分享一下解决方案吗?
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2572 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 10:52 · PVG 18:52 · LAX 02:52 · JFK 05:52
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.