V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
MySQL 5.5 Community Server
MySQL 5.6 Community Server
Percona Configuration Wizard
XtraBackup 搭建主从复制
Great Sites on MySQL
Percona
MySQL Performance Blog
Severalnines
推荐管理工具
Sequel Pro
phpMyAdmin
推荐书目
MySQL Cookbook
MySQL 相关项目
MariaDB
Drizzle
参考文档
http://mysql-python.sourceforge.net/MySQLdb.html
Geekerstar
V2EX  ›  MySQL

Mysql 中的 JSON 字段如何清洗出来?

  •  
  •   Geekerstar · 2021-10-26 16:14:22 +08:00 · 3314 次点击
    这是一个创建于 1131 天前的主题,其中的信息可能已经有所发展或是发生改变。

    由于历史原因,一个 MySQL 表里有个字段存的是 JSON 字符串,现在需要将这个 JSON 字符串转为结构化数据,做一些处理,有没有好的办法做清洗呢?

    11 条回复    2021-12-01 15:16:19 +08:00
    nemo95
        1
    nemo95  
       2021-10-26 16:35:34 +08:00
    pandas 不是有个 read_json 的函数吗
    NjcyNzMzNDQ3
        2
    NjcyNzMzNDQ3  
       2021-10-26 16:56:12 +08:00   ❤️ 1
    mysql 只能这种写法

    SELECT JSON_EXTRACT(column, "$[0].desc");
    CEBBCAT
        3
    CEBBCAT  
       2021-10-26 17:10:39 +08:00
    什么叫结构化数据? JSON 已经是结构化数据了呀
    RangerWolf
        4
    RangerWolf  
       2021-10-26 17:58:18 +08:00   ❤️ 1
    @CEBBCAT 我理解 json 最多应该是半结构化数据~
    heart4lor
        5
    heart4lor  
       2021-10-26 18:48:55 +08:00
    json 怎么就半结构化了 -_-|| 各语言反序列化不就拿到了吗
    ETiV
        6
    ETiV  
       2021-10-26 18:52:06 +08:00 via iPhone
    他点意思应该是 json =schemeless
    liuxu
        7
    liuxu  
       2021-10-26 19:18:06 +08:00
    mysql5.7 支持 JSON 类型,然后创建虚拟字段或者直接 ORM
    littlewing
        8
    littlewing  
       2021-10-26 19:46:34 +08:00
    mysql 的 json 类型支持直接按 key 读取,也支持安某一个 key 建索引,没必要拆开吧
    davionnini
        9
    davionnini  
       2021-10-26 19:46:57 +08:00
    数据量不大用脚本就行,还是控制时间和速度
    fuchaofather
        10
    fuchaofather  
       2021-10-27 10:08:21 +08:00
    数据量不大写个脚本就行了
    onhao
        11
    onhao  
       2021-12-01 15:16:19 +08:00
    @Geekerstar https://wuhao.pw/archives/244/
    这个不知道行不行 mysql json_table 与表关联的有效查法
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2835 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 25ms · UTC 09:02 · PVG 17:02 · LAX 01:02 · JFK 04:02
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.