V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
ligyxy
V2EX  ›  Python

DictMySQL - 一个 Python MySQL 类,实现 JSON like query

  •  3
     
  •   ligyxy ·
    gyli · 2016-01-18 07:25:03 +08:00 · 2475 次点击
    这是一个创建于 3268 天前的主题,其中的信息可能已经有所发展或是发生改变。
    工作中需要写不少数据变换的小脚本,读写数据的行数也较多,因此并不喜欢用 ORM 工具。于是自己写了一个基于 PyMySQL 的数据库封装类,便于数据操作。比较有趣的部分是为了支持复杂的 WHERE 和 JOIN 语句,实现了把 dict 拼接成 SQL ,这样输入的参数是一些 JSON like query 。

    开发中借鉴了 Medoo 的一些内容,比如 JOIN 、别名和 SQL 函数的符号化表示等,感谢 Medoo 的作者。

    使用例子请移步 Github : https://github.com/ligyxy/DictMySQL

    文档: https://ligyxy.github.io/DictMySQL
    9 条回复    2016-01-18 12:20:39 +08:00
    fy
        1
    fy  
       2016-01-18 08:30:33 +08:00
    蛤蛤 楼主你不喜欢 ORM 但这不也搞了一个 ORM 的轮子吗?

    我觉得 JSON 有个劣势就是不能像是语义的 ORM 一样补全,当然见仁见智。

    项目开源的很专业,已 star 。

    赞一个,资慈分享
    tabris17
        2
    tabris17  
       2016-01-18 09:04:59 +08:00   ❤️ 1
    老实说,我最恨 Mongo 这种用 JSON 做查询语句的了
    master13
        3
    master13  
       2016-01-18 09:15:18 +08:00
    赞一个
    顺便求 readme 写中文……
    sujin190
        4
    sujin190  
       2016-01-18 09:22:15 +08:00
    所有查询使用同一个 cursor ,如果其中一个查询只读取部分数据然后就开始下一个查询不会出错么?
    ligyxy
        5
    ligyxy  
    OP
       2016-01-18 11:06:23 +08:00
    @sujin190 这种情况要有个连接池或者自己来操作 cursor 了吧? 有什么更好的办法?
    sujin190
        6
    sujin190  
       2016-01-18 11:11:47 +08:00
    @ligyxy 不如说你查出来有 100 条数据,但只用了 fetchone 取了第一条,然后就开始第二次查询,这种情况会出错的吧,不应该每次查询打开新的 cursor ,完成之后关闭 cursor 么?我看 pymysql 底层 cursor 关闭的时候会继续读取剩余数据,然后才关闭 cursor
    ligyxy
        7
    ligyxy  
    OP
       2016-01-18 11:12:30 +08:00
    @fy 它只拼接 SQL 而没有对象. 事先定义数据表结构也是我不喜欢在数据分析的脚本里用 ORM 的原因.
    withrock
        8
    withrock  
       2016-01-18 11:35:34 +08:00
    能否直接移植 mongodb 的查询方式呢? 不然又得学一套 query 方法.
    ligyxy
        9
    ligyxy  
    OP
       2016-01-18 12:20:39 +08:00
    @sujin190 如果只 fetchone 且不关闭 cursor 就开始另一个查询,这倒不会出错,即便在 pymysql 里也没有出错。但是如果要读完所有返回数据才开始下一条确实有点不方便,我才刚开始看 pymysql 的代码。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   997 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 31ms · UTC 18:54 · PVG 02:54 · LAX 10:54 · JFK 13:54
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.