Python Requests作者另一神作,Records通用而优雅的数据库访问库
sinye56 2024-10-18 12:54 2 浏览 0 评论
我们在开发过程中经常涉及与数据库进行交互,比如MySQL、Oracle、PostgreSQL、Sqlite,一般,我们使用其对应的Python 第三方模块,实现相关数据库操作,如下
- MySQL数据库:mysql-connector,pymysql
- PostgreSQL数据库:psycopg2
- Oracle数据库: cx_Oracle
- SQLite数据库: sqlite3
但这样却使得我们不得不面临一个问题,代码中涉及不同数据库,操作方式也不尽相同,容易出现代码冗余、不规范,风格不统一等等问题。
后来接触到 Python SQLAlchemy(ORM框架)模块,一定程度上解决了各数据库的SQL差异,但 SQLAlchemy 在消除各数据库SQL差异的同时却会引入各框架CRUD的差异。而我们往往就具有一定的SQL基础,如果一个框架强制用户只能使用其规定的CRUD形式那反而增加用户的学习成本,导致长学习曲线。
同时,个人为人直接地执行SQL而不是使用框架设定的CRUD不应当是一种低级的操作应当是一种被鼓厉的标准化行为。
遇到 Records
Records 是一个非常简单且功能强大的库,适用于大多数关系型数据库的 原始SQL操作,三个字,强无敌。
Records 的特点:
- 基于 SQLAlchemy 和 Tablib 开发。
- 方法非常简单且统一。
- 支持缓存查询的数据.
- 自动实现上下文管理器,不需要关注数据连接状态。
- 支持数据库事务,保持数据的原子性和一致性。
- 支持安全的参数化查询,以安全的形式进行动态参数传递,防止 sql 语句不规范导致的安全问题;
- 支持主流数据库,如 RedShift, Postgres, MySQL, SQLite, Oracle, 和 MS-SQL
Records 安装
我们在Windows 10 Python3环境下,使用pip进行安装 ,安装命令如下:
pip install records
安装过程如下:
接下来,我们以SQLite数据库为例,介绍如何使用 Records 进行数据库CRUD操作。
首先,因 Records 是基于 SQLAlchemy 实现的,所以数据库链接方式参考SQLAlchemy ,如下
Records 操作数据的步骤非常的简单,如下:
- 连接数据库,返回 DB 数据库对象。
- 使用 query 方法执行 SQL 语句。
创建表
插入数据
Records 支持安全参数化,使用 :variable 定义变量,通过参数传入完成动态传值,非常适合需要动态加载数据的场景,如批量入库操作。
批量插入
SQL 语句实现数据的批量入库时,操作比较冗余,如果入库数据是动态变化的,代码的复杂度变得更高。 Records 提供的 bulk_query 方法能便捷的插入和更新数据。
数据查询
我们可以通过 all 方法获取所有的记录,first 方法获取第一条记录,支持参数如下:
- as_dict=True:参数转成字典形式。
- as_ordereddict=True:转成排序字典形式。
字段获取
执行上述代码,输出结果如下:
支持数据库事务
数据库事务是经常需要使用到的数据库操作,他通常是为了保持数据原子性和一致性。
比如商品销量与存量的数据库操作:
- 读取商品销量数据。
- 更新商品销量增加1。
- 读取商品存量数量。
- 更新商品存量减少1。
该场景下,我们须保证这 4 步均执行成功。如果第1步已经执行成功,但是到第 3 步发生了错误导致后面数据库操作不能执行,会导致商品销量与存量混乱。records 模块提高了强大的数据库事务支持,通过数据库事务就能避免这种情况,如下:
执行上述代码,我们可以看到,当with中存在失败的执行语句时,历史执行SQL 不生效,如下:
数据导出至xlsx
执行上述代码,实现数据库查询结果的导出到xlsx中,如下:
数据导出为yaml
除此之外,还支持导出为 json, xls, csv, pandas, html 等多种数据格式。
相关推荐
- RHEL8和CentOS8怎么重启网络
-
本文主要讲解如何重启RHEL8或者CentOS8网络以及如何解决RHEL8和CentOS8系统的网络管理服务报错,当我们安装好RHEL8或者CentOS8,重启启动网络时,会出现以下报错:...
- Linux 内、外网双网卡路由配置
-
1.路由信息的影响Linux系统中如果有多张网卡的情况下,如果路由信息配置不正确,...
- Linux——centos7修改网卡名
-
修改网卡名这个操作可能平时用不太上,可作为了解。修改网卡默认名从ens33改成eth01.首先修改网卡配置文件名(建议将原配置文件进行备份)...
- CentOS7下修改网卡名称为ethX的操作方法
-
?Linux操作系统的网卡设备的传统命名方式是eth0、eth1、eth2等,而CentOS7提供了不同的命名规则,默认是基于固件、拓扑、位置信息来分配。这样做的优点是命名全自动的、可预知的...
- Linux 网卡名称enss33修改为eth0
-
一、CentOS修改/etc/sysconfig/grub文件(修改前先备份)为GRUB_CMDLINE_LINUX变量增加2个参数(net.ifnames=0biosdevname=0),修改完成...
- CentOS下双网卡绑定,实现带宽飞速
-
方式一1.新建/etc/sysconfig/network-scripts/ifcfg-bond0文件DEVICE=bond0IPADDR=191.3.60.1NETMASK=255.255.2...
- linux 双网卡双网段设置路由转发
-
背景网络情况linux双网卡:网卡A(ens3)和网卡B(...
- Linux-VMware设置网卡保持激活
-
Linux系统只有在激活网卡的状态下才能去连接网络,进行网络通讯。修改配置文件(永久激活网卡)...
- VMware虚拟机三种网络模式
-
01.VMware虚拟机三种网络模式由于linux目前很热门,越来越多的人在学习linux,但是买一台服务放家里来学习,实在是很浪费。那么如何解决这个问题?虚拟机软件是很好的选择,常用的虚拟机软件有v...
- 2023年最新版 linux克隆虚拟机 解决网卡uuid重复问题
-
问题描述1、克隆了虚拟机,两台虚拟机里面的ip以及网卡的uuid都是一样的2、ip好改,但是uuid如何改呢?解决问题1、每台主机应该保证网卡的UUID是唯一的,避免后面网络通信有问题...
- Linux网卡的Vlan配置,你可能不了解的玩法
-
如果服务器上连的交换机端口已经预先设置了TRUNK,并允许特定的VLAN可以通过,那么服务器的网卡在配置时就必须指定所属的VLAN,否则就不通了,这种情形在虚拟化部署时较常见。例如在一个办公环境中,办...
- Centos7 网卡绑定
-
1、切换到指定目录#备份网卡数据cd/etc/sysconfig/network-scriptscpifcfg-enp5s0f0ifcfg-enp5s0f0.bak...
- Linux搭建nginx+keepalived 高可用(主备+双主模式)
-
一:keepalived简介反向代理及负载均衡参考:...
- Linux下Route 路由指令使用详解
-
linuxroute命令用于显示和操作IP路由表。要实现两个不同子网之间的通信,需要一台连接两个网络的路由器,或者同时位于两个网络的网关来实现。在Linux系统中,设置路由通常是为了解决以下问题:该...
你 发表评论:
欢迎- 一周热门
- 最近发表
- 标签列表
-
- oracle忘记用户名密码 (59)
- oracle11gr2安装教程 (55)
- mybatis调用oracle存储过程 (67)
- oracle spool的用法 (57)
- oracle asm 磁盘管理 (67)
- 前端 设计模式 (64)
- 前端面试vue (56)
- linux格式化 (55)
- linux图形界面 (62)
- linux文件压缩 (75)
- Linux设置权限 (53)
- linux服务器配置 (62)
- mysql安装linux (71)
- linux启动命令 (59)
- 查看linux磁盘 (72)
- linux用户组 (74)
- linux多线程 (70)
- linux设备驱动 (53)
- linux自启动 (59)
- linux网络命令 (55)
- linux传文件 (60)
- linux打包文件 (58)
- linux查看数据库 (61)
- linux获取ip (64)
- linux进程通信 (63)