百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术资源 > 正文

Python使用MySQL指南(python 实时读取mysql数据库遍历每一条数据)

off999 2024-10-12 06:15 41 浏览 0 评论

MySQL 是一款非常典型的关系型数据库,其数据通过二维表来存放,所以数据都是按照行列组成在表里,一列就是一个字段,一行就是一条数据。常见的除了 MySQL 以外还有 Oracle,DB2 等。本文将以 MySQL 为基础介绍 Python 如何使用 pymysql 库来操作关系型数据库。

开始使用

pymysql 是 Python3 中推荐使用的数据库操作库。因此在使用之前需要安装该库。

安装 pymsql操作库

pip install pymysql

pymysql 快速上手

import pymysql

db = pymysql.connect(host='localhost', 
                     user='root', 
                     password='root')
cursor = db.cursor()
cursor.execute("CREATE DATABASE IF NOT EXISTS `test`")
cursor.execute("USE `test`")
cursor.execute(
    "CREATE TABLE IF NOT EXISTS `test` (`id` int(11) NOT NULL AUTO_INCREMENT,`name` varchar(255) NOT NULL,`email` varchar(255) NOT NULL,`password` varchar(255) NOT NULL,PRIMARY KEY (`id`))")
cursor.execute(
    "INSERT INTO `test` (`name`, `email`, `password`) VALUES ('test', 'test', 'test')")
db.commit()
db.close()
print("Done")

如上边代码中, 通过使用 connect 方法来创建一个 MySQL 的连接对象,在创建之前需要传递 host (数据库地址),user(用户名)和 password(密码) 三个参数。同时还可以指定 port 端口(默认为 3306,可以不传),database(使用的数据库, 可不传, 但需后后续手动指定)。连接成功后调用 cursor 方法获取数据库的游标,此时就可以使用 execute 方法来执行数据库 sql 语句了,执行成功后需调用 commit close 提交事务关闭连接,此时,我们去查看数据库,就可以看到数据成功插入到数据库中,如下图:

表操作及数据增删改(CUD)

pymysql 中在执行数据库操作时,需要先调用 cursor 方法来获取 MySQL 操作游标后续都使用游标来执行相应的 SQL 语句

创建数据库

创建数据库的过程非常简单,只需要获取到游标后,执行创建库的 sql 即可

cursor = db.cursor()
cursor.execute("CREATE DATABASE IF NOT EXISTS `test`")

需要注意的是,在创建的连接的时候可以指定要操作哪个数据库(database 参数),游标默认会使用该库,如果需要使用新创建的库,需要手动调用 cursor.execute("USE `test`") 来指定要执行的库。不过如果在创建连接的时候没有指定数据库,那手动指定使用哪个库,就是一个必须的步骤不能省略

创建表

在指定使用哪个库后,即可执行创建表的 SQL 语句来完成表创建。

cursor.execute(
    "CREATE TABLE IF NOT EXISTS `test` (`id` int(11) NOT NULL AUTO_INCREMENT,`name` varchar(255) NOT NULL,`email` varchar(255) NOT NULL,`password` varchar(255) NOT NULL,PRIMARY KEY (`id`))")

需要注意的是,在执行完 execute 后,需要继续调用 commit 方法才能实现数据插入。后续更新,删除等操作也需要 commit 才可以生效。

修改数据

修改数据依然执行相应的 sql 语句就行,并且在修改成功后返回执行修改的条数,因此可以根据返回值判断是否执行成功。

count = cursor.execute("update test set password = 'test2' where id = 2")

删除数据

删除数据和修改操作相同,也能获取到删除的条数,用于判断是否删除成功。

count = cursor.execute("delete from test where id = 2")
  1. execute 方法还可以使用占位符来执行 SQL,只需要在 SQL 语句中使用%s 占位,并在参数 args 里设置占位的填充数据(参数为元组)即可。
cursor.execute("update test set password = %s where id = %s", ("test", 1))
  1. 对数据库执行操作完成后, 始终需要调用commit方法,否则可能会导致数据丢失的情况。

查询数据

数据库中最为重要的功能就是查询,使用 pymsql 执行查询时,会有一些不同,需要使用到 fetch ,fetchall 和 fetchmany 方法。

import pymysql

db = pymysql.connect(host='localhost', 
                     user='root', 
                     password='root', 
                     port=3306, 
                     database='test')
cursor = db.cursor()
sql_str = "select * from test"
res = cursor.execute(sql_str)
one = cursor.fetchone()

print(res)
print(one)

# 2
# (1, 'test', 'test', 'test')

如上边代码所示,依然使用 connect 获取数据库的连接, 使用 cursor 获取到数据库的游标,需要注意的是,使用 execute 执行查询 sql 语句后,获得的结果是结果条数,并不是结果内容,需要使用 fetch*方法来获取里边的内容。

fetchone:该方法可以获取到结果的第一条数据,返回的内容会存到一个元组中,需要注意的是,每次调用 fetchone 都会使查询游标向下移动,直到没有任何数据时,返回 None,因此可以使用 while 循环一直调用 fetchone 方法来获取所有的数据。

fetchall:该方法可以获取到所有的数据,查询的结果每条数据集结果都会被存放到元组中。

fetchmany:该方法用于获取指定条数的数据结果,参数 size 可以指定查询的条数。

使用查询功能时,需要注意以下问题:

1. fetch*方法中获取到的数据,在元组中和数据库中的字段顺序是一一对应的。

2. 每次调用 fetch 方法都会使游标向下移动,因此,组合使用 fetch 方法需要注意实际获取到的可能与预想的情况不一致。比如,调用完 fetchone 后再调用 fetchall,则 fetchall 获取的结果中就会少了 fetchone 的数据,根本原因就是游标被移动了。

事务回滚

事务机制是数据库确保数据一致性的重要功能,简单的理解为,当同时执行多个数据库操作的时候,要么都完成,要么都失败,不允许有部分成功的情况,这就是事务的最基础表现。因此在上边的增,删,改的代码逻辑中,执行完成后必须要调用一次 commit,就相当于将当前的事务提交。因此如果需要确保事务的一致性,就需要确保所有的操作都需要再同一个事务下来完成,只要中途有一次完成了 commit,则当前事务就会被提前终止。

因此这里就引出一个非常重要的概念,事务回滚。当同一个事务下,其中一条执行出错的时候,就需要回滚当前事务,在 pymysql 中使用 rollback 来完成事务的回滚

import pymysql

db = pymysql.connect(host='localhost', user='root', password='root', port=3306, database='test')
cursor = db.cursor()
try:
    cursor.execute("INSERT INTO `test` (`name`, `email`, `password`) VALUES ('test0', 'test0', 'test0')")
    1 / 0
    cursor.execute("INSERT INTO `test` (`name`, `email`, `password`) VALUES ('test1', 'test1', 'test1')")
    db.commit()
    print("success")
except:
    print("error")
    db.rollback()

db.close()

如上述代码中,在同一个事务中执行两条插入数据操作,其中在第一条和第二条中间故意放置一个引起错误的代码,此时,由于代码错误引起异常被捕获,进入到 except 块中,执行 rollbac 回滚当前事务,因此第一条执行成功的数据也不会被记录到库中。只有当两条同时执行成功,并且调用了 commit 才可以完成数据插入。

相关推荐

阿里云国际站ECS:阿里云ECS如何提高网站的访问速度?

TG:@yunlaoda360引言:速度即体验,速度即业务在当今数字化的世界中,网站的访问速度已成为决定用户体验、用户留存乃至业务转化率的关键因素。页面加载每延迟一秒,都可能导致用户流失和收入损失。对...

高流量大并发Linux TCP性能调优_linux 高并发网络编程

其实主要是手里面的跑openvpn服务器。因为并没有明文禁p2p(哎……想想那么多流量好像不跑点p2p也跑不完),所以造成有的时候如果有比较多人跑BT的话,会造成VPN速度急剧下降。本文所面对的情况为...

性能测试100集(12)性能指标资源使用率

在性能测试中,资源使用率是评估系统硬件效率的关键指标,主要包括以下四类:#性能测试##性能压测策略##软件测试#1.CPU使用率定义:CPU处理任务的时间占比,计算公式为1-空闲时间/总...

Linux 服务器常见的性能调优_linux高性能服务端编程

一、Linux服务器性能调优第一步——先搞懂“看什么”很多人刚接触Linux性能调优时,总想着直接改配置,其实第一步该是“看清楚问题”。就像医生看病要先听诊,调优前得先知道服务器“哪里...

Nginx性能优化实战:手把手教你提升10倍性能!

关注△mikechen△,十余年BAT架构经验倾囊相授!Nginx是大型架构而核心,下面我重点详解Nginx性能@mikechen文章来源:mikechen.cc1.worker_processe...

高并发场景下,Spring Cloud Gateway如何抗住百万QPS?

关注△mikechen△,十余年BAT架构经验倾囊相授!大家好,我是mikechen。高并发场景下网关作为流量的入口非常重要,下面我重点详解SpringCloudGateway如何抗住百万性能@m...

Kubernetes 高并发处理实战(可落地案例 + 源码)

目标场景:对外提供HTTPAPI的微服务在短时间内收到大量请求(例如每秒数千至数万RPS),要求系统可弹性扩容、限流降级、缓存减压、稳定运行并能自动恢复。总体思路(多层防护):边缘层:云LB...

高并发场景下,Nginx如何扛住千万级请求?

Nginx是大型架构的必备中间件,下面我重点详解Nginx如何实现高并发@mikechen文章来源:mikechen.cc事件驱动模型Nginx采用事件驱动模型,这是Nginx高并发性能的基石。传统...

Spring Boot+Vue全栈开发实战,中文版高清PDF资源

SpringBoot+Vue全栈开发实战,中文高清PDF资源,需要的可以私我:)SpringBoot致力于简化开发配置并为企业级开发提供一系列非业务性功能,而Vue则采用数据驱动视图的方式将程序...

Docker-基础操作_docker基础实战教程二

一、镜像1、从仓库获取镜像搜索镜像:dockersearchimage_name搜索结果过滤:是否官方:dockersearch--filter="is-offical=true...

你有空吗?跟我一起搭个服务器好不好?

来人人都是产品经理【起点学院】,BAT实战派产品总监手把手系统带你学产品、学运营。昨天闲的没事的时候,随手翻了翻写过的文章,发现一个很严重的问题。就是大多数时间我都在滔滔不绝的讲理论,却很少有涉及动手...

部署你自己的 SaaS_saas如何部署

部署你自己的VPNOpenVPN——功能齐全的开源VPN解决方案。(DigitalOcean教程)dockovpn.io—无状态OpenVPNdockerized服务器,不需要持久存储。...

Docker Compose_dockercompose安装

DockerCompose概述DockerCompose是一个用来定义和管理多容器应用的工具,通过一个docker-compose.yml文件,用YAML格式描述服务、网络、卷等内容,...

京东T7架构师推出的电子版SpringBoot,从构建小系统到架构大系统

前言:Java的各种开发框架发展了很多年,影响了一代又一代的程序员,现在无论是程序员,还是架构师,使用这些开发框架都面临着两方面的挑战。一方面是要快速开发出系统,这就要求使用的开发框架尽量简单,无论...

Kubernetes (k8s) 入门学习指南_k8s kubeproxy

Kubernetes(k8s)入门学习指南一、什么是Kubernetes?为什么需要它?Kubernetes(k8s)是一个开源的容器编排系统,用于自动化部署、扩展和管理容器化应用程序。它...

取消回复欢迎 发表评论: