用 pymysql 连接、读取MySQL数据库,并将读取数据处理为DataFrame对象.pdfVIP

用Python的pymysql连接、读取MySQL数据库，

并将读取数据处理为DataFrame对象

一、前言

环境：

windows1164位

Python3.9（anaconda3）

MySQL8

pandas1.4.2

使用Python操作MySQL是数据科学和数据工程领域中一个重要的技能。

本文将介绍如何通过Python读取读取MySQL数据库，包括连接MySQL数据库、读取数据、

处理数据等方面的内容，同时将介绍通过三种方法进行操作，分别通过pymysql、MySQLdb和

sqlalchemy进行读取数据。

二、通过pymysql获取MySQL数据

2.1连接数据库

在使用Python读取MySQL数据库之前，需要先连接MySQL数据库。使用pymysql连接数

据库时，需要先安装pymysql库，在终端输入以下命令，等待安装完成即可。

pipinstallpymysql

安装完，可以在Python代码中，使用以下代码连接MySQL数据库：

注：把自己MySQL数据库的相关信息修改一下即可发起连接。

importpymysql

db=pymysql.connect(

主机地址

,post=端口号

用户名

密码

数据库名

)

cursor=db.cursor()

2.2读取数据

连接MySQL数据库之后，我们可以使用Python读取MySQL数据库中的数据，在pymysql

中，查询数据的方法为execute()。

我们可以使用select语句查询MySQL数据库中的数据，并将数据存放在Python的变量中。

在Python中，可以使用以下代码查询MySQL数据库中的数据：

#sql代码

sql=selectxxx

#执行查询

cursor.execute(sql)

#获取所有记录并打印

results=cursor.fetchall()

print(results)

#关闭游标和数据库连接，释放资源

cursor.close()

db.close()

2.3处理数据

读取到MySQL数据之后，我们可以使用Python对数据进行处理。

数据赋值给Python变量cursor，不过他是一个pymysql.cursors.Cursor对象，数据使用起

来比较麻烦，这里考虑将数据集转化为Pandas的DataFrame对象，方便做数据处理和分析。

前面我们通过cursor.fetchall()获取所有的行数据，返回的数据结构为((第1行数据),(

第2行数据),(第3行数据)……)，每一行数据的每一个值通过逗号隔开。

但这只是获取了数据，没有表头，如果要获取表头可以通过pymysql提供的另外一个属性接

口：cursor.description。打印该属性接口返回的数据，我们可以发现，它不仅仅是单纯是一

个记录字段名的元组，数据结构跟cursor.fetchall()相似，除了返回字段名，还有字段的类

型，字段的宽度，字段的精度，字段的标记，字段的索引位置，字段是否可为空。所以在拼接

数据时，我们需要把字段名单独提取出来。

为了更加直观，下面我拿我本地的MySQL数据库做一个示例。

首先我使用的SQL代码如下

selectuser_id,sex,age,mobilefromuserslimit5;

在MySQL中，检索结果如下：

通过Python查询MySQL数据

importpymysql

importpandasaspd

#账户密码

db=pymysql.connect(

host=127.0.0.1,port=3306,

user=账户,passwd=密码,#输入自己的账户