Python3使用xlrd和pymysql将Excel数据导入MySQL
本文详解如何在Python3环境下,利用xlrd库读取Excel文件数据,并通过pymysql模块将解析后的数据写入MySQL数据库。文章涵盖环境配置、依赖安装及核心代码实现,帮助开发者快速掌握数据自动化入库流程,适用于日常报表处理与数据迁移场景。
Python在数据分析领域具有显著优势。
开展数据分析工作的首要环节,是掌握如何读取工作中产生的各类Excel报表,并将数据存入数据库,以便进行后续处理。
本文介绍Python3环境下,如何使用xlrd库读取Excel文件,并结合pymysql模块将数据存入MySQL数据库的操作方法。
前言
pymysql是Python中用于操作MySQL的模块,其用法与MySQLdb基本一致。不同之处在于,pymysql支持Python3.x版本,而MySQLdb不支持。
Python操作Excel主要依赖xlrd和xlwt两个库:xlrd用于读取Excel,xlwt用于写入Excel。
版本要求
Python >= 3.6
MySQL >= 5.7.19
安装说明
Python和MySQL的安装过程此处不再赘述,用户可自行查阅相关资料完成安装。
xlrd库可通过pip命令安装,也可下载源码手动安装。使用pip安装的命令为:pip install xlrd
pymysql库同样支持pip安装或源码手动安装。使用pip安装的命令为:pip install pymysql
模块说明
import xlrd import pymysql from datetime import datetime from xlrd import xldate_as_tuple
读取Excel数据
data = xlrd.open_workbook("D:/sales_data.xls") //读取D盘中名为sales_data的excel表格
table_one = data.sheet_by_index(0) //根据sheet索引获取sheet的内容
table_two = data.sheet_by_index(1)
建立数据库连接
db = pymysql.connect("localhost", "root", "gaishi123", "sales_data", use_unicode=True, charset="utf8")
示例中,gaishi123为MySQL的root用户密码,sales_data为指定的数据库名称。
for site in sites:
# 遍历sheet1
for nrows_one in range(1, int(table_one.nrows)):
if table_one.cell_value(nrows_one, 0) == site:
payday = table_one.cell_value(0, 8)
date = datetime(*xldate_as_tuple(payday, 0))
payday = date.strftime('%Y/%m/%d') # 出票日期
sales = float(table_one.cell_value(nrows_one, 1)) # 销量
quantity_ticket = int(table_one.cell_value(nrows_one, 2)) # 票数
rate_electronic = float(table_one.cell_value(nrows_one, 3)) # 电子直销占比
sales_thanlastweek = float(table_one.cell_value(nrows_one, 4)) # 销量同比上周
sales_thanlastyear = float(table_one.cell_value(nrows_one, 5)) # 销量同比去年
break
# 遍历sheet2
for nrows_two in range(1, int(table_two.nrows)):
if table_one.cell_value(nrows_two, 0) == site:
session = int(table_two.cell_value(nrows_two, 1)) # 访问量
rate_conversion = float(table_two.cell_value(nrows_two, 2)) # 转化率
rate_paysuccess = float(table_two.cell_value(nrows_two, 3)) # 支付成功率
session_thanlastweek = float(table_two.cell_value(nrows_two, 4)) # 访问量同比上周
break
# 将数据存入数据库
sql = "insert into sales_data(SITE, PAYDAY, SALES, QUANTITY_TICKET, RATE_ELECTRONIC, SALES_THANLASTWEEK," \
"SALES_THANLASTYEAR, SESSION, SESSION_THANLASTWEEK, RATE_CONVERSION, RATE_PAYSUCCESS)" \
" values ('%s','%s', %f, %d, %f, %f, %f, %d, %f, %f, %f)" %\
(site, payday, sales, quantity_ticket, rate_electronic, sales_thanlastweek, sales_thanlastyear,
session, session_thanlastweek, rate_conversion, rate_paysuccess)
try:
# 使用 cursor() 方法创建一个游标对象 cursor
cursor = db.cursor()
cursor.execute(sql)
except Exception as e:
# 发生错误时回滚
db.rollback()
print(str(e))
else:
db.commit() # 事务提交
print('事务处理成功')
以上即为Python3读取Excel数据并存入MySQL的完整方法,希望能对读者有所帮助,欢迎支持本站。
免责声明:本文内容仅供参考,不代表本站观点。转载或引用请注明出处。









