Python3自动生成MySQL数据字典Markdown文本的实现方案
本文介绍如何使用Python3脚本自动生成MySQL数据库表的数据字典并输出为Markdown格式。通过pymysql连接数据库,自动获取表结构、字段信息及注释,解决人工整理低效问题。文章提供了两种配置方式(代码硬编码与手动输入),并演示如何利用pyinstaller打包为Windows exe可执行文件,实现无需Python环境的快速部署与使用。
为何开发此脚本
为何开发此脚本
五一假期前夕,笔者注意到同事在处理数据库特定表的数据字典时,需逐字段手动录入。这种纯手工操作不仅耗时费力,极大考验耐心与意志,且整体工作效率低下。尽管尝试搜索在线工具,但未发现理想解决方案,因此决定自行开发一套自动化脚本,旨在一劳永逸地解决该问题,实现快速落地。
脚本逻辑梳理
第一步:输入或修改数据库连接配置信息,以及输入数据表名
第二步:利用pymysql模块连接数据库,并判断数据表是否存在
第三步:获取数据表的注释
第四步:存储文件夹和文件处理,删除已存在的文件避免重复写入
第五步:先写入Markdown的表头部信息
第六步:从information_schema中查询表结构和相关信息
第七步:依次拼装每个字段的Markdown文本写入,结束并关闭相关连接
运行环境
运行环境
Python运行环境:Windows + python3.6 用到的模块:pymysql、os、time、pyinstaller 如未安装的模块,请使用pip instatll xxxxxx进行安装,例如:pip install pyinstaller
获取数据库连接信息的两种方式
获取数据库连接信息的两种方式
既然目标是生成数据字典,首要步骤是建立数据库连接。而连接数据库的前提是掌握基础连接信息,包括IP地址、用户名、登录密码及数据库名称等关键参数。
为提升便利性,本文提供了两种配置MySQL连接的方法:第一种是将连接信息直接硬编码在脚本中,通过修改代码内的配置即可使用;第二种是通过交互式手动输入链接信息,无需修改代码,便于快速复用。完整源码已上传至GitHub(文中提及的“同性交友网站”即指GitHub),读者可通过下方链接查看具体实现。
- 修改代码的完整源码:data_dict_config.py
- 手动输入的完整源码:data_dict_input.py
生成可执行文件
生成可执行文件
为了便于不同用户群体快速使用,避免依赖Python运行环境,可将Python脚本打包为Windows可直接执行的exe文件。下载后双击运行即可(部分系统可能需要管理员权限)。打包过程利用pyinstaller模块实现,操作简单且高效,具体用法可参考官方文档。
打包命令为: pyinstaller -F -i favicon.ico data_dict_input.py
执行该命令后,当前目录下将生成dict文件夹及相关文件。打开dict文件夹,可见生成的同名exe文件data_dict_input.exe。双击该文件即可运行程序,且该exe文件可复制到其他位置继续使用。
下面我把两种方式的脚本,都生成了exe可执行文件,大家可以直接点击下载试用,如果下载不了,请直接去GitHub仓库下载或者自己生成
- 修改代码的可执行文件:data_dict_config.exe
- 手动输入的可执行文件:data_dict_input.exe
完整代码
完整代码
为方便部分用户直接获取代码,此处展示其中一份源码(主要目的是充实文章篇幅,读者理解即可)。
#!/usr/bin/env python
# -*- coding: utf-8 -*-
"""
自动生成MySQL数据表的数据字典支持多个
自动获取数据库连接信息,方便多用
author: gxcuizy
date: 2020-04-30
"""
import pymysql
import os
import time
class DataDict(object):
def __init__(self, connect_info):
# 数据库连接配置
self.host_name = connect_info[0]
self.user_name = connect_info[1]
self.pwd = connect_info[2]
self.db_name = connect_info[3]
self.folder_name = 'mysql_dict'
def run(self, table_str):
"""脚本执行入口"""
try:
# 创建一个连接
conn = pymysql.connect(self.host_name, self.user_name, self.pwd, self.db_name)
# 用cursor()创建一个游标对象
cursor = conn.cursor(cursor=pymysql.cursors.DictCursor)
except Exception:
print('数据库连接失败,请检查连接信息!')
exit(1)
table_list = table_str.split(',')
for table_name in table_list:
# 判断表是否存在
sql = "SHOW TABLES LIKE '%s'" % (table_name,)
cursor.execute(sql)
result_count = cursor.rowcount
if result_count == 0:
print('%s数据库中%s表名不存在,无法生成……' % (self.db_name, table_name))
continue
# 表注释获取
print('开始生成表%s的数据字典' % (table_name,))
sql = "show table status WHERE Name = '%s'" % (table_name,)
cursor.execute(sql)
result = cursor.fetchone()
table_comment = result['Comment']
# 文件夹和文件处理
file_path = self.folder_name + os.sep + table_name + '.md'
self.deal_file(file_path)
# 打开文件,准备写入
dict_file = open(file_path, 'a', encoding='UTF-8')
dict_file.write('#### %s %s' % (table_name, table_comment))
dict_file.write('\n | 字段名称 | 字段类型 | 默认值 | 字段注释 |')
dict_file.write('\n | --- | --- | --- | --- |')
# 表结构查询
field_str = "COLUMN_NAME,COLUMN_TYPE,COLUMN_DEFAULT,COLUMN_COMMENT"
sql = "select %s from information_schema.COLUMNS where table_schema='%s' and table_name='%s'" % (field_str, self.db_name, table_name)
cursor.execute(sql)
fields = cursor.fetchall()
for field in fields:
column_name = field['COLUMN_NAME']
column_type = field['COLUMN_TYPE']
column_default = str(field['COLUMN_DEFAULT'])
column_comment = field['COLUMN_COMMENT']
info = ' | ' + column_name + ' | ' + column_type + ' | ' + column_default + ' | ' + column_comment + ' | '
dict_file.write('\n ' + info)
# 关闭连接
print('完成表%s的数据字典' % (table_name,))
dict_file.close()
cursor.close()
conn.close()
def deal_file(self, file_name):
"""处理存储文件夹和文件"""
# 不存在则创建文件夹
if not os.path.exists(self.folder_name):
os.mkdir(self.folder_name)
# 删除已存在的文件
if os.path.isfile(file_name):
os.unlink(file_name)
def test_conn(self, conn_info):
"""测试数据库连接"""
try:
# 创建一个连接
pymysql.connect(conn_info[0], conn_info[1], conn_info[2], conn_info[3])
return True
except Exception:
return False
# 程序执行入口
if __name__ == '__main__':
# 数据数据连接信息
conn_info = input('请输入mysql数据库连接信息(格式为:主机IP,用户名,登录密码,数据库名),逗号分隔且输入顺序不能乱,例如:192.168.0.1,root,root,test_db:')
conn_list = conn_info.split(',')
while conn_info == '' or len(conn_list) != 4:
conn_info = input('请正确输入mysql数据库连接信息(格式为:主机IP,用户名,登录密码,数据库名),逗号分隔且输入顺序不能乱,例如:192.168.0.1,root,root,test_db:')
conn_list = conn_info.split(',')
# 测试数据库连接问题
dd_test = DataDict(conn_list)
db_conn = dd_test.test_conn(conn_list)
while db_conn == False:
conn_info = input('请正确输入mysql数据库连接信息(格式为:主机IP,用户名,登录密码,数据库名),逗号分隔且输入顺序不能乱,例如:192.168.0.1,root,root,test_db:')
conn_list = conn_info.split(',')
if len(conn_list) != 4:
continue
dd_test = DataDict(conn_list)
db_conn = dd_test.test_conn(conn_list)
# 输入数据表名称
table_s = input('请输入数据库表名(例如:t_order),如需输入多个表名请用英文逗号分隔(例如:t_order,t_goods),结束使用请输入q:')
dd = DataDict(conn_list)
while table_s != 'q':
dd.run(table_s)
table_s = input('继续使用请输入数据库表名(例如t_order),如需输入多个表名请用英文逗号分隔(例如t_order,t_goods),结束使用请输入q):')
else:
print('谢谢使用,再见……')
time.sleep(1)
最后
最后
到此这篇关于Python3自动生成MySQL数据字典的markdown文本的实现的文章就介绍到这了,更多相关Python3自动生成markdown文本内容请搜索本站以前的文章或继续浏览下面的相关文章希望大家以后多多支持本站!
免责声明:本文内容仅供参考,不代表本站观点。转载或引用请注明出处。









