SpringBoot整合EasyExcel实现高效读写与分类导入实战
针对传统Java Excel框架在处理大量数据时易导致OOM的问题，本文介绍阿里开源的EasyExcel解决方案。内容涵盖引入依赖、实体类映射配置、基础的Excel读写测试，以及在SpringBoot项目中通过监听器（AnalysisEventListener）实现多层级课程分类数据的低内存消耗导入实战。
2026-10-16
34
针对传统Java Excel框架在处理大量数据时易导致OOM的问题，本文介绍阿里开源的EasyExcel解决方案。内容涵盖引入依赖、实体类映射配置、基础的Excel读写测试，以及在SpringBoot项目中通过监听器（AnalysisEventListener）实现多层级课程分类数据的低内存消耗导入实战。
本文详解如何使用Pandas库读取TXT和SQL文件。通过read_table()方法处理TXT数据，并演示利用pymysql连接MySQL数据库进行SQL查询。重点解决charset编码报错问题，对比展示正确与错误的连接代码，帮助开发者快速掌握结构化数据导入技巧。
本文介绍如何在 MySQL 中使用 LOAD DATA LOCAL INFILE 命令将本地文本文件快速导入数据库表。该方法支持百万级数据秒级写入，显著提升效率。若遇权限错误，可通过启动参数 --local-infile=1 启用或检查编译配置，是替代 INSERT 语句的高效批量导入方案。
本文详解Python中利用WindPy库通过wsd函数批量获取资产收盘价格的方法。重点解析资产列表传入、日期格式处理（字符串与数字串）、缺失值nan显示及空参数表示，并提供将Wind返回的instance对象转换为标准DataFrame的两种代码实现方案，适用于量化数据预处理。
本文介绍如何使用Python的pandas库导入CSV文件。涵盖默认导入、指定分隔符（sep）、限制读取行数（nrows）以及处理编码格式（encoding）等关键参数。同时提供解决中文列标题对齐问题的set_option方法，帮助开发者高效处理不同格式的CSV数据。
本文分享了使用Python将GB级、千万行CSV数据高效导入MySQL的实战经验。针对大数据量场景，采用多进程架构结合批量插入策略，通过控制Worker数量、暂不建索引及处理编码异常等手段，显著提升了数据导入效率与系统稳定性。