阿里云EasyExcel生成大数据量文件时抛出ExcelGenerateException: InternalError

Question

在使用阿里云EasyExcel生成大数据量文件时，经常会遇到`ExcelGenerateException: InternalError`异常。此问题通常源于内存不足或数据量超出Excel单sheet限制（65535行）。当处理超大数据集时，若未合理分页或分sheet写入，可能导致内存溢出或内部错误。建议优化写入逻辑，采用SAX解析方式代替DOM，减少内存占用。同时，通过设置合理的分片策略（如每万条数据分一个sheet），可有效避免该异常。此外，确保依赖版本兼容，升级至最新版EasyExcel也可能解决部分已知Bug。检查系统资源使用情况，适当增加JVM堆内存也是可行方案之一。

Answer 1

1. 问题概述

在使用阿里云EasyExcel生成大数据量文件时，`ExcelGenerateException: InternalError`异常是一个常见的技术问题。该异常通常与内存不足或数据量超出单sheet限制（65535行）相关。当处理超大数据集时，若未合理分页或分sheet写入，可能导致内存溢出或内部错误。

易错点包括：

• 未对大数据进行分片处理。
• 依赖版本不兼容。
• JVM堆内存配置不足。

2. 技术分析

EasyExcel默认采用DOM解析方式生成Excel文件，这种方式会将整个文件加载到内存中，导致在处理大文件时容易出现内存溢出。为解决这一问题，可以考虑以下优化方案：

方案	描述
SAX解析方式	通过SAX解析方式代替DOM，减少内存占用。
分片策略	设置合理的分片策略（如每万条数据分一个sheet），避免单sheet数据量过大。
依赖版本升级	确保依赖版本兼容，升级至最新版EasyExcel以修复已知Bug。

3. 解决方案

下面提供一个示例代码，展示如何通过分片策略和SAX解析方式优化写入逻辑：

// 示例代码
public void writeLargeExcel(String fileName, List<Data> dataList) {
    // 分片大小
    int pageSize = 10000;
    ExcelWriter excelWriter = null;

    try {
        excelWriter = EasyExcel.write(fileName).build();
        WriteSheet writeSheet = EasyExcel.writerSheet(0, "Sheet").build();

        for (int i = 0; i < dataList.size(); i += pageSize) {
            int toIndex = Math.min(i + pageSize, dataList.size());
            excelWriter.write(dataList.subList(i, toIndex), writeSheet);
        }
    } finally {
        if (excelWriter != null) {
            excelWriter.finish();
        }
    }
}
    

4. 系统资源优化

如果上述方法仍无法解决问题，可以检查系统资源使用情况，并适当增加JVM堆内存。以下是调整JVM堆内存的命令示例：

java -Xms512m -Xmx2g -jar your-application.jar
    

此外，还可以通过以下流程图了解整体优化步骤：

graph TD;
            A[开始] --> B{是否需要分片};
            B --是--> C[设置分片策略];
            B --否--> D[检查内存占用];
            C --> E[使用SAX解析];
            D --> F{是否内存不足};
            F --是--> G[增加JVM堆内存];
            F --否--> H[升级EasyExcel版本];