Java实现超大Excel文件解析(XSSF,SXSSF,easyExcel)

Java实现超大Excel文件解析攻略

本文介绍使用Java解析超大的Excel文件的方法。Excel文件往往包含大量的数据，有些时候，数据量可能非常之大，如果使用常规的Excel解析方式，很容易出现内存溢出的问题。本文将介绍XSSF、SXSSF和easyExcel三种解析方式，并且对它们进行详细分析和对比。

XSSF

XSSF是POI中的一种Excel解析方式，它基于XML文件格式，在内存中维持一份完整的工作簿，具有良好的可读性和可维护性。但是，它的缺点是当解析的数据量非常大的时候，会依然占用大量的内存，容易出现内存溢出的问题。

下面是使用XSSF解析Excel文件的示例代码：

FileInputStream inputStream = new FileInputStream(new File("demo.xlsx"));
Workbook workbook = new XSSFWorkbook(inputStream);
Sheet sheet = workbook.getSheetAt(0);

for (Row row : sheet) {
    for (Cell cell : row) {
        System.out.print(cell.toString() + "\t");
    }
    System.out.println();
}

workbook.close();
inputStream.close();

SXSSF

SXSSF是POI中的另一种Excel解析方式，它使用基于XSSF实现的流式API，在内存中只维护一定数量的数据，从而避免了内存溢出的问题。使用类似于XSSF的方式来处理Excel文件，不过因为SXSSF是一种内存友好的方式，所以无需担心数据量的大小。

下面是使用SXSSF解析Excel文件的示例代码：

FileInputStream inputStream = new FileInputStream(new File("demo.xlsx"));
Workbook workbook = new XSSFWorkbook(inputStream);
SXSSFWorkbook sxssfWorkbook = new SXSSFWorkbook((XSSFWorkbook) workbook, 100);
Sheet sheet = sxssfWorkbook.getSheetAt(0);

for (Row row : sheet) {
    for (Cell cell : row) {
        System.out.print(cell.toString() + "\t");
    }
    System.out.println();
}

sxssfWorkbook.close();
workbook.close();
inputStream.close();

需要注意的是，SXSSF需要在使用后手动关闭，这一点和XSSF是不同的。

easyExcel

easyExcel是一款相对来说比较新的Java开源库，它提供了一个基于事件驱动的Excel解析方式。它的优点是：不会占用过多的内存和硬盘空间，并且可以处理超大的Excel文件。使用它可以快速地将Excel的数据读取到Java对象中。

下面是使用easyExcel解析Excel文件的示例代码：

EasyExcel.read("demo.xlsx", new DemoDataListener()).sheet().doRead();

public class DemoDataListener extends AnalysisEventListener<DemoData> {
    private List<DemoData> list = new ArrayList<>();

    public void invoke(DemoData data, AnalysisContext context) {
        list.add(data);
    }

    public void doAfterAllAnalysed(AnalysisContext context) {
        for (DemoData demoData : list) {
            System.out.println(demoData);
        }
    }
}

需要自定义一个Listener来解析数据，这里我们将其命名为DemoDataListener，Listener的主要作用是监听事件并处理事件。在DemoDataListener中，我们继承了AnalysisEventListener，使用数据实体类DemoData，将读取的数据转换为实体类，然后存储在集合list中，最后再将list进行处理输出。虽然使用easyExcel解析Excel比上述两种方式稍微复杂一些，但是对于超大Excel数据的处理，它是一个非常好的选择。

总结

综上所述，对于海量数据的Excel解析应用，我们可以使用XSSF、SXSSF或者easyExcel这三种方式进行处理，具体选择哪一种方式应该根据具体情况进行选取。如果内存空间较大，直接使用XSSF就行。如果内存资源紧张，可以使用SXSSF。如果确保程序的稳定性和性能方面均可接受的情况下，推荐使用easyExcel。