java操作excel表格

转载

mb5fed71eeb026e 2021-10-09 22:52:00

文章标签 数据 spring excel表格数据库数据解析 文章分类 代码人生

使用场景

1、将用户信息导出为excel表格（导出数据）

2、将Excel表中的信息录入到网站的数据库（习题上传）大大减轻网站录入量！开发中经常涉及到excel表格的处理，如到处excel表格，导入excel表格到数据库

操作excel目前比较流行的是Apache POI（非常耗内存，一旦并发上来后一定会OOM或者JVM频繁的full gc）和阿里巴巴的easyExcel

我们主要使用easyExcel进行操作

什么是easyExcel？

EasyExcel就是一个基于Java的简单、省内存的读写Excel的开源项目。在尽可能节省内存的情况下读写百M的Excel。

一个Excel表格由工作簿、工作表、行、列组成。

一、写入表格

1、导入依赖

  <dependencies>
        <!--easyExcel-->
        <dependency>
            <groupId>com.alibaba</groupId>
            <artifactId>easyexcel</artifactId>
            <version>2.2.0-beta2</version>
        </dependency>

        <dependency>
            <groupId>com.alibaba</groupId>
            <artifactId>fastjson</artifactId>
            <version>1.2.78</version>
        </dependency>

        <dependency>
            <groupId>org.projectlombok</groupId>
            <artifactId>lombok</artifactId>
            <version>1.18.20</version>
        </dependency>

        <!--日期格式化工具-->
        <dependency>
            <groupId>joda-time</groupId>
            <artifactId>joda-time</artifactId>
            <version>2.10.10</version>
        </dependency>

        <!--test-->
        <dependency>
            <groupId>junit</groupId>
            <artifactId>junit</artifactId>
            <version>4.12</version>
            <scope>test</scope>
        </dependency>
    </dependencies>

2、创建与表对应的实体类

@Data
@AllArgsConstructor
@NoArgsConstructor
public class DemoData {
    @ExcelProperty("字符串标题")
    private String string;

    @ExcelProperty("日期标题")
    private Data data;

    @ExcelProperty("数字标题")
    private Double doubleData;

    /*
    忽略的字段
     */
    @ExcelIgnore
    private String ignore;
}

3、生成表格

public class ExcelTest {

    /*
    将数据写入list集合
     */
    private List<DemoData> data(){
        List<DemoData> list = new ArrayList<DemoData>();

        for(int i = 0; i<10; i++){
            DemoData data = new DemoData();
            data.setString("字符串" + i);
            data.setDate(new Date());
            data.setDoubleData(0.56);
            list.add(data);
        }

        return list;
    }

    /*
    根据list，写入excel
     */
    @Test
    public void simpleWrite(){
        //创建excel的路径
        String path = "E:\\";

        String fileName = path + "ceshi.xlsx";

        //这里需要指定用哪个class去写，然后写到第一个sheet，名字为模板，然后文件流会自动关闭
        EasyExcel.write(fileName, DemoData.class).sheet("模板").doWrite(data());
    }
}

4、EasyExcel.write解释

（1）fileName：创建文件的文件和名称

（2）DemoData.class：用哪个class去写

（3）sheet：表示excel表格中的sheet，内容就是sheet的名字

java操作excel表格_数据解析

（4）doWrite：进行写操作，参数就是要写入excel的内容。

二、读取表格

1、实体类：同上

2、解析

读取excel需要先写一个监听器继承AnalysisEventListener, 泛型最好指定对应的实体类

/*
有一个很重要的点就是DemoDataListener不能被Spring管理，要每次读取excel都要new，然后里面用到spring可以构造方法传进去
 */
public class DemoDataListener extends AnalysisEventListener<DemoData> {
    //日志
    private static final Logger LOGGER = LoggerFactory.getLogger(DemoDataListener.class);

    //每隔5条数据存储数据库，实际使用中可以使用3000条，然后清理list，方便内存回收
    private static final int BATCH_COUNT = 5;

    List<DemoData> list = new ArrayList<DemoData>();

    /*
    假设这是一个dao，当然由业务逻辑这个也可使是一个service，如果不需要存储这个对象也没用
     */
    private DemoDao demoDao;

    public DemoDataListener(){
        //这里是demo，随便new一个，实际使用中如果用到了spring，可以使用下面的有参构造函数
        demoDao = new DemoDao();
    }

    /*
    如果使用到了spring，使用这个构造函数，每次创建ReadExcelTest时需要把spring管理的类传进来
     */
    public DemoDataListener(DemoDao demoDao){
        this.demoDao = demoDao;
    }


    /*
    这里每一条数据解析都会来调用
     */
    public void invoke(DemoData demoData, AnalysisContext analysisContext) {
        //写入日志
        LOGGER.info("解析到一条数据:{}", JSON.toJSONString(demoData));

        list.add(demoData);
        //达到BATCH_COUNT之后，需要去存储一次数据库，防止数据几万条数据在内容，容易OOM
        if(list.size() >= BATCH_COUNT){
            saveData();
            //存储完成之后清理list
            list.clear();
        }
    }

    /*
    所有数据解析完成之后，都会来调用
     */
    public void doAfterAllAnalysed(AnalysisContext analysisContext) {
        //这里也要保存一下数据，确保最后遗留的数据也存储到数据库
        saveData();
        LOGGER.info("所有数据解析完成");
    }

    /*
    加上存储数据库
     */
    private void saveData(){
        LOGGER.info("{}条数据，开始存储数据库", list.size());
        demoDao.saveList(list);
        LOGGER.info("存储数据库成功");

        /*
        打印读取到的excel内容
         */
        for(int i = 0; i<list.size(); i++){
            System.out.println(list.get(i));
        }
    }
}

3、进行测试

public class ReadExcelTest {

    @Test
    public void simpleRead(){
        //有一个很重要的点就是DemoDataListener不能被Spring管理，要每次读取excel都要new，然后里面用到spring可以构造方法传进去

        String path = "E:\\";

        String fileName = path + "ceshi.xlsx";
        /*
        这里需要指定用哪个class去读，然后读取第一个sheet，文件流会自动关闭
         */
        EasyExcel.read(fileName, DemoData.class, new DemoDataListener()).sheet().doRead();
    }

}