快捷導(dǎo)航

解決Java導(dǎo)入excel大量數(shù)據(jù)出現(xiàn)內(nèi)存溢出的問題

更新時(shí)間：2018年06月26日 09:53:00 作者：dandanfeng1992

今天小編就為大家分享一篇解決Java導(dǎo)入excel大量數(shù)據(jù)出現(xiàn)內(nèi)存溢出的問題，具有很好的參考價(jià)值，希望對大家有所幫助。一起跟隨小編過來看看吧

問題：系統(tǒng)要求導(dǎo)入40萬條excel數(shù)據(jù)，采用poi方式，服務(wù)器出現(xiàn)內(nèi)存溢出情況。

解決方法：由于HSSFWorkbook workbook = new HSSFWorkbook(path)一次性將excel load到內(nèi)存中導(dǎo)致內(nèi)存不夠。

故采用讀取csv格式。由于csv的數(shù)據(jù)以x1,x2,x3形成，類似讀取txt文檔。

 private BufferedReader bReader;

  /**
   * 執(zhí)行文件入口
   */
  public void execute() {
    try {
      if(!path.endsWith(".csv")){
        logger.info("-----該文件不是以CSV文件，請上傳正確的文件格式------");
        return ;
      }
      Long startTime = System.currentTimeMillis();
      logger.info("------開始執(zhí)行定時(shí)任務(wù)，時(shí)間=" + startTime);
      readCSV(path);
      Long endTime = System.currentTimeMillis();
      logger.info("------結(jié)束定時(shí)任務(wù)，時(shí)間=" + endTime + "---耗時(shí)="
          + (endTime - startTime));
    } catch (Exception e) {
      e.printStackTrace();
    }
  }

  /**
   * 讀取csv并處理數(shù)據(jù)
   * @param path
   * @throws Exception
   */
  private void readCSV(String path) throws Exception {
    File file = new File(path); 
    try {
      bReader = new BufferedReader(new InputStreamReader(new FileInputStream(file), "gbk"));
       String line = "";
        //忽略第一行標(biāo)題
        for (int i = 0; i < 1; i++) { 
          line = bReader.readLine(); 
        }
        while((line = bReader.readLine()) != null){
          if (line.trim() != "") {
          //分割開來的即是對應(yīng)的每個(gè)單元格，注意空的情況
            String[] result = line.split(",");

            }
          }
        } 
    } finally {
      if (bReader != null) {
        bReader.close();
      }
    }
  }

以上這篇解決Java導(dǎo)入excel大量數(shù)據(jù)出現(xiàn)內(nèi)存溢出的問題就是小編分享給大家的全部內(nèi)容了，希望能給大家一個(gè)參考，也希望大家多多支持腳本之家。

您可能感興趣的文章:

相關(guān)文章

java異常處理的簡單練習(xí)
下面小編就為大家?guī)硪黄猨ava異常處理的簡單練習(xí)。小編覺得挺不錯的，現(xiàn)在就分享給大家，也給大家做個(gè)參考。一起跟隨小編過來看看吧
2016-06-06
idea的使用之關(guān)于tomcat熱部署的教程
這篇文章主要介紹了idea的使用之關(guān)于tomcat熱部署的教程,本文給大家介紹的非常詳細(xì)，對大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值，需要的朋友可以參考下
2020-09-09
深入理解Spring AOP
這篇文章主要介紹了深入理解Spring AOP，詳細(xì)的介紹了spring aop的具體實(shí)現(xiàn)與理論
2017-01-01
Java基礎(chǔ)教程之對象的方法與數(shù)據(jù)成員
這篇文章主要介紹了Java基礎(chǔ)教程之對象的方法與數(shù)據(jù)成員,本文講解對象的方法與數(shù)據(jù)成員相關(guān)知識,因?yàn)閖ava是面向?qū)ο笳Z言,本文的知識都是經(jīng)常要用到的,需要的朋友可以參考下
2014-08-08
SpringBoot中的自定義FailureAnalyzer詳解
這篇文章主要介紹了SpringBoot中的自定義FailureAnalyzer詳解,FailureAnalyzer是一種很好的方式在啟動時(shí)攔截異常并將其轉(zhuǎn)換為易讀的消息,并將其包含在FailureAnalysis中, Spring Boot為應(yīng)用程序上下文相關(guān)異常、JSR-303驗(yàn)證等提供了此類分析器,需要的朋友可以參考下
2023-12-12
關(guān)于Java三大特性之多態(tài)的總結(jié)
這篇文章主要介紹了關(guān)于Java三大特性之多態(tài)的總結(jié)，內(nèi)容詳細(xì)，涉及多態(tài)的定義，存在條件，好處，分類及實(shí)現(xiàn)方式等相關(guān)內(nèi)容，具有一定參考價(jià)值，需要的朋友可以了解下。
2017-11-11
SpringBoot中webSocket實(shí)現(xiàn)即時(shí)聊天
這篇文章主要介紹了SpringBoot中webSocket實(shí)現(xiàn)即時(shí)聊天，文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧
2021-04-04
Spring中容器創(chuàng)建的四種方式示例
這篇文章主要介紹了Spring中容器創(chuàng)建的四種方式示例,Spring容器是Spring框架的核心部分,它負(fù)責(zé)管理和組織應(yīng)用程序中的對象,它提供了一種輕量級的、非侵入式的方式來實(shí)現(xiàn)對象的創(chuàng)建、依賴注入和生命周期管理,需要的朋友可以參考下
2023-10-10
四種Java線程池用法解析
這篇文章主要為大家解析四種Java線程池用法，內(nèi)容詳細(xì)，分析細(xì)致，感興趣的小伙伴們可以參考一下
2016-04-04
Java關(guān)鍵字this（動力節(jié)點(diǎn)Java學(xué)院整理）
java中的this隨處可見，用法也多。通常情況下理解this關(guān)鍵字還是很容易的，但是在我初學(xué)的時(shí)候，有一個(gè)疑問卻一直不能很清晰的理解，現(xiàn)在慢慢的理解了，下面通過本文給大家記錄下，有需要的朋友參考下
2017-03-03