摘要:閱讀原文如何高效導出百萬級數據在一個具有統計功能的系統中,導出功能幾乎是一定的,如何導出導出的數據有多少如何高效的導出簡介什么是就不用介紹了,這里主要說明不同版本下每個下的行列限制。
閱讀原文:POI如何高效導出百萬級Excel數據?
在一個具有統計功能的系統中,導出excel功能幾乎是一定的,如何導出excel?導出的數據有多少?如何高效的導出?
Excel簡介
什么是excel就不用介紹了,這里主要說明不同版本下每個sheet下的行列限制。
版本區間 | 行數 | 列數 | 生成文件后綴 |
---|---|---|---|
Excel 2003及以下 | 65535 | 256 | xls |
Excel 2007及以上 | 1048576 | 16384 | xlsx |
由上面可知 Excel 2003及以下是無法實現單sheet百萬級的數據。
Apache POI
簡介
Apache POI 是用Java編寫的免費開源的跨平臺的 Java API,Apache POI提供API給Java程式對Microsoft Office(Excel、WORD、PowerPoint、Visio等)格式檔案讀和寫的功能。POI為“Poor Obfuscation Implementation”的首字母縮寫,意為“可憐的模糊實現”。
常用類
HSSF - 提供讀寫Microsoft Excel XLS格式檔案的功能。
XSSF - 提供讀寫Microsoft Excel OOXML XLSX格式檔案的功能。
SXSSF - 一種基于XSSF的低內存占用的API(3.8版本開始出現)。
HWPF - 提供讀寫Microsoft Word DOC97格式檔案的功能。
XWPF - 提供讀寫Microsoft Word DOC2003格式檔案的功能。
HSLF - 提供讀寫Microsoft PowerPoint格式檔案的功能。
HDGF - 提供讀Microsoft Visio格式檔案的功能。
HPBF - 提供讀Microsoft Publisher格式檔案的功能。
HSMF - 提供讀Microsoft Outlook格式檔案的功能。
我們這里是導出Excel,所以使用的是前三個。
導出策略
方案
使用XSSF和SXSSF分別導入1w,10w,100w數據
使用SXSSF,SXSSF以10w分頁,SXSSF多線程以10w分頁導入100w數據
性能對比
時間不包含網絡耗時
圖片描述
類型 | 1w條/時間 | 10w條/時間 | 100w條/時間 |
---|---|---|---|
XSSF | 1331ms | 10496ms | 小心電腦
文章版權歸作者所有,未經允許請勿轉載,若此文章存在違規行為,您可以聯系管理員刪除。 轉載請注明本文地址:http://specialneedsforspecialkids.com/yun/73612.html 相關文章
發表評論0條評論lemanli男|高級講師TA的文章閱讀更多
閱讀需要支付1元查看
|