PIO导入大量数据时的解决内存溢出问题.doc资源-CSDN文库

版权申诉

文档资料

5星 · 超过95%的资源 23 浏览量 2022-05-05 14:33:13 上传评论收藏 174KB DOC 举报

资源推荐

资源详情

资源评论

本人刚进公司，目前还处于干杂活状态。现在的任务就是把客户数据迁移到数

据库中，由于客户提供的数据都存储在  中，有些文件数据量还很大，在

 模式下经常内存溢出，于是只能采用直接通过  往数据库复制

或是用  模式读取。直接复制倒是简单，但是速度太慢，一次

复制的太多也会内存溢出，我没那耐心，没办法，只能用第二种办法了。在

 上找，发现相关示例太少了，幸好在 找到了一个示例，自己又

改了一下，把原来的例子改为抽象类，提供了一个 方法来对行级

数据进行操作。



 模式对  操作前需要将文件全部转入内存，对较大文件来

说内存开销很大。但是其使用简单。

 模式采用事件模型，对文件边读取边处理，内存消耗较

低，效率高，因为不用等待文件全部装入内存。但使用较复杂。



 excel 读取采用的 API 为 POI3.6，使用前先下载此包，若运行中出现其

他依赖包不存在，请下载相应依赖包。



下面展示的是  及其之前版本的大文件读取方法。



抽象类 HxlsAbstract：

 代码

  !"#

 ""$"%&#

 ""$"'$("#

) ""%*("#

+ "","&#

- "&./("#

0 ""12/"#

3 ""/"#

4 

 "!"!5$6 "7

&&$/"#

 "!"!57&&$($

2#

 "!"!57&&$/"#

 "!"!57&&$#

) "!"!58""1

7&&$/"#

+ "!"!5(9 : ;

"&!<"/"#

- "!"!52/

<*5=2#

0 "!"!528"

"<=2#

3 "!"!57&&$$,#

4 "!"!5;*$#

 "!"!5; #

 "!"!5;(#

 "!"!5;&!#

 "!"!5$#

) "!"!5/:#

+ "!"!5/:&&6#

- "!"!5'#

0 "!"!5':#

3 "!"!5>#

4 "!"!5#

 "!"!5&&6#

 "!"!5&"#

 "!"!57&&$9 : #

 "!""5?2,*%$&$"&2#

) 

+ :":71:"7&&$/"@

- """<#

0 ",*%$&$"&25#

3 ","&#

4 

) ""':#

) ""<':#

) 

) AA&!!5B!"!CA

)) ":$DE#

)+ 

)- AA$"$A

)0 "&!<"/" : ;""/"

#

)3 "7&&$9 : :9 : #

)4 

+ " 

+ "&&6#

+ "$6 "7&&$/"5/"#

+ 

+) AA& !"!!FA

++ ""!%EG#

+- ";&!HI;&#

+0 J&9"K! K

+3 "12/":&!E12/"#

+4 

- $!"5"!"

- ""#

- ""<#

- ":'&"#

-) 

-+ ""#

-- "/"L&"M"#

-0 J&9"KK

-3 "&"!'#

-4 

0 :"71:,*%$&$"&25

0 !&./("@

0 !"5E5#

0 !"E&2#

0) !""<EG#

0+ !"E#

0- !""E12/"L&"M#

00 N

03 

04 :"71:&"?!%*("B

3 $"'$("B&./("@

3 !",*%$&$"&2$"%&?

#

3 N

3 

3)  记录行操作方法，以行索引和行元素列表为参数，对一行元

素进行操作，元素为 &" 类型

3+ :":""B/"L&"M

"!&./("#

3- 

30  记录行操作方法，以 ! 索引，行索引和行元素列表为参

数，对 ! 的一行元素进行操作，元素为 &" 类型

33 :":""!%B"B/"

L&"M"!&./("#

34 

4 AA

剩余14页未读，继续阅读

评论收藏

内容反馈

版权申诉

家亮不加价

2023-07-07

资源内容详尽，对我有使用价值，谢谢资源主的分享。

老帽爬新坡

粉丝: 79
资源: 2万+

PIO导入大量数据时的解决内存溢出问题.doc

Nios_II_PIO的详解与双向操作注意点.doc

pio读取合并的单元格

EDA技术实验报告.doc

java操作Excel jar包 pio

poi大量数据读取gc内存溢出解决方案

POI单元格的合并、数据行的分组以及Excel窗口的冻结.doc

电子导盲犬设计文档.doc

PyPI 官网下载 | pio-cli-0.63.tar.gz

ASUS-PIO-B150M.bin

usb-device-ccid-project-1.4-iar5-at91sam9263-ek.zip

CSR8670开发板使用说明书.doc

pio的jar包

PIO操作Word依赖的Jar

lpc111x.h SSP1 PIO2_3 PIO2_2 的BUG

PIO的EXCEL的写入和导出

SCB-2型MCS-51单片单板机（汇编）.doc

巧用PIO通信方式加速双微机系统数据传输率.pdf

altera_avalon_pio_regs头文件

基于pio的报表操作

青岛市购物poi数据2020年wsgs84坐标.xlsx

全国计算机等级考试二级Python真题及解析.docx

1000份ppt模版，PPT模板优秀PPT

导入证书可以解决”无法建立到信任根颁发机构的证书链"问题。

matlab批量读取excel表格数据并处理画图

OpenCv车辆识别训练模型

代码随想录知识星球精华-大厂面试八股文第二版v1.2.pdf

数学建模对乙醇偶合制备C4烯烃的问题研究

Vue-Element UI集成ECharts实现数据统计分析页代码部分(如果帮助到你，感谢关注点赞)

STM32F103C8T6中文数据手册

最新资源