【4.1.0】【gcexcel导出超100万行简单对象，性能极低且报内存溢出】

收藏

本帖最后由 Joestar.Xu 于 2023-8-1 13:37 编辑

workbook.addDataSource("ds", object);workbook.processTemplate();
object 对象简单，只有10个字段，但是行数比较大，超过了100w行，执行的时候性能非常不好，内存占用很高，远远超出对象本身占用的内存大小，异常详情如下所示：

Exception in thread "TraceCollector" java.lang.OutOfMemoryError: GC overhead limit exceeded at java.util.ArrayList.<init>(ArrayList.java:153) at com.meituan.mtrace.collector.sg.AbstractCollector$Dispatcher.run(AbstractCollector.java:161) at java.lang.Thread.run(Thread.java:748)java.lang.OutOfMemoryError: Java heap space at java.util.Arrays.copyOf(Arrays.java:3181) at java.util.ArrayList.grow(ArrayList.java:265) at java.util.ArrayList.ensureExplicitCapacity(ArrayList.java:239) at java.util.ArrayList.ensureCapacityInternal(ArrayList.java:231) at java.util.ArrayList.add(ArrayList.java:462) at com.grapecity.documents.excel.z.z.a(Unknown Source) at com.grapecity.documents.excel.z.z.a(Unknown Source) at com.grapecity.documents.excel.z.z.a(Unknown Source) at com.grapecity.documents.excel.C.as.aj(Unknown Source) at com.grapecity.documents.excel.Workbook.processTemplate(Unknown Source)

六月的天空 · 六月的天空

workbook.addDataSource("ds", object);workbook.processTemplate();
object 对象简单，只有10个字段，但是行数比较大，超过了100w行，执行的时候性能非常不好，内存占用很高，远远超出对象本身占用的内存大小，异常详情如下所示：

Exception in thread "TraceCollector" java.lang.OutOfMemoryError: GC overhead limit exceeded at java.util.ArrayList.<init>(ArrayList.java:153) at com.meituan.mtrace.collector.sg.AbstractCollector$Dispatcher.run(AbstractCollector.java:161) at java.lang.Thread.run(Thread.java:748)java.lang.OutOfMemoryError: Java heap space at java.util.Arrays.copyOf(Arrays.java:3181) at java.util.ArrayList.grow(ArrayList.java:265) at java.util.ArrayList.ensureExplicitCapacity(ArrayList.java:239) at java.util.ArrayList.ensureCapacityInternal(ArrayList.java:231) at java.util.ArrayList.add(ArrayList.java:462) at com.grapecity.documents.excel.z.z.a(Unknown Source) at com.grapecity.documents.excel.z.z.a(Unknown Source) at com.grapecity.documents.excel.z.z.a(Unknown Source) at com.grapecity.documents.excel.C.as.aj(Unknown Source) at com.grapecity.documents.excel.Workbook.processTemplate(Unknown Source)

Joestar.Xu · Joestar.Xu

您好，请提供一个可以复现这个问题的Demo，我们这边调研一下。

六月的天空 · 六月的天空

Joestar.Xu 发表于 2023-8-1 13:43
您好，请提供一个可以复现这个问题的Demo，我们这边调研一下。

100w行对象，每个对象10个字段，通过workbook.addDataSource("ds", object);workbook.processTemplate();就可以复现

Joestar.Xu · Joestar.Xu

1、GCExcel的性能是会受到内存影响的，建议您那边将内存调大后再试试，数据量越大需要的内存也越多。
2、旧版本的性能相对新版本来说较差，建议您升级到v6版本后再试试看性能是否有提升。

六月的天空 · 六月的天空

Joestar.Xu 发表于 2023-8-1 17:30
1、GCExcel的性能是会受到内存影响的，建议您那边将内存调大后再试试，数据量越大需要的内存也越多。
2、 ...

升级到v6版本的兼容性有没有什么影响呢？

Joestar.Xu · Joestar.Xu

您好，新版本的发布都是与旧版本向下兼容的，不过v4到v6跨度有点大，建议您先本地尝试升级至v5后，再升级至v6，如果升级过程中出现了问题，您再具体反馈。

		自动登录	找回密码
密码			立即注册

[已处理] 【4.1.0】【gcexcel导出超100万行简单对象，性能极低且报内存溢出】

6 个回复

SpreadJS 认证

SpreadJS 高级认证