excelIO.open导入表格后数据过大导致写库失败

Derrick.Jiao

100k的表格导入后，json文件达到惊人的160万行，占用最多是单sheet里面的columns和columnDataArray（各占6万行左右），其中columns全为size:61,columnDataArray全为"style": "__builtInStyle **", 请问有什么办法解决或补救（如删除这些属性）吗

Derrick.Jiao · Derrick.Jiao

ws15355056237 发表于 2021-12-29 10:02
那导入的时候有没有办法避免呢，比如像在_setColumnInfo方法中，我是否可以对size:61这种进行过滤（可能6 ...

导入的时候可能没办法对某一个部分的样式进行过滤，如果要过滤的话，只能将整个工作簿的样式都进行过滤，这是我们反序列化的一个选项，叫ignoreStyle。有关这个选项以及效果可以参考学习指南。
https://demo.grapecity.com.cn/sp ... erialization/purejs

ws15355056237 · ws15355056237

最后三张是描述该问题的，前面的图片不知道咋上传上去了

。。。

Derrick.Jiao · Derrick.Jiao

你好，请把原始的表单提供，我们这边测试一下。

ws15355056237 · ws15355056237

Derrick.Jiao 发表于 2021-12-28 16:38
你好，请把原始的表单提供，我们这边测试一下。

这是node.js导入后的内容，想知道有什么可以安全删除这些重[url=]图片[/url]复属性的方法

Derrick.Jiao · Derrick.Jiao

ws15355056237 发表于 2021-12-28 17:04
这是node.js导入后的内容，想知道有什么可以安全删除这些重图片复属性的方法

经确认，目前这个json的尺寸是属于合理的大小，您可以把excel表单进行解压，可以得到一个类似12M大小的文件件。或者把这个json压缩，同样会得到一个100多k的文件。因此，这转出的json大小是在合理的范围。里面的字段都是属于内部的产生的正常行为。暂不支持手动将其删除，容易导致一些不可预知的问题产生。

另外，我们预计在v15中推出一个beta的特性，就是可以根据需求去减少冗不需要的数据的导出。

ws15355056237 · ws15355056237

Derrick.Jiao 发表于 2021-12-28 17:56
经确认，目前这个json的尺寸是属于合理的大小，您可以把excel表单进行解压，可以得到一个类似12M大小的文 ...

那导入的时候有没有办法避免呢，比如像在_setColumnInfo方法中，我是否可以对size:61这种进行过滤（可能61是默认大小不设置不影响，这个我不知道）以及对columnDataArray里的默认样式进行过滤（如果存在的话），还是说会造成不可预知的问题，多谢~~

ws15355056237 · ws15355056237

Derrick.Jiao 发表于 2021-12-29 10:59
导入的时候可能没办法对某一个部分的样式进行过滤，如果要过滤的话，只能将整个工作簿的样式都进行过滤， ...

嗯这样是可行的。我发现单纯的fromJSON再toJSON后也能起到压缩的效果，160万行变为了80万行

Derrick.Jiao · Derrick.Jiao

ws15355056237 发表于 2021-12-30 10:10
嗯这样是可行的。我发现单纯的fromJSON再toJSON后也能起到压缩的效果，160万行变为了80万行

		自动登录	找回密码
密码			立即注册

[已处理] excelIO.open导入表格后数据过大导致写库失败

最佳答案

8 个回复

SpreadJS 高级认证

讲师达人

GrapeCity

悬赏达人

SpreadJS 认证