java 大量数据处理问题记录

Posted study_well_

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了java 大量数据处理问题记录相关的知识,希望对你有一定的参考价值。

1.跨服务接口调用的数据量超过一定量的时候,接口会出现无响应,强制断开请求连接

2.gson 和fastjson序列化和反序列过程中可能会出现内存溢出,gson默认情况下不会序列化为null的字段,

fastjson反序列化泛型类 :JSON.parseObject(result, new TypeReference<ResponseDTO<List<Item>>>() {});

3.超大字符串写文件可能会出现内存溢出

以上是关于java 大量数据处理问题记录的主要内容,如果未能解决你的问题,请参考以下文章

向数据库里插入大量数据,怎么实现不插入重复的记录

如何根据具有特定条件的特定记录的用户权限有效过滤大量记录?

java中保存Bigdata Integer记录的最佳数据结构是啥?

什么 mysql 引擎可以处理大量数据(日志记录)?

Salesforce 小知识:大量“子记录”的处理方法

Collection View 自动处理大量记录?