解决java读取大文件内存溢出问题，如何在不重

Posted 2023-05-09

参考技术A 1：文件流 使用Java.util.Scanner类扫描文件的内容，一行一行连续地读取
2：Apache Commons IO流 Apache Commons IO流

phpExcel大数据量情况下内存溢出解决

在不进行特殊设置的情况下，phpExcel将读取的单元格信息保存在内存中，我们可以通过

PHPExcel_Settings::setCacheStorageMethod()

来设置不同的缓存方式，已达到降低内存消耗的目的！

1、将单元格数据序列化后保存在内存中

PHPExcel_CachedObjectStorageFactory::cache_in_memory_serialized; 

2、将单元格序列化后再进行Gzip压缩，然后保存在内存中

PHPExcel_CachedObjectStorageFactory::cache_in_memory_gzip; 

3、缓存在临时的磁盘文件中，速度可能会慢一些

PHPExcel_CachedObjectStorageFactory::cache_to_discISAM;

4、保存在php://temp

PHPExcel_CachedObjectStorageFactory::cache_to_phpTemp; 

5、保存在memcache中

PHPExcel_CachedObjectStorageFactory::cache_to_memcache

        $cacheMethod = PHPExcel_CachedObjectStorageFactory::cache_to_memcache;  
        $cacheSettings = array( ‘memcacheServer‘  => ‘localhost‘,  
                        ‘memcachePort‘    => 11211,  
                        ‘cacheTime‘       => 600  
                      );  
        PHPExcel_Settings::setCacheStorageMethod($cacheMethod, $cacheSettings);

 

注意是加在new PHPExcel() 前面：如下

1 require_once APPPATH .‘third_party/PHPExcel/PHPExcel.php‘;
2         
3         $cacheMethod = PHPExcel_CachedObjectStorageFactory::cache_to_phpTemp;
4         $cacheSettings = array(‘memoryCacheSize‘=>‘16MB‘);
5         PHPExcel_Settings::setCacheStorageMethod($cacheMethod, $cacheSettings);
6         
7         $objPHPExcel = new PHPExcel();