Java自学者论坛

 找回密码
 立即注册

手机号码,快捷登录

恭喜Java自学者论坛(https://www.javazxz.com)已经为数万Java学习者服务超过8年了!积累会员资料超过10000G+
成为本站VIP会员,下载本站10000G+会员资源,会员资料板块,购买链接:点击进入购买VIP会员

JAVA高级面试进阶训练营视频教程

Java架构师系统进阶VIP课程

分布式高可用全栈开发微服务教程Go语言视频零基础入门到精通Java架构师3期(课件+源码)
Java开发全终端实战租房项目视频教程SpringBoot2.X入门到高级使用教程大数据培训第六期全套视频教程深度学习(CNN RNN GAN)算法原理Java亿级流量电商系统视频教程
互联网架构师视频教程年薪50万Spark2.0从入门到精通年薪50万!人工智能学习路线教程年薪50万大数据入门到精通学习路线年薪50万机器学习入门到精通教程
仿小米商城类app和小程序视频教程深度学习数据分析基础到实战最新黑马javaEE2.1就业课程从 0到JVM实战高手教程MySQL入门到精通教程
查看: 735|回复: 0

PHPExcel解决内存占用过大问题-设置单元格对象缓存

[复制链接]
  • TA的每日心情
    奋斗
    2024-4-6 11:05
  • 签到天数: 748 天

    [LV.9]以坛为家II

    2034

    主题

    2092

    帖子

    70万

    积分

    管理员

    Rank: 9Rank: 9Rank: 9

    积分
    705612
    发表于 2021-7-7 15:54:19 | 显示全部楼层 |阅读模式

    PHPExcel解决内存占用过大问题-设置单元格对象缓存

    PHPExcel是一个很强大的处理Excel的PHP开源类,但是很大的一个问题就是它占用内存太大,从1.7.3开始,它支持设置cell的缓存方式,但是推荐使用目前稳定的版本1.7.6,因为之前的版本都会不同程度的存在bug,以下是其官方文档:

     

    PHPExcel uses an average of about 1k/cell in your worksheets, so large workbooks can quickly use up available memory. Cell caching provides a mechanism that allows PHPExcel to maintain the cell objects in a smaller size of memory, on disk, or in APC, memcache or Wincache, rather than in PHP memory. This allows you to reduce the memory usage for large workbooks, although at a cost of speed to access cell data.

     

    PHPExcel平均下来使用1k/单元格的内存,因此大的文档会导致内存消耗的也很快。单元格缓存机制能够允许PHPExcel将内存中的小的单元格对象缓存在磁盘或者APC,memcache或者Wincache中,尽管会在读取数据上消耗一些时间,但是能够帮助你降低内存的消耗。

     

    如果还是不够,打开php.ini改里面的memory_limit

    默认是128M调大点。

     

     

     

     

    By default, PHPExcel still holds all cell objects in memory, but you can specify alternatives. To enable cell caching, you must call the PHPExcel_Settings::setCacheStorageMethod() method, passing in the caching method that you wish to use.

     

    默认情况下,PHPExcel依然将单元格对象保存在内存中,但是你可以自定义。你可以使用PHPExcel_Settings::setCacheStorageMethod()方法,将缓存方式作为参数传递给这个方法来设置缓存的方式。

     

     

    Php代码  

    $cacheMethod = PHPExcel_CachedObjectStorageFactory::cache_in_memory;  

    PHPExcel_Settings::setCacheStorageMethod($cacheMethod);  

     

    setCacheStorageMethod() will return a boolean true on success, false on failure (for example if trying to cache to APC when APC is not enabled).

     setCacheStorageMethod()方法会返回一个BOOL型变量用于表示是否成功设置(比如,如果APC不能使用的时候,你设置使用APC缓存,将会返回false)

     

    A separate cache is maintained for each individual worksheet, and is automatically created when the worksheet is instantiated based on the caching method and settings that you have configured. You cannot change the configuration settings once you have started to read a workbook, or have created your first worksheet.

     

    每一个worksheet都会有一个独立的缓存,当一个worksheet实例化时,就会根据设置或配置的缓存方式来自动创建。一旦你开始读取一个文件或者你已经创建了第一个worksheet,就不能在改变缓存的方式了。

     

    Currently, the following caching methods are available.

     目前,有以下几种缓存方式可以使用:

     

    Php代码  

    PHPExcel_CachedObjectStorageFactory::cache_in_memory;  

    The default. If you don’t initialise any caching method, then this is the method that PHPExcel will use. Cell objects are maintained in PHP memory as at present.

     默认情况下,如果你不初始化任何缓存方式,PHPExcel将使用内存缓存的方式。

    ===============================================

     

    Php代码  

    PHPExcel_CachedObjectStorageFactory::cache_in_memory_serialized;  

    Using this caching method, cells are held in PHP memory as an array of serialized objects, which reduces the memory footprint with minimal performance overhead.

     使用这种缓存方式,单元格会以序列化的方式保存在内存中,这是降低内存使用率性能比较高的一种方案。

    ===============================================

     

    Php代码  

    PHPExcel_CachedObjectStorageFactory::cache_in_memory_gzip;  

    Like cache_in_memory_serialized, this method holds cells in PHP memory as an array of serialized objects, but gzipped to reduce the memory usage still further, although access to read or write a cell is slightly slower.

     与序列化的方式类似,这种方法在序列化之后,又进行gzip压缩之后再放入内存中,这回跟进一步降低内存的使用,但是读取和写入时会有一些慢。

     

    ===========================================================

     

    Php代码  

    PHPExcel_CachedObjectStorageFactory::cache_to_discISAM;  

    When using cache_to_discISAM all cells are held in a temporary disk file, with only an index to their location in that file maintained in PHP memory. This is slower than any of the cache_in_memory methods, but significantly reduces the memory footprint.
    Php代码  

    PHPExcel_CachedObjectStorageFactory::cache_to_phpTemp;  

    Like cache_to_discISAM, when using cache_to_phpTemp all cells are held in the php://temp I/O stream, with only an index to their location maintained in PHP memory. In PHP, the php://memory wrapper stores data in the memory: php://temp behaves similarly, but uses a temporary file for storing the data when a certain memory limit is reached. The default is 1 MB, but you can change this when initialising cache_to_phpTemp.

     类似cache_to_discISAM这种方式,使用cache_to_phpTemp时,所有的单元格会还存在php://temp I/O流中,只把他们的位置保存在PHP的内存中。PHP的php://memory包裹器将数据保存在内存中,php://temp的行为类似,但是当存储的数据大小超过内存限制时,会将数据保存在临时文件中,默认的大小是1MB,但是你可以在初始化时修改它:

    Php代码  

    $cacheMethod = PHPExcel_CachedObjectStorageFactory:: cache_to_phpTemp;  

    $cacheSettings = array( ' memoryCacheSize '  => '8MB'  );  

    PHPExcel_Settings::setCacheStorageMethod($cacheMethod, $cacheSettings);  

    The php://temp file is automatically deleted when your script terminates.

    php://temp文件在脚本结束是会自动删除。

     

     

    ===========================================================

     

    Php代码  

    PHPExcel_CachedObjectStorageFactory::cache_to_apc;  

    When using cache_to_apc, cell objects are maintained in APC with only an index maintained in PHP memory to identify that the cell exists. By default, an APC cache timeout of 600 seconds is used, which should be enough for most applications: although it is possible to change this when initialising cache_to_APC.

     当使用cach_to_apc时,单元格保存在APC中,只在内存中保存索引。APC缓存默认超时时间时600秒,对绝大多数应用是足够了,当然你也可以在初始化时进行修改:

    Php代码  

    $cacheMethod = PHPExcel_CachedObjectStorageFactory::cache_to_APC;  

    $cacheSettings = array( 'cacheTime'  => 600   );  

    PHPExcel_Settings::setCacheStorageMethod($cacheMethod, $cacheSettings);  

    When your script terminates all entries will be cleared from APC, regardless of the cacheTime value, so it cannot be used for persistent storage using this mechanism.

     当脚本运行结束时,所有的数据都会从APC中清楚(忽略缓存时间),不能使用此机制作为持久缓存。

     

     

    ===========================================================

    Php代码  

    PHPExcel_CachedObjectStorageFactory::cache_to_memcache  

    When using cache_to_memcache, cell objects are maintained in memcache with only an index maintained in PHP memory to identify that the cell exists.
    Php代码  

    $cacheMethod = PHPExcel_CachedObjectStorageFactory::cache_to_memcache;  

    $cacheSettings = array( 'memcacheServer'  => 'localhost',  

                            'memcachePort'    => 11211,  

                            'cacheTime'       => 600  

     );  

    PHPExcel_Settings::setCacheStorageMethod($cacheMethod, $cacheSettings);  

     从初始化设置的形式上看,MS还不支持多台memcache服务器轮询的方式,比较遗憾。

    When your script terminates all entries will be cleared from memcache, regardless of the cacheTime value, so it cannot be used for persistent storage using this mechanism.

     当脚本结束时,所有的数据都会从memcache清空(忽略缓存时间),不能使用该机制进行持久存储。

     

     

    ===========================================================

    Php代码  

    PHPExcel_CachedObjectStorageFactory::cache_to_wincache;  

    When using cache_to_wincache, cell objects are maintained in Wincache with only an index maintained in PHP memory to identify that the cell exists. By default, a Wincache cache timeout of 600 seconds is used, which should be enough for most applications: although it is possible to change this when initialising cache_to_wincache.

     使用cache_towincache方式,单元格对象会保存在Wincache中,只在内存中保存索引,默认情况下Wincache过期时间为600秒,对绝大多数应用是足够了,当然也可以在初始化时修改:

    Php代码  

    $cacheMethod = PHPExcel_CachedObjectStorageFactory::cache_to_wincache;  

    $cacheSettings = array( 'cacheTime'  => 600 );  

    PHPExcel_Settings::setCacheStorageMethod($cacheMethod, $cacheSettings);  

    When your script terminates all entries will be cleared from Wincache, regardless of the cacheTime value, so it cannot be used for persistent storage using this mechanism.

     

     

    PHPExcel还是比较强大的,最大的问题就是内存占用的问题,PHPExcel啥时候能出一个轻量级的版本,不需要那么多花哨的功能,只需要导出最普通的数据的版本就好了!

    哎...今天够累的,签到来了1...
    回复

    使用道具 举报

    您需要登录后才可以回帖 登录 | 立即注册

    本版积分规则

    QQ|手机版|小黑屋|Java自学者论坛 ( 声明:本站文章及资料整理自互联网,用于Java自学者交流学习使用,对资料版权不负任何法律责任,若有侵权请及时联系客服屏蔽删除 )

    GMT+8, 2024-4-29 08:04 , Processed in 0.066803 second(s), 29 queries .

    Powered by Discuz! X3.4

    Copyright © 2001-2021, Tencent Cloud.

    快速回复 返回顶部 返回列表