V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
1a7498
V2EX  ›  PHP

请问导出大量数据 Excel 内存溢出该如何解决呢?

  •  
  •   1a7498 · Aug 4, 2018 · 7237 views
    This topic created in 2829 days ago, the information mentioned may be changed or developed.

    百度搜索大致是分割然后循环输出压缩到一个文件输出浏览器,但是具体实现都会出错,刚刚学 php 两个月,望各位大哥指导一下,谢谢ヾ(o◕∀◕)ノヾ

    20 replies    2018-08-07 17:00:45 +08:00
    leo9960
        2
    leo9960  
       Aug 4, 2018 via Android
    调高内存限制
    f2f2f
        3
    f2f2f  
       Aug 4, 2018
    目测你是 32 位 Office
    CHEN1016
        4
    CHEN1016  
       Aug 4, 2018 via Android
    本来想说 poi 的,一看是 php...
    ccc008
        5
    ccc008  
       Aug 4, 2018 via iPhone
    导出大量数据的话用 csv 格式吧
    Rekkles
        6
    Rekkles  
       Aug 4, 2018
    https://github.com/justcodingnobb/EasyExcel 自己造过轮子 有点方 不过内存溢出可以解决
    anyforever
        7
    anyforever  
       Aug 4, 2018 via iPhone
    yeild 了解一下
    1a7498
        8
    1a7498  
    OP
       Aug 4, 2018
    @ccc008 csv 也很大,一天大概 100w 条数据
    1a7498
        9
    1a7498  
    OP
       Aug 4, 2018
    @anyforever 这个是 Python 的吗
    anyforever
        10
    anyforever  
       Aug 4, 2018 via iPhone
    @1a7498 PHP 也有了啊
    nl101531
        11
    nl101531  
       Aug 4, 2018 via Android
    按照 poi 里面大量导出的思路是内存中存放少量的数据,然后边写边释放已写入的内存,类似一个滑动窗口。
    luban
        12
    luban  
       Aug 4, 2018
    两种思路,
    csv 虽然文件大,但是可以一行一行读
    还是 excel 的话, Java 里 poi 对于大文件的思路是解压缩(excel 本身是压缩的), 解析里面需要的 xml 文件
    bombless
        13
    bombless  
       Aug 4, 2018 via Android
    可以让客户端去生成,服务端提供数据
    annielong
        14
    annielong  
       Aug 4, 2018
    要求不严的话用兼容标签试试看,使用 html 格式生成文件,后缀名改成 xls
    JimGee
        15
    JimGee  
       Aug 4, 2018
    @1a7498 楼主你用的 PHPExcel 的吗? PHPExcel_Writer 了解一下。
    JimGee
        16
    JimGee  
       Aug 4, 2018
    @1a7498 写错了,是 PHP_XLSXWriter 😂
    4ier
        17
    4ier  
       Aug 5, 2018
    分页,每次内存中只保存一页数据(但是数据必须简单有序,如果要做到跨页之间的依赖或者乱序就比较麻烦)
    qiuqiuer
        18
    qiuqiuer  
       Aug 5, 2018 via Android
    如果之后看的话用 e 编辑器或者 u 编辑器就行啊
    marsberrys
        19
    marsberrys  
       Aug 6, 2018 via iPhone
    导 csv 吧,一般导数据表 csv 用 Excel 打开跟 Excel 没啥区别。分页写入就行了
    liluoao1
        20
    liluoao1  
       Aug 7, 2018
    我觉得 yield 很好啊,http://php.net/manual/zh/language.generators.syntax.php
    当然换 csv 也行
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2398 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 74ms · UTC 01:06 · PVG 09:06 · LAX 18:06 · JFK 21:06
    ♥ Do have faith in what you're doing.