Laravel-Excel-zip 解决导出的 Excel 数据过大
56

相信导出 Excel 这个功能大多开发者都接触过,但假如你要导出数十万条数据甚至更多的数据的时候,怎么办?如果不限制很容易出现内存不足的情况。难道条件限制业务人员导出?(说真的我是觉得限制是最优解,但人在江湖身不由己)

https://github.com/cblink/laravel-excel-zip 为了解决这个问题,可以通过自定义每个 Excel 数据量,把多个 Excel 压缩成一个 zip 下载

安装

composer require cblink/laravel-excel-zip -vvv

使用

执行以下语句去创建 config/excel_zip.php

php artisan vendor:publish --provider="Cblink\ExcelZip\ExcelZipServiceProvider"

config/excel_zip.php 中有两个属性

  • always_zip true 时无论数据多少是否多个或者一个Excel,都始终下载 zip;false 时当数据只足以下载一个Excel时只会下载 xlsx,多个才会下载 zip
  • chunk 每 chunk 条数据为一个 Excel 文件,默认 5000

Export

Exportmaatwebsite/excel excel 包的概念,详细可以去看他的文档。

在你的 Export 中加上 use CustomCollection 如果你不是很熟源码,建议 不要定义collection方法,除非你可以根据源码适当修改

<?php

use Cblink\ExcelZip\CustomCollection;
use Maatwebsite\Excel\Concerns\FromCollection;

class MemberExport implements FromCollection
{
    use CustomCollection;
}

Controller

<?php

use Cblink\ExcelZip\ExcelZip;
use App\Http\Controllers\Controller;

class MemberController extends Controller
{
    // 通过数据库 chunk 分批导出(推荐!)
    public function export1(ExcelZip $excelZip, MemberExport $export)
    {
        // set_time_limit(0); 提醒,小心脚本超时
        $excelZip = $excelZip->setExport($export);

        Member::chunk(5000, function ($members) use ($excelZip) {
                $excelZip->excel($members);
        });

        return $excelZip->zip();
    }

    // 包内 chunk 实现(不推荐,如果数据量过大会出现 DB 层面的内存溢出)
    public function export2(ExcelZip $excelZip, MemberExport $export)
    {
        return $excelZip->download(Member::all(), $export);
    }
}

各位看官给个 star ? https://github.com/cblink/laravel-excel-zip

php吹水交流群 570769430

本帖由系统于 2个月前 自动加精
《L01 基础入门》
我们将带你从零开发一个项目并部署到线上,本课程教授 Web 开发中专业、实用的技能,如 Git 工作流、Laravel Mix 前端工作流等。
《L03 构架 API 服务器》
你将学到如 RESTFul 设计风格、PostMan 的使用、OAuth 流程,JWT 概念及使用 和 API 开发相关的进阶知识。
讨论数量: 23

:+1:

2个月前
Hanson

感谢 QQ 群友的意见,之后会考虑加上队列生成异步下载 等功能

2个月前

似乎不支持 laravel-excel 2.1

2个月前
Hanson

@MarksGui 对的,直接用的 3.0

2个月前
96qbhy

@Hanson 啥群友的意见,明明是我的意见。

2个月前
Hanson

@96qbhy 你不就是群友么 🤨

2个月前
BradStevens

这个群里大佬多吗?还是光吹水啊?

2个月前
Hanson

@BradStev 吹水和技术都有

2个月前
96qbhy

@Hanson 错,我是群管理。

2个月前

require 的时候提示没有匹配版本,laravel-excel 版本是3.0

2个月前

直接丢队列更好吧,产品和运营很多都不会忍受下载下来是个zip的。。。或者懒得写队列的话,可以for循环个总数,然后每次循环插入1W条数据进去,循环一次sleep三秒,这样也可以简单实现下载大文件excel

2个月前
Hanson

@Jaywade sleep三秒意义在哪?

2个月前

@Hanson 服务器和数据库扛得住压力的话,完全可以不sleep

2个月前
Hanson

@Jaywade sleep 还可以解决压力? :joy:

2个月前

@Hanson :joy:肯定不能啊

2个月前

@Hanson 可能是我表达错了,不是php的sleep;是指在导出大量数据的时候,页面展示的时候可以循环3秒去查一次导出了多少数据,然后比较友好的展示给用户。。。不好意思,是我表达上不是很好 :sweat_smile:

2个月前
Hanson

@Jaywade 如果是查进度,我有更好的包,到时会发布一下,你这个也是很糟糕的处理方式

2个月前

@Hanson 坐等大神封装一个 :+1:

2个月前

@Hanson hanson大神有 查进度 的包了吗...

4周前

导出 .csv 会比导出 .xlsx 效率高很多

4周前
Hanson

@JeffcottLu 还没有时间加呢

4周前

没看明白怎么用呢?

4周前

不错 感觉独立出来不依赖于 phpspreadsheet 应该会更好些,主要是感觉太慢很多同步场景满足不了 我现在都是直接导出csv 文件。

3周前

  • 请注意单词拼写,以及中英文排版,参考此页
  • 支持 Markdown 格式, **粗体**、~~删除线~~、`单行代码`, 更多语法请见这里 Markdown 语法
  • 支持表情,使用方法请见 Emoji 自动补全来咯,可用的 Emoji 请见 :metal: :point_right: Emoji 列表 :star: :sparkles:
  • 上传图片, 支持拖拽和剪切板黏贴上传, 格式限制 - jpg, png, gif
  • 发布框支持本地存储功能,会在内容变更时保存,「提交」按钮点击时清空
  请勿发布不友善或者负能量的内容。与人为善,比聪明更重要!