您好,登錄后才能下訂單哦!
這篇文章將為大家詳細講解有關使用Lazy Collections來提高 Laravel Excel讀取性能的方法,小編覺得挺實用的,因此分享給大家做個參考,希望大家閱讀完這篇文章后可以有所收獲。
在 Laravel 6 中添加了一種新類型的集合: Lazy Collections。 如果需要處理非常大的數據集(數千或數百萬行)而不會遇到內存限制,那么它們是非常棒的。
我最近的任務是在工作中的一個項目中重構 Excel 導出。 問題是,由于數據集太大,Laravel 無法處理,導出無法再創建。 數據庫查詢返回了大約 300,000 個結果! 應用程序產生超時或一直內存不足。
一種天真的方法是增加超時時間或內存限制,并希望下次出現問題時,另一個人會處理這個問題。 但這不是我的工作方式。 我不喜歡創可貼。 我喜歡具體的、長期的解決方案。
Laravel Excel 擴展包已經相當靈活。 通過在使用 FromQuery-concerns 時使用「chunks」,它在減少數據庫負載方面做得很好。 然而,我們的導出仍然很難處理大數據集。
我和我的同事討論過,我們是否應該完全重寫這個特性:將導出推送到隊列中,并在導出結束時向用戶發送通知。 然而,這個功能在這個應用程序中只是一個很小的東西。 對我們來說,僅僅為了一個簡單的導出而增加如此多的開銷是沒有意義的。
那天晚些時候,我有一個小小的「我發現了」的時刻,因為我記得 Laravel 中有 LazyCollections 這個東東。
我重新編寫了導出:它現在使用 FromCollection-concern,而不是 FromQuery。 我必須對 collection() 方法進行的惟一更改是將查詢構建器鏈末尾的 get() 方法替換為 cursor()。
下面是我們導出功能的簡化版本。 Request 對象通過構造函數傳遞,因此我們可以根據用戶在 UI 中選擇的內容對查詢進行調整。
<?php namespace App\Exports; use App\User; use Maatwebsite\Excel\Concerns\Exportable; use Maatwebsite\Excel\Concerns\FromCollection; use Illuminate\Http\Request; class UsersExport implements FromCollection { use Exportable; protected Request $request; public function __construct(Request $request) { $this->request = $request; } public function collection() { return User::query() ->when($this->request->get('include_subscribed'), function ($q) { return $q->where('is_subscribed', true); }) ->cursor(); // ← 重要的一點 } }
我相信你在你的項目中遇到了內存問題。 你增加了內存限制,希望問題已經解決了 (我自己已經做過無數次了)。
如果是在 Laravel 項目中,我希望,我可以讓你重新查看該代碼并使用 LazyCollections 重寫。
修復這個問題非常有趣,所以我做了一個小小的基準測試:我們的導出現在可以輕松地導出數百萬行,而不會遇到內存限制。 太酷了!
關于“使用Lazy Collections來提高 Laravel Excel讀取性能的方法”這篇文章就分享到這里了,希望以上內容可以對大家有一定的幫助,使各位可以學到更多知識,如果覺得文章不錯,請把它分享出去讓更多的人看到。
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。