溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

如何處理phpQuery占用內存過多的問題

發(fā)布時間:2021-10-08 16:07:32 來源:億速云 閱讀:86 作者:iii 欄目:開發(fā)技術

本篇內容主要講解“如何處理phpQuery占用內存過多的問題”,感興趣的朋友不妨來看看。本文介紹的方法操作簡單快捷,實用性強。下面就讓小編來帶大家學習“如何處理phpQuery占用內存過多的問題”吧!

phpQuery是一個用php實現的類似jQuery的開源項目,可以在服務器端以jQuery的語法形式解析網頁元素。 相對于正則或其它方式匹配網頁方式,phpQuery使用起來要方便的多。
在使用phpQuery采集網頁時,遇到一個問題:在處理大量網頁之后,phpQuery占用的內存數量非常驚人(很快就超過了1G),
比如這段代碼:

復制代碼 代碼如下:

while (true) {
    phpQuery::newDocumentFile($htmlFile);
    // 處理網頁元素...
    echo memory_get_usage() . "\n";
}


謹慎運行上面這段代碼,它會很快用光你的內存。
經過查看phpQuery的源代碼終于發(fā)現了問題所在,phpQuery在每處理一個網頁就會產生一個DOMDocumentWrapper 對象,而每個DOMDocumentWrapper 對象會被保存在靜態(tài)成員$documents中(phpQuery::createDocumentWrapper中),這個變量是一個數組,每解析一個網頁數組元素就增加一個。
phpQuery::$documents[$wrapper->id] = $wrapper;
找到問題后,解決就很容易了,每次解析完一個網頁,把phpQuery::$documents置空即可。

復制代碼 代碼如下:


while (true) {
    phpQuery::newDocumentFile($htmlFile);
    // 處理網頁元素...
    phpQuery::$documents = array();
    echo memory_get_usage() . "\n";
}

內存占用穩(wěn)定了。

到此,相信大家對“如何處理phpQuery占用內存過多的問題”有了更深的了解,不妨來實際操作一番吧!這里是億速云網站,更多相關內容可以進入相關頻道進行查詢,關注我們,繼續(xù)學習!

向AI問一下細節(jié)

免責聲明:本站發(fā)布的內容(圖片、視頻和文字)以原創(chuàng)、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯(lián)系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI