欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

phpQuery占用內(nèi)存過(guò)多的處理方法

 更新時(shí)間:2013年11月13日 10:30:04   作者:  
本文解決phpQuery占用內(nèi)存過(guò)多的問(wèn)題
phpQuery是一個(gè)用php實(shí)現(xiàn)的類(lèi)似jQuery的開(kāi)源項(xiàng)目,可以在服務(wù)器端以jQuery的語(yǔ)法形式解析網(wǎng)頁(yè)元素。 相對(duì)于正則或其它方式匹配網(wǎng)頁(yè)方式,phpQuery使用起來(lái)要方便的多。
在使用phpQuery采集網(wǎng)頁(yè)時(shí),遇到一個(gè)問(wèn)題:在處理大量網(wǎng)頁(yè)之后,phpQuery占用的內(nèi)存數(shù)量非常驚人(很快就超過(guò)了1G),
比如這段代碼:
復(fù)制代碼 代碼如下:

while (true) {
    phpQuery::newDocumentFile($htmlFile);
    // 處理網(wǎng)頁(yè)元素...
    echo memory_get_usage() . "\n";
}

謹(jǐn)慎運(yùn)行上面這段代碼,它會(huì)很快用光你的內(nèi)存。
經(jīng)過(guò)查看phpQuery的源代碼終于發(fā)現(xiàn)了問(wèn)題所在,phpQuery在每處理一個(gè)網(wǎng)頁(yè)就會(huì)產(chǎn)生一個(gè)DOMDocumentWrapper 對(duì)象,而每個(gè)DOMDocumentWrapper 對(duì)象會(huì)被保存在靜態(tài)成員$documents中(phpQuery::createDocumentWrapper中),這個(gè)變量是一個(gè)數(shù)組,每解析一個(gè)網(wǎng)頁(yè)數(shù)組元素就增加一個(gè)。
phpQuery::$documents[$wrapper->id] = $wrapper;
找到問(wèn)題后,解決就很容易了,每次解析完一個(gè)網(wǎng)頁(yè),把phpQuery::$documents置空即可。
復(fù)制代碼 代碼如下:

while (true) {
    phpQuery::newDocumentFile($htmlFile);
    // 處理網(wǎng)頁(yè)元素...
    phpQuery::$documents = array();
    echo memory_get_usage() . "\n";
}

內(nèi)存占用穩(wěn)定了。

相關(guān)文章

最新評(píng)論