php支持類(lèi)編程,我寫(xiě)的爬蟲(chóng)主要的類(lèi). 1.url處理web_site_info,主要用處理url,分析域名等。 2.數(shù)據(jù)庫(kù)操作mysql_insert.php,處理和數(shù)據(jù)庫(kù)相關(guān)的操作。 3.歷史記錄處理,記錄已經(jīng)處理的url。 4.爬蟲(chóng)類(lèi)。存在的問(wèn)題和不足這個(gè)爬蟲(chóng)在小數(shù)據(jù)量的情況下,運(yùn)行良好,但是在大數(shù)據(jù)量的情況下,歷史記錄處理類(lèi)的效率就不是很...
www.dbjr.com.cn/article/691...htm 2025-6-3