溫馨提示×

php爬蟲框架有哪些

養(yǎng)魚的貓咪
313
2021-03-23 14:28:01
欄目: 編程語言

php爬蟲框架有哪些

php中常見的爬蟲框架有Beanbun、PHPCrawl和phpspider

1.Beanbun

Beanbun是一款使用php編寫的多進(jìn)程網(wǎng)絡(luò)爬蟲框架，具有良好的開放性和高可擴展性，Beanbun遵循PSR-4標(biāo)準(zhǔn)，且支持守護進(jìn)程與普通進(jìn)程、支持內(nèi)存、Redis隊列、支持廣度優(yōu)先和深度優(yōu)先、支持自定義URI過濾。

2.PHPCrawl

PHPCrawl是一款開源的php Web檢索爬蟲類庫，使用PHPCrawl可以選擇性指定爬蟲的行為，如內(nèi)容類型，過濾器、 cookie的處理等方式。

3.phpspider

phpspider是一個爬蟲開發(fā)框架，其是利用框架封裝的多進(jìn)程Worker類庫，代碼簡潔，執(zhí)行效率高，使用phpspider可以快速的創(chuàng)建一個爬蟲。

0 踩