PHPCrawl

PHPCrawl 0.83

可以以書面的搜索爬蟲(蜘蛛),地雷網頁的各種信息進行使用。PHPCrawl收購它被配置來獲取信息,並通過它進行進一步處理,以更強大的應用 特點: 在過濾器URL和內容類型的數據定義的方式來處理cookie 定義的方式來處理的robots.txt文件在限制它的活動以各種方式在多處理模式 什麼在此版本中是新的: 在修正錯誤:現在,正確編碼在鏈接被部分進行了urlencoded和部分沒有得到重建/。從PHPCrawlerRobotsTxtParser.class.php...