Scrapy

Scrapy 1.0.3 更新

廢材是用Python編寫的100%,可用於簡單的數據挖掘,以網頁監控,網絡搜索引擎,甚至進行代碼測試。Scrapy不在字的真諦一個搜索引擎,但是它的作用就像一(不帶索引的一部分)。不過Scrapy可以是一個偉大的工具來建立你的搜索引擎的邏輯上。這個框架的真正威力取決於在其核心的多功能性,Scrapy是在其上建立在通用或專用的搜索蜘蛛(抓取工具)的系統。雖然這聽起來非常複雜的非技術用戶,快速查看過的文件和可用的教程,這是很簡單的,看看如何Scrapy設法採取了所有的辛勤工作了這一點,並降低整個過程只幾行代碼(...