YACY 1.2 YACY是一個分佈式的網絡爬蟲,也是一個緩存HTTP / HTTPS代理。經過該代理的網頁被索引,並且可以使用一個內置的HTTP服務器進行搜索。YACY同行相互連接,形成一個基於P2P的指數交換網絡的基於分佈式哈希表。明確網絡抓取可以在本地或合作來完成,形成了全局搜索和分佈式索引引擎的網頁。YACY還提供URL與其他代理同行,個人網頁和servlet網頁託管,文件共享區,以及數據庫引擎中的黑名單共享過濾 特點: ... 20 Feb 15 Linux 閱讀更多