Scrapy是一個高層次的網絡抓取和刮框架編寫蜘蛛抓取和分析網頁的各種用途,從信息檢索監測或測試網站。
特點:
- 簡單:
- 在Scrapy設計與頭腦簡單,提供你需要的功能沒有得到你的方式
- 在剛寫的規則提取網頁中的數據,讓Scrapy抓取你 整個網站
- 在Scrapy用於生產履帶徹底刮除每天500多個零售商的網站,都在同一個服務器
- 在Scrapy設計具有可擴展性,所以它提供了幾種機制,堵塞新的代碼,而無需觸摸框架的核心
- 在Scrapy運行在Linux,Windows,Mac和BSD
- 在Scrapy完全是用Python編寫的,這使得它非常容易破解
- 在Scrapy擁有廣泛的測試套件具有很好的代碼覆蓋率
<李類=“bbli”>生產:
<李類=“bbli”>快:
<李類=“bbli”>擴展:
<李類=“bbli”>便攜:
<李類=“bbli”>開源和100%的Python:
<李類=“bbli”>好測試:
要求:
- 在Python中
評論沒有發現