Scrapy

Scrapy adalah web tingkat tinggi merangkak dan mengorek kerangka untuk menulis laba-laba merangkak dan mengurai halaman web untuk semua jenis tujuan, dari pencarian informasi pemantauan atau menguji situs web.

Fitur :

• Simple:
• Scrapy dirancang dengan kesederhanaan dalam pikiran, dengan menyediakan fitur yang Anda butuhkan tanpa menghambat Anda


• Produktif:
• Hanya menulis aturan untuk mengekstrak data dari halaman web dan membiarkan Scrapy merangkak seluruh situs web untuk Anda


• Cepat:
• Scrapy digunakan dalam produksi crawler untuk benar-benar mengikis lebih dari 500 situs pengecer harian, semua dalam satu server


• Extensible:
• Scrapy dirancang dengan diperpanjang dalam pikiran dan sehingga menyediakan beberapa mekanisme untuk plug kode baru tanpa harus menyentuh inti kerangka


• Portabel:
• Scrapy berjalan pada Linux, Windows, Mac dan BSD


• Open Source dan 100% Python:
• Scrapy benar-benar ditulis dengan Python, yang membuatnya sangat mudah untuk hack


• Nah-diuji:
• Scrapy memiliki test suite yang luas dengan cakupan kode yang sangat baik

Persyaratan :

• Python