A Scrapy ( /ˈ s k r eɪ p aɪ /Commit 975f150 SKRAY-peye ) egy Python nyelven írt és Cambuslang nyelven fejlesztett ingyenes és nyílt forráskódú webbejáró (crawler) keretrendszer. Eredetileg webscrapelésre tervezték, de API-k használatával vagy általános célú webrobotként is használható adatok kinyerésére.Scrapy at a glance. Jelenleg a Zyte (korábban Scrapinghub ), egy webscraper eszközöket fejlesztő és szolgáltató cég a karbantartója.
A Scrapy projektarchitektúra „pókok” köré épül, ezek önműködő bejárók, amelyek utasításokat kapnak. A többi ne ismételje meg magát keretrendszer szellemét követve, mint például a Django, ez megkönnyíti a nagy bejáró projektek felépítését és beállítását azáltal, hogy lehetővé teszi a fejlesztők számára, hogy újra felhasználják kódjukat.
Néhány jól ismert, Scrapy-t használó cég és termék: Lyst, Parse.ly, Sayone Technologies, Sciences Po Medialab,Hyphe v0.0.0: the first release of our new webcrawler is out! Data.gov.uk World Government Data webhely .
Története A Scrapy a londoni székhelyű Mydeco webaggregáló és e-kereskedelmi vállalatnál született, ahol a Mydeco és az Insophia (az uruguayi montevideói webes tanácsadó cég) alkalmazottai fejlesztették és tartották karban. Az első nyilvános kiadás 2008 augusztusában volt a BSD licenc alatt, a mérföldkő 1.0 kiadás pedig 2015 júniusában történt. 2011-ben a Zyte (korábban Scrapinghub) lett az új hivatalos karbantartó. Interview Scraping Hub.
Jegyzetek
Fordítás
Kategória:Objektumorientált programozás