Scrapy

Scrapy ay isang mataas na antas ng web pag-crawl at nagi-scrap ng framework para sa pagsusulat ng mga spider na i-crawl at i-parse ang mga pahina ng web para sa lahat ng uri ng layunin, mula sa pagkuha ng impormasyon sa pagsubaybay o pagsubok ng mga web site.

Mga Tampok :

• Simple:
• Scrapy dinisenyo ay may kababaang-loob sa isip, sa pamamagitan ng pagbibigay ng mga tampok na kailangan mo nang hindi pagkuha sa iyong paraan


• produktibo:
• isulat lamang ang mga panuntunan upang kunin ang data mula sa mga web page at hayaan ang Scrapy-crawl sa buong web site para sa iyo


• Mabilis na:
• Scrapy ay ginagamit sa produksyon ng mga crawler upang lubos na simutin ang pispis higit sa 500 retailer site araw-araw, ang lahat sa isang server


• Extensible:
• Scrapy dinisenyo ay may posibilidad na pahabain sa isip at kaya nagbibigay ito ng ilang mga mekanismo upang plug bagong code nang hindi kinakailangang galawin ang balangkas ng mga pangunahing


• Portable:
• Scrapy ay tumatakbo sa Linux, Windows, Mac at BSD


• Open Source at 100% Python:
• Scrapy ay ganap na nakasulat sa Python, na ginagawang mas madali upang sumibak


• Well-sinubukan:
• Scrapy may malawak na pagsubok na suite na may napakagandang coverage code

Mga Kinakailangan :

• Python