Scrapy

scrapy är en hög nivå webbsökning och skrapa ramverk för att skriva spindlar att krypa och tolka webbsidor för alla typer av ändamål, från informationssökning till att övervaka eller testa webbplatser.

Funktioner :

• Enkel:
• scrapy har utformats med enkelhet i åtanke, genom att tillhandahålla de funktioner du behöver utan att vara i vägen


• Produktiv:
• Bara skriva reglerna för att extrahera data från webbsidor och låt scrapy krypa hela webbplatsen för dig


• Snabb:
• scrapy används i produktions sökrobotar att helt skrapa mer än 500 återförsäljare platser dagligen, allt i en server


• Extensible:
• scrapy utformades med töjbarhet i åtanke och det ger flera mekanismer för att koppla ny kod utan att behöva röra ramarna core


• Bärbar:
• scrapy körs på Linux, Windows, Mac och BSD


• Open Source och 100% Python:
• scrapy är helt skriven i Python, vilket gör det mycket enkelt att hacka


• Väl testad:
• scrapy har ett omfattande testsvit med mycket bra kod täckning

Krav :

• Python