Dit is de Linux-app genaamd Scrapy waarvan de nieuwste release kan worden gedownload als 2.11.0sourcecode.zip. Het kan online worden uitgevoerd in de gratis hostingprovider OnWorks voor werkstations.
Download en gebruik deze app genaamd Scrapy met OnWorks gratis online.
Volg deze instructies om deze app uit te voeren:
- 1. Download deze applicatie op uw pc.
- 2. Voer in onze bestandsbeheerder https://www.onworks.net/myfiles.php?username=XXXXX in met de gebruikersnaam die u wilt.
- 3. Upload deze applicatie in zo'n bestandsbeheerder.
- 4. Start de OnWorks Linux online of Windows online emulator of MACOS online emulator vanaf deze website.
- 5. Ga vanuit het OnWorks Linux-besturingssysteem dat u zojuist hebt gestart naar onze bestandsbeheerder https://www.onworks.net/myfiles.php?username=XXXXX met de gewenste gebruikersnaam.
- 6. Download de applicatie, installeer hem en voer hem uit.
SCREENSHOTS
Ad
Scrapy
PRODUCTBESCHRIJVING
Scrapy is een snel, open source framework op hoog niveau voor het crawlen van websites en het extraheren van gestructureerde gegevens van deze websites. Draagbaar en geschreven in Python, het kan draaien op Windows, Linux, macOS en BSD.
Scrapy is krachtig, snel en eenvoudig, en ook nog eens makkelijk uitbreidbaar. Schrijf gewoon de regels om de gegevens te extraheren en voeg desgewenst nieuwe functionaliteit toe zonder de kern aan te raken. Scrapy doet de rest en kan in een aantal toepassingen worden gebruikt. Het kan worden gebruikt voor datamining, monitoring en geautomatiseerd testen.
Voordelen
- Ingebouwde ondersteuning voor het selecteren en extraheren van gegevens uit HTML/XML-bronnen via uitgebreide XPath-expressies en CSS-selectors, met hulpmethoden voor het extraheren met behulp van reguliere expressies
- Interactieve shell-console voor het gebruik van CSS- en XPath-expressies om gegevens te schrapen
- Ingebouwde ondersteuning voor het genereren van feedexports in verschillende formaten (JSON, XML, CSV) en hun opslag in verschillende backends (S3, FTP, lokaal bestandssysteem)
- Ondersteuning voor codering en automatische detectie
- Sterke uitbreidbaarheid ondersteuning
- Tal van ingebouwde extensies en middlewares voor cookies en sessieafhandeling, robots.txt, crawldieptebeperking en meer
- Telnet-console om aan te sluiten op een Python-console die in uw Scrapy-proces wordt uitgevoerd
- Herbruikbare spiders, mediapijplijn, caching DNS-resolver en meer
Programmeertaal
Python
Categorieën
Dit is een applicatie die ook kan worden opgehaald van https://sourceforge.net/projects/scrapy.mirror/. Het is gehost in OnWorks om op een gemakkelijkste manier online te kunnen worden uitgevoerd vanuit een van onze gratis besturingssystemen.
