Aceasta este aplicația Windows numită crwlr, a cărei ultimă versiune poate fi descărcată ca v3.5.5sourcecode.tar.gz. Poate fi rulată online în furnizorul de găzduire gratuită OnWorks pentru stații de lucru.
Descărcați și rulați online această aplicație numită crwlr cu OnWorks gratuit.
Urmați aceste instrucțiuni pentru a rula această aplicație:
- 1. Ați descărcat această aplicație pe computer.
- 2. Introduceți în managerul nostru de fișiere https://www.onworks.net/myfiles.php?username=XXXXX cu numele de utilizator pe care îl doriți.
- 3. Încărcați această aplicație într-un astfel de manager de fișiere.
- 4. Porniți orice emulator online OS OnWorks de pe acest site, dar mai bun emulator online Windows.
- 5. Din sistemul de operare Windows OnWorks pe care tocmai l-ați pornit, accesați managerul nostru de fișiere https://www.onworks.net/myfiles.php?username=XXXXX cu numele de utilizator dorit.
- 6. Descărcați aplicația și instalați-o.
- 7. Descărcați Wine din depozitele de software ale distribuțiilor Linux. Odată instalat, puteți apoi să faceți dublu clic pe aplicație pentru a le rula cu Wine. De asemenea, puteți încerca PlayOnLinux, o interfață elegantă peste Wine, care vă va ajuta să instalați programe și jocuri populare Windows.
Wine este o modalitate de a rula software-ul Windows pe Linux, dar fără a fi necesar Windows. Wine este un strat de compatibilitate Windows open-source care poate rula programe Windows direct pe orice desktop Linux. În esență, Wine încearcă să reimplementeze suficient Windows de la zero, astfel încât să poată rula toate acele aplicații Windows fără a avea nevoie efectiv de Windows.
SCREENSHOTS
Ad
crwlr
DESCRIERE
Această bibliotecă oferă un fel de cadru și o mulțime de așa-numiți pași gata de utilizare, pe care îi puteți folosi ca blocuri de construcție, pentru a vă construi propriile crawler-uri și scraper-uri. Înainte de a vă scufunda în bibliotecă, să aruncăm o privire la termenii crawling și scraping. Pentru majoritatea cazurilor de utilizare din lumea reală, aceste două lucruri merg mână în mână, motiv pentru care această bibliotecă le ajută și le combină pe ambele. Un crawler (web) este un program care (descărcă) documente și urmează linkurile din acesta pentru a le încărca și ele. Un crawler ar putea încărca de fapt toate linkurile pe care le găsește (și i se permite să se încarce în funcție de fișierul robots.txt), apoi ar încărca întregul internet (dacă URL-urile cu care începe nu sunt fără fund). Sau poate fi restricționat pentru a încărca numai linkuri care corespund anumitor criterii (pe același domeniu/gazdă, calea URL începe cu „/foo”,...) sau numai la o anumită adâncime. O adâncime de 3 înseamnă 3 niveluri adâncime. Linkurile găsite pe adresele URL inițiale furnizate crawlerului sunt de nivelul 1 și așa mai departe.
Categorii
- Politețea crawlerului (respectarea robots.txt, throttling,...)
- Obțineți linkuri absolute din documente HTML
- Obțineți sitemap-uri de pe robots.txt și obțineți toate adresele URL de pe acele sitemap-uri
- Accesați cu crawlere (încărcați) toate paginile unui site web
- Utilizați orice metodă HTTP (GET, POST,...) și trimiteți orice antet sau corp
- Iterați peste paginile de listă paginate
Limbaj de programare
PHP
Categorii
Aceasta este o aplicație care poate fi preluată și de la https://sourceforge.net/projects/crwlr.mirror/. A fost găzduit în OnWorks pentru a fi rulat online într-un mod cât mai ușor de pe unul dintre sistemele noastre operative gratuite.
