Jest to aplikacja dla systemu Windows o nazwie pyspider, której najnowszą wersję można pobrać w wersji 0.3.10.zip. Można go uruchomić online w bezpłatnym dostawcy hostingu OnWorks dla stacji roboczych.
Pobierz i uruchom online tę aplikację o nazwie pyspider z OnWorks za darmo.
Postępuj zgodnie z tymi instrukcjami, aby uruchomić tę aplikację:
- 1. Pobrałem tę aplikację na swój komputer.
- 2. Wpisz w naszym menedżerze plików https://www.onworks.net/myfiles.php?username=XXXXX z wybraną nazwą użytkownika.
- 3. Prześlij tę aplikację w takim menedżerze plików.
- 4. Uruchom dowolny emulator online systemu operacyjnego OnWorks z tej witryny, ale lepszy emulator online systemu Windows.
- 5. W systemie operacyjnym OnWorks Windows, który właśnie uruchomiłeś, przejdź do naszego menedżera plików https://www.onworks.net/myfiles.php?username=XXXXX z wybraną nazwą użytkownika.
- 6. Pobierz aplikację i zainstaluj ją.
- 7. Pobierz Wine z repozytoriów oprogramowania dystrybucji Linuksa. Po zainstalowaniu możesz dwukrotnie kliknąć aplikację, aby uruchomić ją za pomocą Wine. Możesz także wypróbować PlayOnLinux, fantazyjny interfejs w Wine, który pomoże Ci zainstalować popularne programy i gry Windows.
Wine to sposób na uruchamianie oprogramowania Windows w systemie Linux, ale bez systemu Windows. Wine to warstwa kompatybilności z systemem Windows typu open source, która może uruchamiać programy systemu Windows bezpośrednio na dowolnym pulpicie systemu Linux. Zasadniczo Wine próbuje ponownie zaimplementować system Windows od podstaw, aby mógł uruchamiać wszystkie te aplikacje Windows bez faktycznego korzystania z systemu Windows.
ZRZUTY EKRANU
Ad
pająk
OPIS
pyspider to potężny system Spider (Web Crawler) w Pythonie. Komponenty są połączone kolejką komunikatów. Każdy komponent, w tym kolejka komunikatów, działa we własnym procesie/wątku i można go wymienić. Oznacza to, że gdy proces jest powolny, można mieć wiele wystąpień procesora i w pełni wykorzystywać wiele procesorów lub wdrażać na wielu komputerach. Ta architektura sprawia, że pyspider jest naprawdę szybki. testy porównawcze. Ponieważ pyspider ma różne komponenty, możesz po prostu uruchomić pyspider, aby uruchomić samodzielną i trzecią bezobsługową instancję. Lub użyj MySQL lub MongoDB i RabbitMQ do wdrożenia rozproszonego klastra indeksowania. Aby wdrożyć pyspider w środowisku produktu, uruchomienie komponentu w każdym procesie i przechowywanie danych w usłudze bazy danych jest bardziej niezawodne i elastyczne. Aby wdrożyć komponenty pyspider w każdym pojedynczym procesie, potrzebujesz co najmniej jednej usługi bazy danych. pyspider obsługuje teraz MySQL, MongoDB i PostgreSQL. Możesz wybrać jedną z nich.
Funkcjonalności
- Napisz skrypt w Pythonie
- Potężny WebUI z edytorem skryptów, monitorem zadań, menedżerem projektu i przeglądarką wyników
- MySQL, MongoDB, Redis, SQLite, Elasticsearch; PostgreSQL z SQLAlchemy jako zapleczem bazy danych
- RabbitMQ, Beanstalk, Redis i Kombu jako kolejka komunikatów
- Priorytet zadania, ponawianie, okresowo, ponowne indeksowanie według wieku itp.
- Architektura rozproszona, indeksowanie stron Javascript, Python 2 i 3 itp.
Język programowania
Python
Kategorie
Jest to aplikacja, którą można również pobrać z https://sourceforge.net/projects/pyspider.mirror/. Został umieszczony w OnWorks, aby można go było uruchomić online w najprostszy sposób z jednego z naszych bezpłatnych systemów operacyjnych.
