Ito ang Windows app na pinangalanang Scrapy-Redis na ang pinakabagong release ay maaaring ma-download bilang Version0.7.1Released.zip. Maaari itong patakbuhin online sa libreng hosting provider na OnWorks para sa mga workstation.
I-download at patakbuhin online ang app na ito na pinangalanang Scrapy-Redis sa OnWorks nang libre.
Sundin ang mga tagubiling ito upang patakbuhin ang app na ito:
- 1. Na-download ang application na ito sa iyong PC.
- 2. Ipasok sa aming file manager https://www.onworks.net/myfiles.php?username=XXXXX kasama ang username na gusto mo.
- 3. I-upload ang application na ito sa naturang filemanager.
- 4. Magsimula ng anumang OS OnWorks online emulator mula sa website na ito, ngunit mas mahusay na Windows online emulator.
- 5. Mula sa OnWorks Windows OS na kasisimula mo pa lang, pumunta sa aming file manager https://www.onworks.net/myfiles.php?username=XXXX gamit ang username na gusto mo.
- 6. I-download ang application at i-install ito.
- 7. I-download ang Wine mula sa iyong mga Linux distributions software repository. Kapag na-install na, maaari mong i-double click ang app upang patakbuhin ang mga ito gamit ang Wine. Maaari mo ring subukan ang PlayOnLinux, isang magarbong interface sa ibabaw ng Wine na tutulong sa iyong mag-install ng mga sikat na programa at laro sa Windows.
Ang alak ay isang paraan upang patakbuhin ang software ng Windows sa Linux, ngunit walang kinakailangang Windows. Ang alak ay isang open-source na layer ng compatibility ng Windows na maaaring direktang magpatakbo ng mga program sa Windows sa anumang desktop ng Linux. Sa totoo lang, sinusubukan ng Wine na muling ipatupad ang sapat na Windows mula sa simula upang mapatakbo nito ang lahat ng mga Windows application na iyon nang hindi talaga nangangailangan ng Windows.
MGA LALAKI
Ad
Scrapy-Redis
DESCRIPTION
Maaari kang magsimula ng maraming instance ng spider na may iisang redis queue. Pinakamahusay na angkop para sa malawak na multi-domain na pag-crawl. Ang mga na-scrap na item ay mapupunta sa isang redis queued na nangangahulugang maaari mong simulan ang kasing dami ng kinakailangang proseso ng post-processing na nagbabahagi ng mga item queue. Scheduler + Duplication Filter, Item Pipeline, Base Spider. Ang serializer ng mga default na kahilingan ay pickle, ngunit maaari itong baguhin sa anumang module na may mga function ng load at dumps. Tandaan na ang pickle ay hindi tugma sa pagitan ng mga bersyon ng python. Binago ng Bersyon 0.3 ang serialization ng mga kahilingan mula sa marshal patungong cPickle, samakatuwid ang mga patuloy na kahilingan gamit ang bersyon 0.2 ay hindi gagana sa 0.3. Ang klase na scrapy_redis.spiders.RedisSpider ay nagbibigay-daan sa isang spider na basahin ang mga url mula sa redis. Ang mga url sa redis queue ay isa-isang ipoproseso, kung ang unang kahilingan ay magbubunga ng higit pang mga kahilingan, ipoproseso ng spider ang mga kahilingang iyon bago kumuha ng isa pang url mula sa redis.
Mga tampok
- Ibinahagi ang pag-crawl/pag-scrape
- Ibinahagi ang post-processing
- Scrapy plug-and-play na mga bahagi
- Kinakailangan ang Python 2.7, 3.4 o 3.5
- Redis >= 2.8 ang kailangan
- Scheduler + Duplication Filter, Item Pipeline, Base Spider
Wika ng Programming
Sawa
Ito ay isang application na maaari ding kunin mula sa https://sourceforge.net/projects/scrapy-redis.mirror/. Na-host ito sa OnWorks upang mapatakbo online sa pinakamadaling paraan mula sa isa sa aming mga libreng Operative System.
