Ini adalah aplikasi Windows bernama Scrapy-Redis yang rilis terbarunya dapat diunduh sebagai Version0.7.1Released.zip. Ini dapat dijalankan secara online di penyedia hosting gratis OnWorks untuk workstation.
Unduh dan jalankan secara online aplikasi bernama Scrapy-Redis dengan OnWorks ini secara gratis.
Ikuti petunjuk ini untuk menjalankan aplikasi ini:
- 1. Download aplikasi ini di PC Anda.
- 2. Masuk ke file manager kami https://www.onworks.net/myfiles.php?username=XXXXX dengan username yang anda inginkan.
- 3. Upload aplikasi ini di filemanager tersebut.
- 4. Mulai emulator online OS OnWorks apa pun dari situs web ini, tetapi emulator online Windows yang lebih baik.
- 5. Dari OS Windows OnWorks yang baru saja Anda mulai, buka file manager kami https://www.onworks.net/myfiles.php?username=XXXXX dengan nama pengguna yang Anda inginkan.
- 6. Unduh aplikasi dan instal.
- 7. Unduh Wine dari repositori perangkat lunak distribusi Linux Anda. Setelah terinstal, Anda kemudian dapat mengklik dua kali aplikasi untuk menjalankannya dengan Wine. Anda juga dapat mencoba PlayOnLinux, antarmuka mewah di atas Wine yang akan membantu Anda menginstal program dan game Windows populer.
Wine adalah cara untuk menjalankan perangkat lunak Windows di Linux, tetapi tidak memerlukan Windows. Wine adalah lapisan kompatibilitas Windows sumber terbuka yang dapat menjalankan program Windows secara langsung di desktop Linux apa pun. Pada dasarnya, Wine mencoba untuk mengimplementasikan kembali Windows dari awal sehingga dapat menjalankan semua aplikasi Windows tersebut tanpa benar-benar membutuhkan Windows.
SCREENSHOT:
Scrapy-Redis
DESKRIPSI:
Anda dapat memulai beberapa instance spider yang berbagi antrean redis tunggal. Paling cocok untuk perayapan multi-domain yang luas. Item tergores didorong ke dalam antrian redis yang berarti Anda dapat memulai sebanyak mungkin proses pasca-pemrosesan yang diperlukan dengan berbagi antrian item. Scheduler + Duplication Filter, Item Pipeline, Base Spider. Serializer permintaan default adalah acar, tetapi dapat diubah ke modul apa pun dengan fungsi pemuatan dan pembuangan. Perhatikan bahwa acar tidak kompatibel antara versi python. Versi 0.3 mengubah serialisasi permintaan dari marshal ke cPickle, oleh karena itu permintaan yang bertahan menggunakan versi 0.2 tidak akan dapat bekerja pada 0.3. Kelas scrapy_redis.spiders.RedisSpider memungkinkan laba-laba membaca url dari redis. Url dalam antrian redis akan diproses satu demi satu, jika permintaan pertama menghasilkan lebih banyak permintaan, laba-laba akan memproses permintaan tersebut sebelum mengambil url lain dari redis.
Fitur
- Perayapan / pengikisan terdistribusi
- Pasca-pemrosesan terdistribusi
- Komponen plug-and-play tergores
- Python 2.7, 3.4 atau 3.5 diperlukan
- Redis >= 2.8 diperlukan
- Penjadwal + Filter Duplikasi, Pipa Item, Laba-laba Dasar
Bahasa Pemrograman
Ular sanca
Ini adalah aplikasi yang juga dapat diambil dari https://sourceforge.net/projects/scrapy-redis.mirror/. Ini telah di-host di OnWorks untuk dijalankan secara online dengan cara termudah dari salah satu Sistem Operasi gratis kami.