Ini adalah aplikasi Linux bernama Colly yang rilis terbarunya dapat diunduh sebagai v2.1.0.zip. Ini dapat dijalankan secara online di penyedia hosting gratis OnWorks untuk workstation.
Unduh dan jalankan online aplikasi ini bernama Colly with OnWorks secara gratis.
Ikuti petunjuk ini untuk menjalankan aplikasi ini:
- 1. Download aplikasi ini di PC Anda.
- 2. Masuk ke file manager kami https://www.onworks.net/myfiles.php?username=XXXXX dengan username yang anda inginkan.
- 3. Upload aplikasi ini di filemanager tersebut.
- 4. Jalankan emulator online OnWorks Linux atau Windows online atau emulator online MACOS dari situs web ini.
- 5. Dari OS Linux OnWorks yang baru saja Anda mulai, buka file manager kami https://www.onworks.net/myfiles.php?username=XXXXX dengan nama pengguna yang Anda inginkan.
- 6. Download aplikasinya, install dan jalankan.
Tangkapan layar
Ad
Colly
DESKRIPSI
Colly menyediakan antarmuka yang bersih untuk menulis segala jenis crawler/scraper/spider. Dengan Colly Anda dapat dengan mudah mengekstrak data terstruktur dari situs web, yang dapat digunakan untuk berbagai aplikasi, seperti penambangan data, pemrosesan data, atau pengarsipan. Bersihkan API. Cepat (>1k permintaan/dtk pada satu inti) Mengelola penundaan permintaan dan konkurensi maksimum per domain. Penanganan cookie dan sesi otomatis. Sinkronisasi/async/pengikisan paralel. Pengikisan yang didistribusikan. Caching, penyandian otomatis respons non-unicode. Dukungan robots.txt. Dukungan Google App Engine.
Fitur
- Cepat (>1k permintaan/dtk pada satu inti)
- Mengelola penundaan permintaan dan konkurensi maksimum per domain
- Penanganan cookie dan sesi otomatis
- Sinkronisasi/async/pengikisan paralel
- Pengikisan yang didistribusikan
- Pengodean otomatis respons non-unicode
Bahasa Pemrograman
Go
KATEGORI
Ini adalah aplikasi yang juga dapat diambil dari https://sourceforge.net/projects/colly.mirror/. Itu telah dihosting di OnWorks untuk dijalankan secara online dengan cara termudah dari salah satu Sistem Operasi gratis kami.
