Ini ialah apl Linux bernama Web Crawler Security Tool yang keluaran terbarunya boleh dimuat turun sebagai crawler_v1.0.1.tar.gz. Ia boleh dijalankan dalam talian dalam penyedia pengehosan percuma OnWorks untuk stesen kerja.
Muat turun dan jalankan dalam talian apl bernama Alat Keselamatan Perayap Web ini dengan OnWorks secara percuma.
Ikut arahan ini untuk menjalankan apl ini:
- 1. Memuat turun aplikasi ini dalam PC anda.
- 2. Masukkan dalam pengurus fail kami https://www.onworks.net/myfiles.php?username=XXXXX dengan nama pengguna yang anda mahukan.
- 3. Muat naik aplikasi ini dalam pengurus filem tersebut.
- 4. Mulakan OnWorks Linux dalam talian atau emulator dalam talian Windows atau emulator dalam talian MACOS dari tapak web ini.
- 5. Daripada OS Linux OnWorks yang baru anda mulakan, pergi ke pengurus fail kami https://www.onworks.net/myfiles.php?username=XXXX dengan nama pengguna yang anda mahukan.
- 6. Muat turun aplikasi, pasang dan jalankan.
SKRIN
Ad
Alat Keselamatan Web Crawler
DESCRIPTION
Kemas kini terakhir pada Selasa 26 Mac 16:25 UTC 2012Web Crawler Security ialah alat berasaskan python untuk merangkak tapak web secara automatik. Ia adalah perangkak web yang berorientasikan untuk membantu dalam tugas ujian penembusan. Tugas utama alat ini adalah untuk mencari dan menyenaraikan semua pautan (halaman dan fail) dalam laman web.
Perangkak telah ditulis semula sepenuhnya dalam v1.0 yang membawa banyak peningkatan: visualisasi data yang dipertingkatkan, pilihan interaktif untuk memuat turun fail, peningkatan kelajuan dalam rangkak, mengeksport senarai fail yang ditemui ke dalam fail yang diasingkan (berguna untuk merangkak tapak sekali, kemudian muat turun fail dan analisanya dengan FOCA), jana log keluaran dalam Format Log Biasa (CLF), uruskan pengesahan asas dan banyak lagi!
Banyak ciri lama telah dilaksanakan semula dan yang paling menarik ialah keupayaan perangkak untuk mencari pengindeksan direktori.
Ciri-ciri
- Rangka tapak web http dan https (walaupun tapak web tidak menggunakan port biasa). Rangka tapak web http dan https (walaupun tapak web tidak menggunakan port biasa). Rangka tapak web http dan https (walaupun tapak web tidak menggunakan port biasa).
- (baru!) Ia membolehkan untuk menentukan kedalaman merangkak (-C pilihan)
- (baru!) Menghasilkan ringkasan pada penghujung rangkak dengan statistik tentang hasil rangkakan
- (baru!) Melaksanakan kaedah HEAD untuk menganalisis jenis fail sebelum merangkak. Ciri ini meningkatkan kelajuan perangkak dengan ketara.
- Menggunakan ungkapan biasa untuk mencari pautan 'href', 'src' dan 'kandungan'.
- Mengenal pasti pautan relatif.
- Mengenal pasti fail bukan html dan menunjukkannya.
- Bukan merangkak fail bukan html.
- Mengenal pasti pengindeksan direktori.
- Rangka direktori dengan pengindeksan (belum dilaksanakan dalam v1.0)
- Menggunakan CTRL-C untuk menghentikan peringkat perangkak semasa dan terus bekerja. Perkara yang sangat berguna...
- Mengenal pasti semua jenis fail dengan membaca medan pengepala jenis kandungan respons.
- Eksport (pilihan-e) dalam fail yang diasingkan senarai semua URL fail yang ditemui semasa merangkak.
- Pilih jenis fail untuk dimuat turun (pilihan-d). Cth.: png,pdf,jpeg,gif atau png,jpeg.
- Pilih secara interaktif jenis fail yang hendak dimuat turun (pilihan-i).
- Simpan fail yang dimuat turun ke dalam direktori. Ia hanya mencipta direktori output jika terdapat sekurang-kurangnya satu fail untuk dimuat turun.
- Menghasilkan log keluaran dalam CLF (Format Log Biasa) bagi semua permintaan yang dilakukan semasa merangkak.
- (beta) Log masuk dengan pengesahan asas. Maklum balas adalah dialu-alukan!
- Cuba untuk mengesan sama ada tapak web menggunakan CMS (seperti wordpress, joomla, dll) (belum dilaksanakan dalam v1.0)
- Ia mencari fail '.bk' atau '.bak' dari halaman php, asp, aspx, jps. (belum dilaksanakan dalam v1.0)
- Ia mengenal pasti dan mengira bilangan halaman web unik yang dirangkak. (belum dilaksanakan dalam v1.0)
- Ia mengenal pasti dan mengira bilangan halaman web unik yang dirangkak yang mengandungi parameter dalam URL. (belum dilaksanakan dalam v1.0)
- Ia berfungsi dalam Windows, tetapi belum menyimpan hasil lagi
Penonton
Teknologi Maklumat
Antaramuka pengguna
Konsol/Terminal
Bahasa Pengaturcaraan
Python
Ini ialah aplikasi yang juga boleh diambil daripada https://sourceforge.net/projects/webcrawler-py/. Ia telah dihoskan dalam OnWorks untuk dijalankan dalam talian dengan cara yang paling mudah daripada salah satu Sistem Operasi percuma kami.
