Ito ang Linux app na pinangalanang ahCrawler na ang pinakabagong release ay maaaring ma-download bilang ahcrawler-0.182.zip. Maaari itong patakbuhin online sa libreng hosting provider na OnWorks para sa mga workstation.
I-download at patakbuhin online ang app na ito na pinangalanang ahCrawler na may OnWorks nang libre.
Sundin ang mga tagubiling ito upang patakbuhin ang app na ito:
- 1. Na-download ang application na ito sa iyong PC.
- 2. Ipasok sa aming file manager https://www.onworks.net/myfiles.php?username=XXXXX kasama ang username na gusto mo.
- 3. I-upload ang application na ito sa naturang filemanager.
- 4. Simulan ang OnWorks Linux online o Windows online emulator o MACOS online emulator mula sa website na ito.
- 5. Mula sa OnWorks Linux OS na kasisimula mo pa lang, pumunta sa aming file manager https://www.onworks.net/myfiles.php?username=XXXX gamit ang username na gusto mo.
- 6. I-download ang application, i-install ito at patakbuhin ito.
MGA LALAKI
Ad
ahCrawler
DESCRIPTION
Ang ahCrawler ay isang set upang ipatupad ang iyong sariling paghahanap sa iyong website at isang analyzer para sa iyong nilalaman sa web. Maaari itong magamit sa isang shared hosting.
Binubuo ito ng
* crawler (gagamba) at indexer
* maghanap para sa iyong (mga) website
* mga istatistika ng paghahanap
* website analyzer (http header, maikling pamagat at keyword, linkchecker, ...)
Kailangan mong i-install ito sa iyong sariling server. Kaya lahat ng na-crawl na data ay mananatili sa iyong kapaligiran.
Hindi mo alam kung kailan na-update ng external webspider ang iyong content. Mag-trigger ng rescan kahit kailan mo gusto - palagi mong kontrolado kung anong data ang sinuri.
Ang spider ay isang CLI tool at dapat idagdag bilang cronjob.
Sa isang web based na backend, makokontrol mo ang lahat ng data at masuri ang iyong data.
Maaari mong pangasiwaan ang maraming website sa parehong backend.
PHP 7 o 8 + PDO (Mysql/ Sqlite)
Mga tampok
- Crawler / spider na may maraming sabay-sabay na kahilingan
- Iginagalang ng Crawler ang robots.txt, X-Robots, impormasyon ng meta robots at mga katangian ng rel sa mga link
- Sinusuportahan ng Crawler ang http hanggang sa bersyon 2.0
- Maaari mong pangasiwaan ang maraming pagkakataon (maraming website) sa isang pag-install
- SSL check ng kasalukuyang certificate
- SSL check II: ipakita ang mga hindi naka-encrypt na elemento (kung gumagamit ang iyong website ng https)
- Magpakita ng mga may kulay na http na mga header ng tugon na may mga pahiwatig tungkol sa hindi gustong impormasyon at mga header ng seguridad
- Tingnan ang lahat ng nakatakdang cookies kung susundin mo ang lahat ng link sa iyong website
- isama ang isang form sa paghahanap + mga resulta sa iyong website
- Mga error sa paghahasik ng linkchecker, pag-redirect, mga babala
- galugarin / i-filter ang iyong buong website ayon sa statuscode, uri, uri ng MIME
- Mga pahina ng detalye ng lahat ng iyong mga url: http header, kung saan ito naka-link, ipakita ang mga papalabas na link/ mga reference na elemento nito
- pinagsamang web based na updater
Audience
Mga Advanced na End User, Developer, Quality Engineer, System Administrator
Interface ng gumagamit
Command-line, Web-based
Wika ng Programming
PHP
Kapaligiran ng Database
MySQL
Kategorya
Ito ay isang application na maaari ding kunin mula sa https://sourceforge.net/projects/ahcrawler/. Na-host ito sa OnWorks upang mapatakbo online sa pinakamadaling paraan mula sa isa sa aming mga libreng Operative System.
