Це програма для Linux під назвою ahCrawler, останню версію якої можна завантажити як ahcrawler-0.179.zip. Його можна запустити в режимі онлайн у постачальника безкоштовного хостингу OnWorks для робочих станцій.
Завантажте та запустіть онлайн цю програму під назвою ahCrawler з OnWorks безкоштовно.
Дотримуйтесь цих інструкцій, щоб запустити цю програму:
- 1. Завантажив цю програму на свій ПК.
- 2. Введіть у наш файловий менеджер https://www.onworks.net/myfiles.php?username=XXXXX із потрібним ім'ям користувача.
- 3. Завантажте цю програму в такий файловий менеджер.
- 4. Запустіть онлайн-емулятор OnWorks Linux або Windows або онлайн-емулятор MACOS з цього веб-сайту.
- 5. З ОС OnWorks Linux, яку ви щойно запустили, перейдіть до нашого файлового менеджера https://www.onworks.net/myfiles.php?username=XXXXX з потрібним іменем користувача.
- 6. Завантажте програму, встановіть її та запустіть.
ЕКРАНИ
Ad
ahCrawler
ОПИС
ahCrawler — це набір для реалізації вашого власного пошуку на вашому веб-сайті та аналізатор вашого веб-контенту. Його можна використовувати на спільному хостингі.
Він складається з
* сканер (павук) та індексатор
* шукайте свої веб-сайти
* статистика пошуку
* аналізатор веб-сайту (заголовок http, короткі заголовки та ключові слова, перевірка посилань, ...)
Вам потрібно встановити його на власний сервер. Тому всі скановані дані залишаються у вашому середовищі.
Ви ніколи не знаєте, коли зовнішній веб-павук оновив ваш вміст. Запускайте повторне сканування, коли забажаєте – ви завжди контролюєте, які дані в який час перевірялися.
Павук є інструментом CLI, і його потрібно додати як cronjob.
У веб-сервері ви можете контролювати всі дані та аналізувати свої дані.
Ви можете працювати з кількома веб-сайтами в одному бекенді.
PHP 7 або 8 + PDO (Mysql/Sqlite)
Функції
- Сканер/павук з кількома одночасними запитами
- Сканер поважає robots.txt, X-Robots, інформацію про метароботів і атрибути rel у посиланнях
- Сканер підтримує http до версії 2.0
- Ви можете обробляти кілька екземплярів (кілька веб-сайтів) за одну інсталяцію
- Перевірка SSL поточного сертифіката
- Перевірка SSL II: показувати незашифровані елементи (якщо ваш веб-сайт використовує https)
- Показати кольорові заголовки відповідей http з підказками щодо небажаної інформації та заголовків безпеки
- Перегляньте всі встановлені файли cookie, якщо перейдіть за всіма посиланнями на своєму веб-сайті
- інтегруйте форму пошуку + результати на свій веб-сайт
- Linkchecker посів помилки, перенаправлення, попередження
- досліджуйте / відфільтруйте весь свій веб-сайт за кодом статусу, типом, типом MIME
- Сторінки з детальною інформацією про всі ваші URL-адреси: заголовок http, де він пов’язаний, показати вихідні посилання/посилання на елементи
- інтегрований веб-адаптер оновлення
Аудиторія
Досвідчені кінцеві користувачі, розробники, інженери з якості, системні адміністратори
Користувацький інтерфейс
Командний рядок, веб-орієнтований
Мова програмування
PHP
Середовище бази даних
MySQL
Категорії
Це додаток, який також можна отримати з https://sourceforge.net/projects/ahcrawler/. Його розміщено в OnWorks, щоб його можна було запустити в Інтернеті найпростішим способом з однієї з наших безкоштовних операційних систем.
