Це програма для Linux під назвою crawlee, останню версію якої можна завантажити як v3.5.8sourcecode.zip. Його можна запустити онлайн у безкоштовного хостинг-провайдера OnWorks для робочих станцій.
Завантажте та запустіть цю програму під назвою crawlee з OnWorks безкоштовно.
Дотримуйтесь цих інструкцій, щоб запустити цю програму:
- 1. Завантажив цю програму на свій ПК.
- 2. Введіть у наш файловий менеджер https://www.onworks.net/myfiles.php?username=XXXXX із потрібним ім'ям користувача.
- 3. Завантажте цю програму в такий файловий менеджер.
- 4. Запустіть онлайн-емулятор OnWorks Linux або Windows або онлайн-емулятор MACOS з цього веб-сайту.
- 5. З ОС OnWorks Linux, яку ви щойно запустили, перейдіть до нашого файлового менеджера https://www.onworks.net/myfiles.php?username=XXXXX з потрібним іменем користувача.
- 6. Завантажте програму, встановіть її та запустіть.
ЕКРАНИ
Ad
crawlee
ОПИС
Crawlee — це бібліотека для сканування веб-сторінок і автоматизації браузера. Це допомагає створювати надійні сканери. швидко Crawlee не виправить за вас зламані селектори (поки що), але він допоможе вам швидше створити та підтримувати ваші сканери. Коли веб-сайт додає відтворення JavaScript, вам не потрібно переписувати все, лише перейдіть до одного з сканерів браузера. Коли пізніше ви знайдете чудовий API для прискорення сканування, поверніть перемикач назад. Він забезпечує працездатність ваших проксі-серверів, розумно обертаючи їх за допомогою якісних відбитків пальців, які роблять ваші сканери схожими на людину. Його не можна розблокувати, але це заощадить ваші гроші в довгостроковій перспективі. Crawlee створено людьми, які заробляють на життя і використовують його щодня, щоб очищати мільйони сторінок. Зустрічайте нашу спільноту на Discord. Ми вважаємо, що веб-сайти найкраще копіювати мовою, якою вони написані. Crawlee працює на Node.js і вбудований у TypeScript для покращення завершення коду у вашому IDE, навіть якщо ви самі не використовуєте TypeScript.
риси
- JavaScript і TypeScript
- HTTP скрапінг
- Безголові браузери
- Автоматичне масштабування та керування проксі
- Черга та зберігання
- Корисні утиліти та можливість налаштування
Мова програмування
TypeScript
Категорії
Це програма, яку також можна завантажити з https://sourceforge.net/projects/crawlee.mirror/. Його розміщено в OnWorks, щоб його можна було найпростіше запускати онлайн з однієї з наших безкоштовних операційних систем.