Il s'agit de l'application Windows nommée Headless Chrome Crawler dont la dernière version peut être téléchargée en tant que 1.8.0.zip. Il peut être exécuté en ligne sur le fournisseur d'hébergement gratuit OnWorks pour les postes de travail.
Téléchargez et exécutez en ligne cette application nommée Headless Chrome Crawler avec OnWorks gratuitement.
Suivez ces instructions pour exécuter cette application :
- 1. Téléchargé cette application sur votre PC.
- 2. Entrez dans notre gestionnaire de fichiers https://www.onworks.net/myfiles.php?username=XXXXX avec le nom d'utilisateur que vous voulez.
- 3. Téléchargez cette application dans ce gestionnaire de fichiers.
- 4. Démarrez n'importe quel émulateur en ligne OS OnWorks à partir de ce site Web, mais un meilleur émulateur en ligne Windows.
- 5. Depuis le système d'exploitation OnWorks Windows que vous venez de démarrer, accédez à notre gestionnaire de fichiers https://www.onworks.net/myfiles.php?username=XXXXX avec le nom d'utilisateur que vous souhaitez.
- 6. Téléchargez l'application et installez-la.
- 7. Téléchargez Wine depuis les dépôts de logiciels de vos distributions Linux. Une fois installé, vous pouvez ensuite double-cliquer sur l'application pour les exécuter avec Wine. Vous pouvez également essayer PlayOnLinux, une interface sophistiquée sur Wine qui vous aidera à installer des programmes et des jeux Windows populaires.
Wine est un moyen d'exécuter un logiciel Windows sur Linux, mais sans Windows requis. Wine est une couche de compatibilité Windows open source qui peut exécuter des programmes Windows directement sur n'importe quel bureau Linux. Essentiellement, Wine essaie de ré-implémenter suffisamment de Windows à partir de zéro pour qu'il puisse exécuter toutes ces applications Windows sans avoir réellement besoin de Windows.
CAPTURES D'ÉCRAN
Ad
Crawler Chrome sans tête
DESCRIPTION
Les robots basés sur de simples requêtes vers des fichiers HTML sont généralement rapides. Cependant, il finit parfois par capturer des corps vides, en particulier lorsque les sites Web sont construits sur des frameworks frontend modernes comme AngularJS, React et Vue.js. Propulsé par Headless Chrome, le robot d'exploration fournit des API simples pour explorer des sites Web dynamiques. Prend en charge à la fois la recherche en profondeur et l'algorithme de recherche en largeur. Enregistrez des captures d'écran pour les preuves d'exploration, émulez les appareils et les agents utilisateurs, la file d'attente prioritaire pour l'efficacité de l'exploration, respectez le fichier robots.txt, etc. Les robots d'exploration statiques sont basés sur de simples requêtes vers des fichiers HTML. Ils sont généralement rapides, mais échouent à gratter le contenu lorsque le code HTML change dynamiquement sur les navigateurs. Les robots dynamiques basés sur PhantomJS et Selenium fonctionnent comme par magie sur de telles applications dynamiques. Cependant, le mainteneur de PhantomJS a démissionné et a recommandé de passer à Headless Chrome, qui est rapide et stable. Ce robot d'exploration est dynamique et basé sur Headless Chrome.
Comment ça marche
- L'exploration distribuée
- Configurer la simultanéité, le délai et réessayer
- Stockages de cache enfichables tels que Redis
- Prise en charge des lignes CSV et JSON pour l'exportation des résultats
- Pause à la demande max et reprise à tout moment
- Insérer jQuery automatiquement pour le scraping
Langage de programmation
JavaScript
Il s'agit d'une application qui peut également être récupérée à partir de https://sourceforge.net/projects/headless-chrome-crawler.mirror/. Il a été hébergé dans OnWorks afin d'être exécuté en ligne de la manière la plus simple à partir de l'un de nos systèmes d'exploitation gratuits.
