これは、crawlee という名前の Linux アプリで、最新リリースは v3.5.8sourcecode.zip としてダウンロードできます。 ワークステーション用の無料ホスティング プロバイダー OnWorks でオンラインで実行できます。
OnWorks を使用して、crawlee という名前のこのアプリをオンラインで無料でダウンロードして実行します。
このアプリを実行するには、次の手順に従ってください。
-1。このアプリケーションをPCにダウンロードしました。
--2。ファイルマネージャーhttps://www.onworks.net/myfiles.php?username=XXXXXに必要なユーザー名を入力します。
-3。このアプリケーションをそのようなファイルマネージャにアップロードします。
-4。このWebサイトからOnWorksLinuxオンラインまたはWindowsオンラインエミュレーターまたはMACOSオンラインエミュレーターを起動します。
-5。起動したばかりのOnWorksLinux OSから、必要なユーザー名でファイルマネージャーhttps://www.onworks.net/myfiles.php?username=XXXXXにアクセスします。
-6。アプリケーションをダウンロードし、インストールして実行します。
スクリーンショットは
Ad
クローリー
DESCRIPTION
Crawlee は、Web スクレイピングおよびブラウザ自動化ライブラリです。 信頼できるクローラーを構築するのに役立ちます。 速い。 Crawlee は壊れたセレクターを (まだ) 修正しませんが、クローラーの構築と保守をより迅速に行うのに役立ちます。 Web サイトに JavaScript レンダリングを追加する場合、すべてを書き直す必要はなく、ブラウザー クローラーの XNUMX つに切り替えるだけで済みます。 後でクロールを高速化する優れた API を見つけたら、スイッチを元に戻します。 クローラーを人間のように見せる適切な指紋を使用してプロキシをスマートに回転させることで、プロキシを健全に保ちます。 ブロックできないわけではありませんが、長期的にはお金の節約になります。 Crawlee は、スクレイピングを生業としており、毎日それを使用して数百万ページをスクレイピングする人々によって構築されています。 Discord のコミュニティに参加してください。 Web サイトは、書かれている言語でスクレイピングするのが最適であると私たちは信じています。Crawlee は Node.js 上で実行され、TypeScript が組み込まれているため、TypeScript を自分で使用していない場合でも、IDE でのコード補完が向上します。
特徴
- JavaScript と TypeScript
- HTTPスクレイピング
- ヘッドレスブラウザ
- 自動スケーリングとプロキシ管理
- キューとストレージ
- 便利なユーティリティと設定可能性
プログラミング言語
タイプスクリプト
カテゴリー
これは、https://sourceforge.net/projects/crawlee.mirror/ から取得できるアプリケーションです。 無料のオペレーティング システムの XNUMX つから最も簡単な方法でオンラインで実行できるように、OnWorks でホストされています。
