זוהי אפליקציית לינוקס בשם crawlee שניתן להוריד את המהדורה האחרונה שלה בתור v3.5.8sourcecode.zip. ניתן להפעיל אותו באופן מקוון בספק האירוח החינמי OnWorks עבור תחנות עבודה.
הורד והפעל באינטרנט את האפליקציה הזו בשם crawlee עם OnWorks בחינם.
בצע את ההוראות הבאות כדי להפעיל את האפליקציה הזו:
- 1. הורד את היישום הזה למחשב שלך.
- 2. הזן במנהל הקבצים שלנו https://www.onworks.net/myfiles.php?username=XXXXX עם שם המשתמש שאתה רוצה.
- 3. העלה את היישום הזה במנהל קבצים כזה.
- 4. הפעל את האמולטור המקוון של OnWorks Linux או Windows מקוון או אמולטור מקוון של MACOS מאתר זה.
- 5. ממערכת ההפעלה OnWorks Linux שזה עתה התחלת, עבור אל מנהל הקבצים שלנו https://www.onworks.net/myfiles.php?username=XXXXX עם שם המשתמש הרצוי.
- 6. הורד את האפליקציה, התקן אותה והפעל אותה.
בצילומי מסך
Ad
זחל
תיאור
Crawlee היא ספריית גירוד אינטרנט ואוטומציה של דפדפן. זה עוזר לך לבנות סורקים אמינים. מָהִיר. Crawlee לא תתקן עבורך בוררים שבורים (עדיין), אבל זה עוזר לך לבנות ולתחזק את הסורקים שלך מהר יותר. כאשר אתר מוסיף עיבוד JavaScript, אינך צריך לשכתב הכל, רק לעבור לאחד מהסורקים של הדפדפן. כשתמצא מאוחר יותר ממשק API מעולה להאיץ את הסריקה שלך, החזר את המתג לאחור. זה שומר על בריאות ה-proxy שלך על ידי סיבוב חכם עם טביעות אצבע טובות שגורמות לסורקים שלך להיראות כמו אנושיים. זה לא ניתן לביטול חסימה, אבל זה יחסוך לך כסף בטווח הארוך. Crawlee נבנה על ידי אנשים שמתפרנסים ומשתמשים בו מדי יום כדי לגרד מיליוני דפים. הכירו את הקהילה שלנו בדיסקורד. אנו מאמינים שאתרים עדיף לגרד בשפה שבה הם כתובים. Crawlee פועל על Node.js והוא בנוי ב-TypeScript כדי לשפר את השלמת הקוד ב-IDE שלך, גם אם אינך משתמש ב-TypeScript בעצמך.
תכונות
- JavaScript ו-TypeScript
- גירוד HTTP
- דפדפנים חסרי ראש
- קנה מידה אוטומטי וניהול פרוקסי
- תור ואחסון
- כלי עזר מועילים ויכולת הגדרה
שפת תכנות
הקלד
כל הקטגוריות
זוהי אפליקציה שניתן לשלוף גם מ-https://sourceforge.net/projects/crawlee.mirror/. הוא התארח ב-OnWorks על מנת להפעיל אותו באינטרנט בצורה הקלה ביותר מאחת ממערכות ההפעלה החינמיות שלנו.