זוהי אפליקציית לינוקס בשם pyspider שניתן להוריד את המהדורה האחרונה שלה בתור v0.3.10.zip. ניתן להפעיל אותו באופן מקוון בספק האירוח החינמי OnWorks עבור תחנות עבודה.
הורד והפעל באינטרנט את האפליקציה הזו בשם pyspider עם OnWorks בחינם.
בצע את ההוראות הבאות כדי להפעיל את האפליקציה הזו:
- 1. הורד את היישום הזה למחשב שלך.
- 2. הזן במנהל הקבצים שלנו https://www.onworks.net/myfiles.php?username=XXXXX עם שם המשתמש שאתה רוצה.
- 3. העלה את היישום הזה במנהל קבצים כזה.
- 4. הפעל את האמולטור המקוון של OnWorks Linux או Windows מקוון או אמולטור מקוון של MACOS מאתר זה.
- 5. ממערכת ההפעלה OnWorks Linux שזה עתה התחלת, עבור אל מנהל הקבצים שלנו https://www.onworks.net/myfiles.php?username=XXXXX עם שם המשתמש הרצוי.
- 6. הורד את האפליקציה, התקן אותה והפעל אותה.
בצילומי מסך
Ad
פיספיידר
תיאור
pyspider היא מערכת עכביש חזקה (סורק אינטרנט) ב-Python. רכיבים מחוברים באמצעות תור הודעות. כל רכיב, כולל תור הודעות, פועל בתהליך/שרשור משלהם, וניתן להחלפה. כלומר, כאשר התהליך איטי, אתה יכול לקבל מופעים רבים של מעבד ולעשות שימוש מלא במספר מעבדים, או לפרוס למספר מכונות. הארכיטקטורה הזו הופכת את פיספיידר למהיר מאוד. benchmarking. מכיוון של-pyspider יש רכיבים שונים, אתה יכול פשוט להפעיל את pyspider כדי להתחיל מופע עצמאי וחינמי של שירות שלישי. או באמצעות MySQL או MongoDB ו-RabbitMQ כדי לפרוס אשכול סריקה מבוזר. כדי לפרוס את pyspider בסביבת המוצר, הפעלת רכיבים בכל תהליך ואחסון נתונים בשירות מסד הנתונים היא אמינה וגמישה יותר. כדי לפרוס רכיבי pyspider בכל תהליכים בודדים, אתה צריך לפחות שירות מסד נתונים אחד. pyspider תומך כעת ב-MySQL, MongoDB ו-PostgreSQL. אתה יכול לבחור אחד מהם.
תכונות
- כתוב סקריפט ב- Python
- WebUI רב עוצמה עם עורך סקריפטים, צג משימות, מנהל פרויקטים ומציג תוצאות
- MySQL, MongoDB, Redis, SQLite, Elasticsearch; PostgreSQL עם SQLAlchemy כ-backend של מסד נתונים
- RabbitMQ, Beanstalk, Redis ו-Kombu בתור הודעות
- עדיפות משימה, ניסיון חוזר, כתב עת, סריקה חוזרת לפי גיל וכו'.
- ארכיטקטורה מבוזרת, סריקה של דפי Javascript, Python 2&3 וכו'.
שפת תכנות
פיתון
כל הקטגוריות
זוהי אפליקציה שניתן להביא גם מ-https://sourceforge.net/projects/pyspider.mirror/. הוא התארח ב-OnWorks על מנת להפעיל אותו באינטרנט בצורה הקלה ביותר מאחת ממערכות ההפעלה החינמיות שלנו.
