זוהי אפליקציית לינוקס בשם Apache Spark, שאת הגרסה האחרונה שלה ניתן להוריד כ- sparkv4.1.0-preview3-rc1sourcecode.zip. ניתן להריץ אותה באופן מקוון בספק האירוח החינמי OnWorks לתחנות עבודה.
הורד והפעל באופן מקוון את האפליקציה הזו בשם Apache Spark עם OnWorks בחינם.
בצע את ההוראות הבאות כדי להפעיל את האפליקציה הזו:
- 1. הורד את היישום הזה למחשב שלך.
- 2. הזן במנהל הקבצים שלנו https://www.onworks.net/myfiles.php?username=XXXXX עם שם המשתמש שאתה רוצה.
- 3. העלה את היישום הזה במנהל קבצים כזה.
- 4. הפעל את האמולטור המקוון של OnWorks Linux או Windows מקוון או אמולטור מקוון של MACOS מאתר זה.
- 5. ממערכת ההפעלה OnWorks Linux שזה עתה התחלת, עבור אל מנהל הקבצים שלנו https://www.onworks.net/myfiles.php?username=XXXXX עם שם המשתמש הרצוי.
- 6. הורד את האפליקציה, התקן אותה והפעל אותה.
צילומי מסך:
אפאצ 'י ספארק
תיאור:
Apache Spark הוא מנוע מאוחד לעיבוד נתונים בקנה מידה גדול, המציע ממשקי API עבור עבודות אצווה, סטרימינג, למידת מכונה וחישוב גרפים. הוא בונה על מערכי נתונים מבוזרים גמישים (RDDs) ועל הפשטות DataFrame/Dataset החדשות יותר כדי לספק חישוב עמיד בפני תקלות בזיכרון על פני אשכולות. מנוע הביצוע של Spark מטפל בתזמון, ערבוב, אחסון במטמון ומיקום נתונים כך שמשתמשים יכולים להתמקד בטרנספורמציות ולא באינסטלציה של תשתיות. בעזרת Spark Streaming (מיקרו-אצווה) ו-Structured Streaming, הוא מספק עיבוד אירועים עם השהייה נמוכה המתאים לניתוח בזמן אמת. ספריית MLlib המובנית מספקת אלגוריתמי למידת מכונה ניתנים להרחבה, בעוד GraphX מאפשר חישובי גרפים משולבים עם צינורות נתונים. Spark תומך בשפות מרובות - Scala, Java, Python, R - ומתחבר למערכות אחסון רבות כמו HDFS, S3, Cassandra ופלטפורמות סטרימינג כמו Kafka, מה שהופך אותו לבחירה רב-תכליתית עבור עומסי עבודה של ביג דאטה באנליטיקה, ETL ומדעי הנתונים.
תכונות
- עיבוד נתונים אצווה ובזמן אמת / סטרימינג באמצעות סטרימינג מובנה וממשקי API אחרים
- ממשקי API של DataFrame ו-SQL המאפשרים שאילתות וטרנספורמציה בסגנון SQL של נתונים מובנים וחצי-מובנים
- ספריית למידת מכונה (MLlib) עם אלגוריתמים לסיווג, רגרסיה, קיבוץ באשכולות וכו'.
- יכולות עיבוד גרפים דרך GraphX, לניתוח מבני גרפים וכו'.
- תמיכה במספר שפות: Scala, Java, Python, R (ותמיכה ניסיונית באחרות)
- יכולת להריץ אשכולות דרך מגוון מנהלי אשכולות (Standalone, YARN, Mesos, Kubernetes), שילוב עם מערכות אחסון נתונים רבות (HDFS, S3 וכו').
שפת תכנות
סולם
כל הקטגוריות
זוהי אפליקציה שניתן להוריד גם מאתר https://sourceforge.net/projects/apache-spark.mirror/. היא אוחסנה ב-OnWorks על מנת שניתן יהיה להריץ אותה באופן מקוון בצורה הקלה ביותר מאחת ממערכות ההפעלה החינמיות שלנו.