This is the Linux app named Spark JobServer whose latest release can be downloaded as v0.11.1sourcecode.tar.gz. It can be run online in the free hosting provider OnWorks for workstations.
Download en gebruik online gratis deze app met de naam Spark JobServer met OnWorks.
Volg deze instructies om deze app uit te voeren:
- 1. Download deze applicatie op uw pc.
- 2. Voer in onze bestandsbeheerder https://www.onworks.net/myfiles.php?username=XXXXX in met de gebruikersnaam die u wilt.
- 3. Upload deze applicatie in zo'n bestandsbeheerder.
- 4. Start de OnWorks Linux online of Windows online emulator of MACOS online emulator vanaf deze website.
- 5. Ga vanuit het OnWorks Linux-besturingssysteem dat u zojuist hebt gestart naar onze bestandsbeheerder https://www.onworks.net/myfiles.php?username=XXXXX met de gewenste gebruikersnaam.
- 6. Download de applicatie, installeer hem en voer hem uit.
SCHERMSCHERMEN:
Spark JobServer
BESCHRIJVING:
Spark JobServer is een tool met een RESTful-interface voor het indienen, beheren en monitoren van Apache Spark-jobs, jobcontexten en gerelateerde artefacten. Het scheidt de jobindiening en het uitvoeringsbeheer van applicaties, wat zorgt voor flexibelere implementatie, persistente contexten, contextdeling en eenvoudigere integratie met externe systemen. Het ondersteunt meerdere implementatiemodi (standalone, YARN, Mesos), beveiliging (authenticatie/autorisatie) en permanente opslag van jobmetadata en jars.
Kenmerken
- REST API voor het indienen van taken, het uploaden van JAR's of binaire bestanden en het beheren van taakcontexten
- Ondersteuning voor persistente en tijdelijke contexten: hergebruik van Spark-sessie of -context voor meerdere taken versus zelfstandige contexten per taak
- Serialisatie van taakresultaten en statustracking via de API
- HTTPS/SSL-configuratie, authenticatie en autorisatieondersteuning (bijv. Shiro)
- Implementatie op verschillende clustermanagers (Standalone, YARN, Mesos), ondersteuning voor Docker etc.
- Metagegevens / persistentie voor taak / JAR-info, benoemde objecten (RDD's / DataFrames in de cache opgeslagen en op naam opgehaald)
Programmeertaal
Scala
Categorieën
Deze applicatie kan ook worden gedownload van https://sourceforge.net/projects/spark-jobserver.mirror/. Deze is gehost in OnWorks, zodat deze eenvoudig online kan worden uitgevoerd via een van onze gratis besturingssystemen.