Dies ist die Linux-App namens Luigi, deren neueste Version als 3.4.0.zip heruntergeladen werden kann. Es kann online im kostenlosen Hosting-Anbieter OnWorks für Workstations ausgeführt werden.
Laden Sie diese App namens Luigi with OnWorks kostenlos herunter und führen Sie sie online aus.
Befolgen Sie diese Anweisungen, um diese App auszuführen:
- 1. Diese Anwendung auf Ihren PC heruntergeladen.
- 2. Geben Sie in unserem Dateimanager https://www.onworks.net/myfiles.php?username=XXXXX den gewünschten Benutzernamen ein.
- 3. Laden Sie diese Anwendung in einem solchen Dateimanager hoch.
- 4. Starten Sie den OnWorks Linux-Online- oder Windows-Online-Emulator oder den MACOS-Online-Emulator von dieser Website.
- 5. Rufen Sie vom gerade gestarteten OnWorks Linux-Betriebssystem aus unseren Dateimanager https://www.onworks.net/myfiles.php?username=XXXXX mit dem gewünschten Benutzernamen auf.
- 6. Laden Sie die Anwendung herunter, installieren Sie sie und führen Sie sie aus.
SCREENSHOTS
Ad
Luigi
BESCHREIBUNG
Luigi ist ein Python-Paket (3.6, 3.7, 3.8, 3.9 getestet), das Ihnen hilft, komplexe Pipelines von Batch-Jobs zu erstellen. Es behandelt Abhängigkeitsauflösung, Workflow-Management, Visualisierung, Behandlung von Fehlern, Befehlszeilenintegration und vieles mehr. Der Zweck von Luigi besteht darin, alle Probleme zu lösen, die normalerweise mit lang andauernden Batch-Prozessen verbunden sind. Sie möchten viele Aufgaben verketten und automatisieren, und es kommt zu Fehlern. Diese Aufgaben können alles sein, sind aber typischerweise Dinge mit langer Laufzeit wie Hadoop-Jobs, das Dumping von Daten in/aus Datenbanken, das Ausführen von Algorithmen für maschinelles Lernen oder irgendetwas anderes. Sie können so ziemlich jede gewünschte Aufgabe erstellen, aber Luigi enthält auch eine Toolbox mit mehreren gängigen Aufgabenvorlagen, die Sie verwenden. Es umfasst Unterstützung für die Ausführung von Python-MapReduce-Jobs in Hadoop sowie von Hive- und Pig-Jobs. Es enthält auch Dateisystemabstraktionen für HDFS und lokale Dateien, die sicherstellen, dass alle Dateisystemoperationen atomar sind.
Eigenschaften
- Erstellen Sie komplexe Pipelines von Batch-Jobs
- Es ist einfach, langlaufende Pipelines aufzubauen, die Tausende von Aufgaben umfassen
- Luigi hilft dir, viele Aufgaben zusammenzufügen
- Luigi kümmert sich um einen Großteil des Workflow-Managements
- Ihre Datenpipeline stürzt nicht in einem Zustand ab, der Teildaten enthält
- Mit Luigi's Visualizer erhalten Sie einen schönen visuellen Überblick über das Abhängigkeitsdiagramm des Workflows
Programmiersprache
Python
Berufsfeld
Dies ist eine Anwendung, die auch von https://sourceforge.net/projects/luigi.mirror/ abgerufen werden kann. Es wurde in OnWorks gehostet, damit es auf einfachste Weise online von einem unserer kostenlosen Betriebssysteme ausgeführt werden kann.