Questa è l'app Linux denominata q pipeline manager, eseguibile online su Linux. La sua ultima versione può essere scaricata come q-1.0.2.tar.gz. Può essere eseguita online sul provider di hosting gratuito OnWorks per workstation.
Scarica ed esegui online questa app denominata q pipeline manager per eseguirla gratuitamente su Linux online con OnWorks.
Segui queste istruzioni per eseguire questa app:
- 1. Scaricata questa applicazione sul tuo PC.
- 2. Entra nel nostro file manager https://www.onworks.net/myfiles.php?username=XXXXX con il nome utente che desideri.
- 3. Carica questa applicazione in tale file manager.
- 4. Avviare l'emulatore online OnWorks Linux o Windows online o l'emulatore online MACOS da questo sito Web.
- 5. Dal sistema operativo OnWorks Linux che hai appena avviato, vai al nostro file manager https://www.onworks.net/myfiles.php?username=XXXXX con il nome utente che desideri.
- 6. Scarica l'applicazione, installala ed eseguila.
IMMAGINI
Ad
q pipeline manager da eseguire online su Linux
DESCRIZIONE
L'utility q è una piattaforma per la creazione e la gestione di pipeline di analisi dei dati. Amplia il valore del tuo attuale pianificatore di attività, Grid Engine o TORQUE PBS, attraverso numerose funzioni che ti aiutano a organizzare, inviare, monitorare, gestire e condividere il tuo lavoro informatico.Le pipeline di elaborazione dati richiedono un'organizzazione di alto livello e la parallelizzazione del lavoro per ottimizzare l'utilizzo delle risorse e ridurre i tempi di risposta. q (from queue) consente di assemblare e gestire in modo efficiente sequenze di job complesse, inclusi il monitoraggio delle dipendenze, la parallelizzazione e il monitoraggio a livello di pipeline, il ripristino degli errori e la protezione dei dati. Le pipeline sono costruite a partire da file di script modulari, con definizioni di job e risultati archiviati in file di job facilmente recuperabili. Un'interfaccia web semplifica l'invio e il monitoraggio dei job, con la pipeline completa esportabile per la massima trasparenza.
Caratteristiche
- Organizzazione del lavoro in unità di ordine superiore a partire da parti di codice esistenti in qualsiasi linguaggio.
- Le pipeline vengono inviate e gestite come un'unità tramite chiamate a un singolo file master.
- Definizione e monitoraggio rigorosi delle dipendenze lavorative.
- Le molteplici modalità di parallelizzazione massimizzano l'utilizzo delle risorse e riducono al minimo i tempi necessari per ottenere risultati.
- La combinazione di comandi in fase di invio e in fase di esecuzione supporta la configurazione dinamica dei lavori.
- Il monitoraggio intelligente dei lavori in coda supporta l'esecuzione incrementale di nuovi lavori.
- Pochi elementi di sintassi specifici di q creano pipeline complesse con codice minimo.
- La struttura altamente modulare facilita il riutilizzo e la condivisione del codice.
- Diverse funzionalità facilitano l'implementazione multipiattaforma delle pipeline.
- Un controllo approfondito della sintassi al momento dell'invio aiuta a prevenire pipeline frammentate.
- Reporting dei lavori migliorato e interfacce nelle funzioni di pianificazione dei lavori, inclusa la gestione degli errori.
- Protezione da scrittura e backup dei file di output integrati nei file di definizione della pipeline.
- Monitoraggio della cronologia di tutto il lavoro svolto in una pipeline, con rollback.
- Interfaccia basata sul Web per l'invio e la gestione dei lavori.
- Condivisione completamente trasparente del lavoro al momento della pubblicazione tramite report HTML completi.
- Installazione da parte dell'utente finale senza necessità di gestione da parte degli amministratori di sistema.
Linguaggio di programmazione
Perl
Questa applicazione può essere scaricata anche da https://sourceforge.net/projects/q-ppln-mngr/. È ospitata su OnWorks per poter essere eseguita online nel modo più semplice da uno dei nostri sistemi operativi gratuiti.
