Aceasta este aplicația Linux numită sparkmagic, a cărei ultimă versiune poate fi descărcată ca 0.23.0sourcecode.tar.gz. Poate fi rulată online în furnizorul de găzduire gratuită OnWorks pentru stații de lucru.
Descarcă și rulează online această aplicație numită SparkMagic cu OnWorks gratuit.
Urmați aceste instrucțiuni pentru a rula această aplicație:
- 1. Ați descărcat această aplicație pe computer.
- 2. Introduceți în managerul nostru de fișiere https://www.onworks.net/myfiles.php?username=XXXXX cu numele de utilizator pe care îl doriți.
- 3. Încărcați această aplicație într-un astfel de manager de fișiere.
- 4. Porniți emulatorul online OnWorks Linux sau Windows online sau emulatorul online MACOS de pe acest site web.
- 5. Din sistemul de operare OnWorks Linux pe care tocmai l-ați pornit, accesați managerul nostru de fișiere https://www.onworks.net/myfiles.php?username=XXXXX cu numele de utilizator dorit.
- 6. Descărcați aplicația, instalați-o și rulați-o.
CAPTURĂ DE ECRAN:
magie scânteie
DESCRIERE:
Sparkmagic este un set de instrumente pentru lucrul interactiv cu clustere Spark la distanță în notebook-uri Jupyter. Sparkmagic interacționează cu clustere Spark la distanță prin intermediul unui server REST. Vizualizare automată a interogărilor SQL în kernel-urile PySpark, Spark și SparkR; utilizați o interfață vizuală ușor de utilizat pentru a construi interactiv vizualizări, fără a fi nevoie de cod. Posibilitatea de a captura rezultatul interogărilor SQL ca dataframe-uri Pandas pentru a interacționa cu alte biblioteci Python (de exemplu, matplotlib). Trimiteți fișiere sau dataframe-uri locale către un cluster la distanță (de exemplu, trimiteți modelul ML local pre-antrenat direct către clusterul Spark). Autentificare la Livy prin autentificare Basic Access sau prin Kerberos.
DESCRIERE
- Pentru desfășurarea de sesiuni interactive pe Yarn
- Pentru rularea de sesiuni interactive pe Yarn sau Kubernetes (sunt acceptate doar sesiunile PySpark)
- Pentru derularea de sesiuni interactive pe Yarn sau Kubernetes
- Proiectul Sparkmagic include un set de magii pentru rularea interactivă a codului Spark în mai multe limbaje de programare.
- Rulați cod Spark în mai multe limbaje împotriva oricărui cluster Spark la distanță prin Livy
- Crearea automată a SparkContext (sc) și HiveContext (sqlContext)
- Execută cu ușurință interogări SparkSQL cu ajutorul magiei %%sql
Limbaj de programare
Piton
Categorii
Aceasta este o aplicație care poate fi descărcată și de la https://sourceforge.net/projects/sparkmagic.mirror/. A fost găzduită în OnWorks pentru a putea fi rulată online în cel mai simplu mod de pe unul dintre sistemele noastre de operare gratuite.