Spark JobServer라는 Windows 앱이며, 최신 릴리스는 v0.11.1sourcecode.tar.gz로 다운로드할 수 있습니다. 워크스테이션용 무료 호스팅 제공업체인 OnWorks에서 온라인으로 실행할 수 있습니다.
OnWorks가 포함된 Spark JobServer라는 앱을 무료로 다운로드하여 온라인에서 실행해보세요.
이 앱을 실행하려면 다음 지침을 따르세요.
- 1. 이 애플리케이션을 PC에 다운로드했습니다.
- 2. 파일 관리자 https://www.onworks.net/myfiles.php?username=XXXXX에 원하는 사용자 이름을 입력합니다.
- 3. 이러한 파일 관리자에서 이 응용 프로그램을 업로드합니다.
- 4. 이 웹사이트에서 모든 OS OnWorks 온라인 에뮬레이터를 시작하지만 더 나은 Windows 온라인 에뮬레이터를 시작합니다.
- 5. 방금 시작한 OnWorks Windows OS에서 원하는 사용자 이름으로 파일 관리자 https://www.onworks.net/myfiles.php?username=XXXXX로 이동합니다.
- 6. 애플리케이션을 다운로드하여 설치합니다.
- 7. Linux 배포 소프트웨어 저장소에서 Wine을 다운로드합니다. 설치가 완료되면 앱을 두 번 클릭하여 Wine과 함께 실행할 수 있습니다. 인기 있는 Windows 프로그램 및 게임을 설치하는 데 도움이 되는 Wine을 통한 멋진 인터페이스인 PlayOnLinux를 사용해 볼 수도 있습니다.
Wine은 Linux에서 Windows 소프트웨어를 실행하는 방법이지만 Windows가 필요하지 않습니다. Wine은 모든 Linux 데스크탑에서 직접 Windows 프로그램을 실행할 수 있는 오픈 소스 Windows 호환성 계층입니다. 본질적으로 Wine은 Windows가 필요하지 않고 모든 Windows 응용 프로그램을 실행할 수 있도록 Windows를 처음부터 충분히 다시 구현하려고 합니다.
스크린샷:
스파크 잡서버
설명 :
Spark Job Server는 Apache Spark에서 작업 또는 컨텍스트를 제출, 관리 및 실행하기 위한 RESTful 인터페이스를 제공합니다. 모든 애플리케이션이 Spark를 내장하거나 Spark 컨텍스트를 수동으로 관리할 필요 없이, 이 서버는 클라이언트가 JAR 파일을 업로드하고, 컨텍스트를 시작 및 중지하고, 동기식 또는 비동기식으로 작업을 제출하고, 작업 실행 전반에 걸쳐 명명된 객체(RDD/DataFrames)를 관리할 수 있는 장기 서비스를 추상화합니다. 다양한 모드(일시적 작업, 재사용 가능한 지속적 컨텍스트, 스트리밍, SQL/Hive 등)를 지원하며, 인증/권한 부여 시스템(예: Apache Shiro)과 통합될 수 있습니다. 이 아키텍처는 Spark 컨텍스트를 (선택적으로 별도의 JVM에) 분리하고, 작업 종속성을 분리하며, 플러그형 DAO를 통해 작업/JAR 메타데이터를 유지합니다. 클러스터 관리자(YARN, Mesos 등) 간 배포를 지원하며, Spark as a Service 시나리오를 단순화하는 것을 목표로 합니다.
기능
- 작업 제출, JAR 또는 바이너리 업로드, 작업 컨텍스트 관리를 위한 REST API
- 지속적 및 일시적 컨텍스트 지원: 여러 작업에 대한 Spark 세션 또는 컨텍스트 재사용 vs. 작업당 독립 실행형 컨텍스트
- API를 통한 작업 결과 직렬화 및 상태 추적
- HTTPS/SSL 구성, 인증 및 권한 부여 지원(예: Shiro)
- 다양한 클러스터 관리자(Standalone, YARN, Mesos)에 대한 배포, Docker 등에 대한 지원
- 작업/JAR 정보에 대한 메타데이터/지속성, 명명된 객체(이름으로 캐시되고 검색되는 RDD/DataFrames)
프로그래밍 언어
스칼라
카테고리
이 애플리케이션은 https://sourceforge.net/projects/spark-jobserver.mirror/에서도 다운로드할 수 있습니다. OnWorks에 호스팅되어 무료 운영 체제 중 하나에서 가장 쉽게 온라인에서 실행할 수 있도록 설계되었습니다.