Repolode
제출하기
apache

apache/streampark

Apache Flink 및 Spark 작업을 실행하고 관리하는 스트리밍 애플리케이션 개발 프레임워크이자 클라우드 네이티브 제어 플레인입니다.

GitHub에서 보기웹사이트
스타
4,346
포크
1,093
열린 이슈
53
마지막 커밋
7일 전

어떤 프로젝트인가요?

StreamPark는 실시간 스트리밍 애플리케이션을 구축하고 운영하기 위한 프레임워크이자 플랫폼입니다. 사전 구축된 API, 커넥터, 템플릿을 제공해 Flink 및 Spark 작업 개발을 간소화하고, 웹 기반 플랫폼으로 해당 작업을 배포하고 모니터링하며 운영할 수 있습니다.

여러 엔진 버전을 동시에 지원하며 Standalone 클러스터, YARN(Hadoop 2.x/3.x), Kubernetes에서 작업을 실행할 수 있습니다. 스트림 처리의 개발부터 운영까지 전 과정을 담당하는 단일 서비스로 설계되었으며, Paimon, Doris 같은 생태계 도구와 연동됩니다.

이 프로젝트는 원래 StreamX라는 이름으로 시작했으며 2022년 8월 StreamPark로 이름을 바꿨고, 2025년 1월 Apache 최상위 프로젝트가 되었습니다.

핵심 기능

  • 01Apache Flink 및 Apache Spark 애플리케이션을 위한 통합 개발 프레임워크
  • 02여러 Flink 및 Spark 버전을 실행하고 관리
  • 03Standalone, YARN, Kubernetes에 작업 배포
  • 04개발, 배포, 모니터링, 운영을 위한 웹 플랫폼
  • 05Docker 또는 빠른 설치 스크립트를 통한 단일 서비스 배포

활용 사례

  • 여러 클러스터에 걸친 다수의 Flink 또는 Spark 스트리밍 작업 관리
  • Kubernetes 또는 YARN에서 실시간 데이터 파이프라인을 개발하고 배포하는 방식 표준화
  • 하나의 플랫폼에서 여러 엔진 버전을 동시에 실행

빠른 시작

  1. 1

    Docker에서 StreamPark 실행

    docker run -d -p 10000:10000 apache/streampark:latest
  2. 2

    README에 있는 로컬 빠른 설치 스크립트 실행(원격 스크립트를 셸로 파이프합니다)

  3. 3

    빌드 스크립트를 사용해 소스에서 빌드

    ./build.sh

사용 전 알아둘 점

  • 모든 기능은 Apache Flink 및 Spark 클러스터를 대상으로 하므로, 작업을 실행하려면 해당 엔진과 Standalone, YARN, Kubernetes와 같은 환경이 필요합니다.

포함된 컬렉션

마이크로서비스 프레임워크와 서비스 인프라

토픽

#stream-processing#flink#spark#real-time-data#kubernetes#data-pipeline#big-data#cloud-native#control-plane#data-computing

자주 묻는 질문

streampark은(는) 무엇인가요?
Apache Flink 및 Spark 작업을 실행하고 관리하는 스트리밍 애플리케이션 개발 프레임워크이자 클라우드 네이티브 제어 플레인입니다. StreamPark는 실시간 스트리밍 애플리케이션을 구축하고 운영하기 위한 프레임워크이자 플랫폼입니다. 사전 구축된 API, 커넥터, 템플릿을 제공해 Flink 및 Spark 작업 개발을 간소화하고, 웹 기반 플랫폼으로 해당 작업을 배포하고 모니터링하며 운영할 수 있습니다.
streampark은(는) 무료로 사용할 수 있나요? 라이선스는 무엇인가요?
streampark은(는) Apache-2.0 라이선스의 오픈소스입니다. 상업용 제품에 사용하기 전에 라이선스 조건을 확인하세요.
streampark은(는) 아직 유지보수되고 있나요?
활발히 유지보수 중. streampark의 마지막 커밋은 2026년 10월 31일입니다.
streampark은(는) 어디에 사용할 수 있나요?
여러 클러스터에 걸친 다수의 Flink 또는 Spark 스트리밍 작업 관리 Kubernetes 또는 YARN에서 실시간 데이터 파이프라인을 개발하고 배포하는 방식 표준화 하나의 플랫폼에서 여러 엔진 버전을 동시에 실행
streampark는 어떻게 설치하나요?
Docker에서 StreamPark 실행: docker run -d -p 10000:10000 apache/streampark:latest README에 있는 로컬 빠른 설치 스크립트 실행(원격 스크립트를 셸로 파이프합니다) 빌드 스크립트를 사용해 소스에서 빌드: ./build.sh
streampark은(는) 어디서 받을 수 있나요?
소스 코드와 설치 방법은 GitHub에 있습니다: https://github.com/apache/streampark

요약은 프로젝트 README를 바탕으로 AI가 작성했습니다. GitHub 통계는 매일 갱신됩니다.

관련 프로젝트

apache / linkis

REST/WS/JDBC 인터페이스를 통해 애플리케이션과 Spark, Hive, Flink 같은 데이터 엔진을 연결하는 컴퓨팅 미들웨어입니다.

데이터·분석#big-data#computation-middleware#spark
3.4천+1 이번 주1.2천JavaApache-2.0업데이트 3일 전