翻訳準備中 — 韓国語の原文を表示しています。
Apache Spark 2.x 애플리케이션을 더 간편하게 작성하고 배포하기 위한 Scala 프레임워크
中辛 の解説
Scala로 작성된 Spark 2.x용 프레임워크입니다. CueSheet 객체를 확장하고 sc, sqlContext, spark 변수를 직접 사용하여 business logic을 작성하면, 프레임워크가 자동으로 SparkContext/SparkSession을 생성하고 로컬 또는 YARN으로 배포합니다. 난이도: 중상(Spark 기초 지식 필요). application.conf로 Spark 설정을 관리하며, IDE에서 즉시 실행하거나 클러스터에 배포할 수 있습니다. 추가로 HBase, Couchbase, ElasticSearch 커넥터, Spark Streaming 지원, 협업 필터링, Kafka offset 관리 등 유틸리티를 제공합니다.
이런 레포예요
이럴 때 쓰면 좋아요
- Spark 배치 작업을 복잡한 셸 스크립트 없이 관리하고 싶을 때
- IDE에서 Spark 애플리케이션을 디버깅하면서 개발하고 싶을 때
- Marathon이나 Chronos 같은 분산 스케줄러에 Spark 작업을 쉽게 등록하고 싶을 때
핵심 기능
대안 대비 차별점
spark-submit을 완전히 제거하고 순수 Scala 객체 상속으로 통합된 개발-배포 환경을 제공하며, IDE 디버깅과 동적 jar 캐싱으로 분산 스케줄러와의 통합을 간편하게 합니다.
食べた人たち
実際に使ってみた人の記録です — 一言も完走の記録も、確認のうえで公開しています。
このリポジトリの作り方
はじめてですか？ むずかしくありません — 上から順にたどれば、自分の環境で動かして味見できます。
준비물
- Apache Spark 2.x
- Scala 2.10 또는 2.11
- SBT 빌드 도구
바로 시작하기
- SBT 프로젝트에 CueSheet 의존성을 추가합니다.
libraryDependencies += "com.kakao.cuesheet" %% "cuesheet" % "0.10.0"
- Scala object를 작성하여 CueSheet를 확장합니다.
import com.kakao.cuesheet.CueSheet
object Example extends CueSheet {{
val rdd = sc.parallelize(1 to 100)
println(s"sum = ${rdd.sum()}")
println(s"sum2 = ${rdd.map(_ + 1).sum()}")
}}
- src/main/resources 디렉토리에 application.conf 설정 파일을 생성합니다.
spark {
master = "local[*]"
deploy.mode = client
executor.memory = 1g
driver.memory = 1g
}
- IDE에서 Example 객체를 Java 애플리케이션으로 실행하거나, YARN 클러스터 배포 시 master를 yarn으로 변경하여 실행합니다.
ギット飯トライで味見
入れるのが面倒で少し不安だったなら — 安全スキャンからインストールまで、ターミナル一行で終わります。
ターミナルに貼り付ければ、ギット飯の安全スキャン → 隔離フォルダへ clone → インストール → 実行方法の案内まで自動です。はじめてでも大丈夫 — この一行だけです。
npx gitbap-try kakao/cuesheet
Node.js さえあれば、インストールなしで動きます · ギット飯トライとは？ →
スター推移 · 7日
使いやすさ · まねしやすいか
- ゆるいライセンス
- テストあり
- サンプル集
- 最近の更新
- AGENTS.md
- llms.txt
- テンプレート
更新の情報なし · 2017 年に作成
「백엔드·DB」 こういうリポジトリを毎週受け取りませんか？
毎週月曜の朝、選んだ一膳だけ。広告なし · いつでも解除。
自分のリポジトリですか？ README にギット飯バッジを貼る
[](https://www.gitbap.com/r/kakao/cuesheet)Claude からそのまま使う — ギット飯のつなぎ方
ギット飯を Claude につなぐと、こうしたリポジトリを Claude・Cursor・Codex から直接さがして試せます。
Claude の設定 → コネクタにこのアドレスを貼り付け。
https://www.gitbap.com/api/mcpプラグインを入れると /gitbap-trending·/gitbap-try のスラッシュコマンドで、その場でリポジトリを試せます。Claude Code で下の 2 行を順に実行してください。
/plugin marketplace add jakeparkcolde/gitbap-cowork/plugin install gitbap-cowork@gitbapAI が README をもとに要約しました · 原文を見る