Apache Spark

스파크

8개 레벨

대규모 데이터 처리에 최적화된 오픈 소스 프레임워크예요. 메모리 내 연산을 통해 빠른 속도를 제공해요. 다양한 언어와의 통합이 용이해요.

공식 웹사이트

스파크 스킬 여정을 시작하세요

8개의 레벨을 통해 체계적으로 학습하고, 커리어 성장의 기반을 다지세요.

8 레벨 로드맵

단계별 역량 인증

학습 로드맵

8개 레벨

전체 8

Lv 1. 로컬 환경에서 Spark을 설치하고 실행할 수 있어요

1. Spark 소개
2. Spark 설치 및 환경 설정
3. spark-shell 사용법

Lv 2. RDD를 생성하고 변환 및 액션 연산을 수행할 수 있어요

Lv 3. DataFrame과 SQL API를 활용해 구조화된 데이터를 처리할 수 있어요

Lv 4. Dataset API와 UDF를 사용해 타입 안전한 처리를 할 수 있어요

로그인하고 더 많은 레벨을 확인하세요

Lv 5. 파티셔닝과 캐싱으로 Spark 애플리케이션 성능을 최적화할 수 있어요

Lv 6. Structured Streaming을 이용해 실시간 데이터 처리를 구현할 수 있어요

Lv 7. 프로덕션 환경에 Spark 클러스터를 배포하고 모니터링할 수 있어요

Lv 8. Spark MLlib과 GraphX를 사용해 머신러닝과 그래프 분석을 할 수 있어요

기능들 (4)

스파크
GraphX
GraphX
스파크
MLlib
MLlib
스파크
PySpark
파이스파크
스파크
Spark SQL
스파크 SQL

이 스킬로 지원할 수 있는 채용공고