Serverless Spark 및 OneLake 통합을 통한 대규모 데이터 처리 최적화
Apache Spark in Microsoft Fabric: How It Handles Big Data and Makes Your Life Easier
Medallion Architecture 기반 수십억 건 데이터 스케일의 Feature Engineering 파이프라인 구축
Azure Databricks for MLOps and Feature Engineering at Scale with Apache Spark, Delta Lake, and MLflow
Files-Tables 이원화 구조를 통한 Lakehouse 데이터 거버넌스 및 쿼리 효율 최적화
QN : Ingest and transform data in a lakehouse
데이터 규모에 따른 Shuffle 최소화 전략으로 Join 성능 최적화
Broadcast Joins vs. Sort-Merge Joins: Choosing the Right Join Strategy in Apache Spark
PID 1 생명주기 제어를 통한 Spark 컨테이너 강제 종료 문제 해결
Why My Spark Container Keeps Exiting — Docker PID 1 and the Daemon Trap
Lakehouse 기반 통합 거버넌스와 고성능 데이터 파이프라인 설계 전략
Single guide for DP-750 Azure Databricks certification
OSM 데이터 기반 15분 도시 분석을 위한 Spark-dbt 데이터 파이프라인 구축
Data pipeline around 15 minute city
MapReduce의 한계를 넘어 Big Data 분석 표준이 된 Apache Spark의 설계 철학
Spark creator bags computing gong for making big data a little bit smaller
PySpark가 분산 컴퓨팅 방식으로 수천만 행의 데이터를 처리하는 데이터 엔지니어링 도구임을 설명한다
PySpark : The Big Brain of Data Processing