Serverless Spark 및 OneLake 통합을 통한 대규모 데이터 처리 최적화
Apache Spark in Microsoft Fabric: How It Handles Big Data and Makes Your Life Easier
Midjourney Medical: 60초안에 전신을 촬영하는 초음파 CT와 Spa 공간 오픈 예정
초당 TB급 데이터 처리를 통한 60초 전신 초음파 3D 재구성 시스템
Optuna와 IRIS DB 기반 Distributed Hyperparameter Tuning 아키텍처
Fast Automatic ML Hyperparameter tuning Using Optuna (w. MLflow model registry and IRIS DB)
GenAI 코드 생성 가속화로 인한 시스템 Liability 증대 및 기계적 검증 필요성
The Fallacies of GenAI Development
AI 기반 RAN 에너지 최적화로 데이터 처리 효율 10.6% 향상
Ucell and ZTE complete large-scale deployment of AI‑Powered green network solution in Uzbekistan
실패한 Job Receipt의 세분화를 통한 DePIN GPU 분쟁 해결 구조 설계
DePIN GPU Market: The Failed Job Receipt Developers Should Demand
Profiling 기반의 성능 병목의 근본 원인 제거를 통한 시스템 효율 극대화
⚖️ Case File 4.1: The Efficiency Extortion
1.25조 달러 규모의 수직 통합을 통한 Orbital Data Centre 구축 및 AI 인프라 패러다임 전환
Infrastructure Is Destiny
100 TiB 데이터 처리를 증명한 DuckDB 기반 분산 데이터 파이프라인 설계
From DeepSeek to Quack: When the Dream of Distributed DuckDB Started to Feel Real
소프트웨어 엔지니어링의 정수, 60여 가지 설계 법칙을 통한 시스템 최적화 가이드
Laws of Software Engineering
MapReduce의 한계를 넘어 Big Data 분석 표준이 된 Apache Spark의 설계 철학
Spark creator bags computing gong for making big data a little bit smaller
PySpark가 분산 컴퓨팅 방식으로 수천만 행의 데이터를 처리하는 데이터 엔지니어링 도구임을 설명한다
PySpark : The Big Brain of Data Processing
엔지니어가 TCP 기반 분산 작업 도구를 개발해 Dask·Ray과 동등한 3.52배 성능 향상 달성
I Built a Tool to Distribute Python Tasks Across Local Machines. Here's How It Performed
AWS News Blog
AWS가 NVIDIA RTX PRO 6000 Blackwell GPU로 EC2 G7e 인스턴스를 출시해 G6e 대비 추론 성능 2.3배, GPU 메모리 2배, inter-GPU 대역폭 4배 향상
Announcing Amazon EC2 G7e instances accelerated by NVIDIA RTX PRO 6000 Blackwell Server Edition GPUs
Hugging Face와 Dask를 결합하여 100행 pandas 처리를 211백만행 클라우드 GPU 병렬 처리로 확장
Scaling AI-based Data Processing with Hugging Face + Dask