Power BI Power Query로 10개 이상 데이터 소스를 통합 연결하여 일관된 분석 기반 구축함

Context

현대 데이터 환경에서 정보는 다양한 시스템과 포맷에 분산되어 존재함. Excel, CSV, PDF, JSON, 데이터베이스, API 등 각기 다른 소스에서 데이터가 유입됨. 이로 인해 숫자 불일치, 포맷 차이, 필드 누락, 중복 데이터 등 정합성 문제가 발생함.

Technical Solution

• Power Query: Excel, CSV, Text, PDF, JSON, SharePoint Folder 등 다양한 파일 포맷을 단일 인터페이스에서 통합 연결함
• 데이터베이스 연동: MySQL, SQL Server, Azure Analysis Services와 실시간 연결 구성함
• Web API 연동: REST API, 웹 페이지에서 JSON/XML 데이터 직접 추출함
• 중첩 구조 처리: NoSQL 문서와 JSON의 계층 구조를 Power Query에서 테이블 형식으로 변환함
• 파일 결합 기능: SharePoint Folder에서 다수 파일을 자동 감지하고 통합 로드함

Impact

분산된 데이터 소스를 Power BI 내에서 정제하고 통합함으로서 일관된 Single Source of Truth 수립 가능함.

Key Takeaway

Power BI의 가치는 연결 단계가 아닌 데이터 준비 단계에서 드러남. 정합성 검증, 오류 정제, 구조화가 분석 품질을 결정함.