2025-08-05

Microsoft Fabric에서 엔터프라이즈 수집 파이프라인 구축하기

Microsoft Fabric 수집 작업이 '잘 되고 있다'고 생각했는데 월요일 아침 대시보드가 갑자기 깨진다면, 이번 에피소드가 경종이 될 것입니다. Dataflows Gen2와 직접 Pipeline 복사의 실제 차이를 짚어보고, 잘못된 선택이 어떻게 중복, 잘림, 스키마 드리프트 문제를 레이크하우스에 조용히 주입하는지 살펴봅니다. Dataflows Gen2가 잘못된 행을 적재 전에 잡아내고 정리하는 방식, Pipeline은 정제가 아닌 오케스트레이션에 강점이 있다는 점, 그리고 SQL 보안 설정, Azure Data Lake 관리, Dynamics 365 Finance의 스로틀링 대응을 위한 구체적인 플레이북을 다룹니다. 지금 한 가지만 바꾸면 수십 시간을 아낄 수 있고, 숫자가 맞지 않을 때 호출받는 일도 줄어듭니다.

Apple Podcasts · Spotify · YouTube

Build Enterprise Ingest Pipelines in Microsoft Fabric (English)