M365Con 2027 – 무료 온라인 컨퍼런스 · 11–22 Jan 2027 · 120 sessions m365con.net

Data Factory in Microsoft Fabric

Product

Microsoft Fabric 내장 데이터 통합 환경으로, 파이프라인, Dataflow Gen2, 복사 작업 및 미러링을 사용해 데이터를 이동하고 변환합니다. Microsoft는 이를 Azure Data Factory의 후속 제품으로 소개합니다.

◆ PRODUCTData Factory inMicrosoft FabricM365.FM
Title graphic: Data Factory in Microsoft Fabric (Product)

함께 자주 다루는 주제

Data Factory in Microsoft Fabric 관련 에피소드에서는 Fabric notebooks도 자주 다룹니다.

Description

Microsoft Fabric의 Data Factory는 Microsoft Fabric에 내장된 데이터 통합 서비스입니다. Microsoft는 이를 Azure Data Factory의 차세대 버전으로 설명합니다. 이 서비스의 목적은 데이터베이스, 파일, 클라우드 서비스, 레거시 시스템 등에 흩어져 있는 데이터를 한데 모으고, 정제하여 레이크하우스나 데이터 웨어하우스에서 분석에 사용할 수 있도록 준비하는 것입니다. 데이터 이동과 변환은 하나의 인터페이스에서 조율됩니다. 이용하려면 활성 구독이 있는 Fabric 테넌트 계정과 Fabric이 활성화된 작업 영역이 필요합니다.

이 서비스는 100개가 넘는 데이터 소스에 연결됩니다. 여기에는 온프레미스 게이트웨이를 통해 접근할 수 있는 멀티클라우드 및 하이브리드 소스가 포함됩니다. ETL과 ELT 패턴을 모두 지원하므로, 팀은 데이터가 대상에 적재되기 전에 변환할지 이후에 변환할지를 선택할 수 있습니다.

데이터 이동과 관련해 문서에는 여러 옵션이 나와 있습니다. 복사 작업이 권장되는 옵션으로, 일괄 복사, 증분 복사, 변경 데이터 캡처 복사를 처리합니다. 파이프라인 내의 복사 활동은 병렬 처리를 수동으로 제어할 수 있게 해 줍니다. 미러링은 운영 데이터베이스의 거의 실시간 복제본을 OneLake에 유지합니다. 이들 중 무엇을 선택할지는 보통 일회성 적재가 필요한지, 정기적인 증분 적재가 필요한지, 아니면 지속적으로 갱신되는 복제본이 필요한지, 그리고 복사 과정을 얼마나 세밀하게 제어해야 하는지에 따라 결정됩니다.

변환은 여러 방식으로 실행할 수 있습니다. 파이프라인 활동은 노트북, Spark 작업 정의, 저장 프로시저, SQL 스크립트를 호출할 수 있습니다. Dataflow Gen2는 데이터를 가공하기 위한 로우 코드 인터페이스를 제공합니다. dbt 작업은 Fabric 데이터 웨어하우스를 대상으로 실행할 수 있습니다. 이를 통해 코드 중심 팀과 로우 코드 팀이 같은 환경에서 함께 작업할 수 있습니다.

오케스트레이션에는 일정, 이벤트 기반 트리거, 파이프라인 디자이너의 제어 흐름, Apache Airflow DAG가 포함됩니다. Copilot은 자연어 프롬프트로 파이프라인과 데이터플로우를 만들고 오류를 설명할 수 있어, 통합 로직을 구축하거나 문제를 해결할 때 도움이 될 수 있습니다.

M365.FM 콘텐츠에서 보안은 반복적으로 다루는 주제입니다. "Secure Microsoft Fabric Data Pipelines" 에피소드는 데이터 이동 정책을 정기적으로 검토하고, 조직이 성장하거나 새로운 위협이 나타날 때 이를 업데이트할 것을 권장합니다. 이 에피소드는 강력한 데이터 이동 보안이 민감한 정보를 보호하고 규정 준수를 지원한다고 밝힙니다. 또한 Microsoft Fabric의 Data Factory를 보호하기 위한 관리 ID 인증도 다룹니다. 에피소드에 따르면 이 방식을 사용하면 파이프라인이 암호나 비밀 정보를 저장하지 않고도 리소스에 연결할 수 있어, 하드코딩된 자격 증명에 따르는 위험을 피할 수 있습니다.

실무에서 Microsoft Fabric의 Data Factory를 사용하는 팀은 각 소스에 적합한 이동 방식을 정하고, 자신들의 기술 수준에 맞는 변환 접근 방식을 고르며, 파이프라인의 인증과 거버넌스를 설계합니다. 이 서비스는 Fabric 내부에 있으므로, 출력 데이터는 플랫폼의 나머지 분석 환경에서 사용하는 레이크하우스 및 웨어하우스 환경으로 바로 전달됩니다.

Overview compiled with AI from M365.FM episodes and the facts on this page. You can improve it with the edit button below.

TypeProduct
DocumentationData Factory in Microsoft Fabric – Microsoft Learn learn.microsoft.com

Frequently asked questions

Questions marked with AI were written with AI from the facts on this page.

Microsoft Fabric의 Data Factory란 무엇인가요? (AI)

Microsoft Fabric의 데이터 통합 서비스로, 파이프라인, Dataflow Gen2, 복사 작업, 미러링을 사용해 데이터를 이동하고 변환합니다. Microsoft는 이를 Azure Data Factory의 차세대 버전으로 설명합니다.

Microsoft Fabric의 Data Factory에서 데이터를 이동하는 방법에는 어떤 옵션이 있나요? (AI)

복사 작업이 권장되는 옵션으로, 일괄 복사, 증분 복사, 변경 데이터 캡처 복사를 처리합니다. 복사 활동은 병렬 처리를 수동으로 제어할 수 있게 하며, 미러링은 운영 데이터베이스의 거의 실시간 복제본을 OneLake에 유지합니다.

M365.FM에 따르면 파이프라인은 어떻게 보호할 수 있나요? (AI)

"Secure Microsoft Fabric Data Pipelines" 에피소드는 관리 ID 인증을 권장합니다. 이 방식은 파이프라인에 암호나 비밀 정보를 저장하지 않고도 리소스에 연결할 수 있게 합니다. 또한 데이터 이동 정책을 정기적으로 검토할 것을 권장합니다.

Glossary

Community wiki

Short info above, community knowledge below: add practical tips, examples or corrections. New contributions are reviewed first; trusted members publish directly.

Experts and companies for this topic

Nobody has listed this topic yet. Add it to your profile.

Sources

Maintained by Mirko Peters (Microsoft MVP) · Last updated: