M365Con 2027 – כנס אונליין חינמי · 11–22 Jan 2027 · 120 sessions m365con.net

Data Factory in Microsoft Fabric

Product

שירות האינטגרציה של נתונים המובנה ב-Microsoft Fabric להעברה ולשינוי של נתונים באמצעות צינורות (pipelines), Dataflow Gen2, משימות העתקה (copy jobs) ומראה (mirroring). Microsoft מציגה אותו כיורשו של Azure Data Factory.

◆ PRODUCTData Factory inMicrosoft FabricM365.FM
Title graphic: Data Factory in Microsoft Fabric (Product)

נושאים שנדונים לעיתים קרובות יחד

בפרקים על Data Factory in Microsoft Fabric עולים לעיתים קרובות גם: Fabric notebooks.

Description

Data Factory ב-Microsoft Fabric הוא שירות האינטגרציה של נתונים המובנה ב-Microsoft Fabric. Microsoft מתארת אותו כדור הבא של Azure Data Factory. מטרתו לאחד נתונים המפוזרים בין מסדי נתונים, קבצים, שירותי ענן ומערכות מורשת, לנקות אותם ולהכין אותם לניתוח ב-lakehouse או במחסן נתונים. ההעברה והשינוי מתוזמנים מממשק יחיד. השימוש בשירות דורש חשבון דייר של Fabric עם מנוי פעיל ומרחב עבודה שבו Fabric מופעל.

השירות מתחברליותר ממאה מקורות נתונים. ביניהם מקורות מרובי ענן והיברידיים, שאליהם ניתן להגיע באמצעות שערים מקומיים (on-premises gateways). נתמכים גם דפוסי ETL וגם ELT, כך שצוותים יכולים לבחור אם הנתונים ייושמו לפני הגעתם ליעד או אחריה.

להעברת נתונים, התיעוד מציין מספר אפשרויות. משימת העתקה (copy job) היא האפשרות המועדפת, והיא מטפלת בהעתקות כוללות, העתקות מצטברות והעתקות של לכידת שינויים בנתונים (change data capture). פעולת העתקה (copy activity) בתוך צינור מעניקה שליטה ידנית במקביליות. מראה (mirroring) שומר על העתק כמעט בזמן אמת של מסד נתונים תפעולי ב-OneLake. הבחירה ביניהן תלויה בדרך כלל בשאלה אם נדרשת טעינה חד-פעמית, טעינה מצטברת חוזרת או העתק מתעדכן ברציפות, וכמה שליטה נדרשת בתהליך ההעתקה.

השינויים יכולים לרוץ במספר דרכים. פעילויות בצינור יכולות לקרוא למחברות (notebooks), להגדרות משימות Spark, לפרוצדורות מאוחסנות ולסקריפטים של SQL. Dataflow Gen2 מציע ממשק דל-קוד לעיצוב נתונים. ניתן להריץ משימות dbt נגד מחסן נתונים של Fabric. כך יכולים צוותים שעובדים בקוד וצוותים שעובדים בדל-קוד לפעול באותה סביבה.

ההתזמור כולל לוחות זמנים, טריגרים מבוססי אירועים, בקרת זרימה במעצב הצינור ו-DAGs של Apache Airflow. Copilot יכול ליצור צינורות וזרימות נתונים מהנחיות בשפה טבעית, ויכול להסביר שגיאות, מה שיכול לעזור בבניית לוגיקת אינטגרציה או בפתרון בעיות.

אבטחה היא נושא חוזר בסיקורי M365.FM. הפרק "Secure Microsoft Fabric Data Pipelines" ממליץ לבחון מדיניות העברת נתונים באופן קבוע ולעדכן אותה ככל שהארגון גדל או כשמתגלים איומים חדשים. לפי הפרק, אבטחה חזקה של העברת נתונים מגינה על מידע רגיש ותומכת בציות לרגולציה. הפרק דן גם באימות באמצעות זהות מנוהלת (managed identity) לאבטחת Data Factory ב-Microsoft Fabric. לפי הפרק, שיטה זו מאפשרת לצינורות להתחבר למשאבים בלי לאחסן סיסמאות או סודות, ובכך נמנעים הסיכונים הכרוכים בפרטי גישה קשיחים בקוד.

בפועל, צוותים העובדים עם Data Factory ב-Microsoft Fabric מחליטים איזו שיטת העברה מתאימה לכל מקור, איזו גישה לשינוי מתאימה לכישורים שלהם, וכיצד לאמת ולנהל את הצינורות. מאחר שהשירות פועל בתוך Fabric, הפלט שלו מזין ישירות את חוויות ה-lakehouse וה-warehouse שאר הפלטפורמה משתמשת בהן לניתוח.

Overview compiled with AI from M365.FM episodes and the facts on this page. You can improve it with the edit button below.

TypeProduct
DocumentationData Factory in Microsoft Fabric – Microsoft Learn learn.microsoft.com

Frequently asked questions

Questions marked with AI were written with AI from the facts on this page.

מהו Data Factory ב-Microsoft Fabric? (AI)

זהו שירות האינטגרציה של נתונים ב-Microsoft Fabric להעברה ולשינוי של נתונים באמצעות צינורות, Dataflow Gen2, משימות העתקה ומראה. Microsoft מתארת אותו כדור הבא של Azure Data Factory.

אילו אפשרויות קיימות להעברת נתונים ב-Data Factory ב-Microsoft Fabric? (AI)

משימת העתקה היא האפשרות המועדפת, והיא מטפלת בהעתקות כוללות, מצטברות ושל לכידת שינויים בנתונים. פעולת העתקה מציעה שליטה ידנית במקביליות, ומראה שומר על העתק כמעט בזמן אמת של מסד נתונים תפעולי ב-OneLake.

כיצד ניתן לאבטח צינורות לפי M365.FM? (AI)

הפרק "Secure Microsoft Fabric Data Pipelines" ממליץ על אימות באמצעות זהות מנוהלת, שמתחבר למשאבים בלי לאחסן סיסמאות או סודות בצינורות. הוא ממליץ גם לבחון מדיניות העברת נתונים באופן קבוע.

Glossary

Community wiki

Short info above, community knowledge below: add practical tips, examples or corrections. New contributions are reviewed first; trusted members publish directly.

Experts and companies for this topic

Nobody has listed this topic yet. Add it to your profile.

Sources

Maintained by Mirko Peters (Microsoft MVP) · Last updated: