Data Factory in Microsoft Fabric
Product
تجربة تكامل البيانات المدمجة في Microsoft Fabric لنقل البيانات وتحويلها باستخدام خطوط الأنابيب (pipelines) وDataflow Gen2 ووظائف النسخ والنسخ المعكوس (mirroring)؛ وتضع Microsoft هذه الخدمة بوصفها خلفًا لـ Azure Data Factory.
مواضيع تُناقش معًا غالبًا
في الحلقات التي تتناول Data Factory in Microsoft Fabric تُناقش غالبًا أيضًا: Fabric notebooks.
Description
Data Factory في Microsoft Fabric هي خدمة تكامل البيانات المدمجة في Microsoft Fabric. وتصفها Microsoft بأنها الجيل التالي من Azure Data Factory. والغرض منها جمع البيانات المتناثرة بين قواعد البيانات والملفات والخدمات السحابية والأنظمة القديمة، وتنظيفها وإعدادها للتحليلات في lakehouse أو مستودع بيانات. ويجري تنسيق عمليات النقل والتحويل من واجهة واحدة. ويتطلب استخدامها حساب مستأجر Fabric باشتراك نشط ومساحة عمل مفعّل عليها Fabric.
تتصل الخدمة بأكثر من مئة مصدر بيانات. وتشمل هذه المصادر البيئات المتعددة السحابات والهجينة، ويمكن الوصول إليها عبر بوابات محلية. كما تدعم نمطي ETL وELT، فيمكن للفرق أن تختار ما إذا كانت البيانات تُحوَّل قبل وصولها إلى الوجهة أو بعده.
ولنقل البيانات، تذكر الوثائق عدة خيارات. ووظيفة النسخ (copy job) هي الخيار المفضل، وتتعامل مع عمليات النسخ الكاملة والتزايدية ونسخ التقاط تغيّرات البيانات (change data capture). ويتيح نشاط النسخ داخل خط الأنابيب تحكمًا يدويًا في التوازي. أما النسخ المعكوس (mirroring) فيحافظ على نسخة متماثلة شبه فورية لقاعدة بيانات تشغيلية داخل OneLake. ويعتمد الاختيار بينها عادةً على ما إذا كانت هناك حاجة إلى تحميل لمرة واحدة، أو تحميل تزايدي متكرر، أو نسخة مُحدَّثة باستمرار، وعلى مقدار التحكم المطلوب في عملية النسخ.
ويمكن تشغيل التحويلات بعدة طرق. فأنشطة خط الأنابيب يمكنها استدعاء دفاتر الملاحظات (notebooks) وتعريفات وظائف Spark والإجراءات المخزنة ونصوص SQL. ويوفر Dataflow Gen2 واجهة منخفضة الشيفرة لتشكيل البيانات. ويمكن تشغيل مهام dbt على مستودع بيانات Fabric. وهذا يتيح للفرق التي تعتمد على الشيفرة والفرق التي تعتمد على الأدوات منخفضة الشيفرة العمل في البيئة نفسها.
ويشمل التنسيق الجداول الزمنية والمُشغِّلات المعتمدة على الأحداث والتحكم في التدفق ضمن مصمم خط الأنابيب، وكذلك رسوم DAG في Apache Airflow. ويمكن لـ Copilot إنشاء خطوط الأنابيب وتدفقات البيانات من تعليمات باللغة الطبيعية، كما يمكنه شرح الأخطاء، وهذا قد يساعد عند بناء منطق التكامل أو استكشاف أخطائه وإصلاحها.
الأمان موضوع متكرر في تغطية M365.FM. فالحلقة "Secure Microsoft Fabric Data Pipelines" تنصح بمراجعة سياسات نقل البيانات بانتظام وتحديثها مع نمو المؤسسة أو ظهور تهديدات جديدة. وتذكر أن أمان نقل البيانات القوي يحمي المعلومات الحساسة ويدعم الامتثال للوائح التنظيمية. وتناقش الحلقة أيضًا مصادقة الهوية المُدارة (managed identity) لتأمين Data Factory في Microsoft Fabric. ووفقًا للحلقة، تتيح هذه الطريقة لخطوط الأنابيب الاتصال بالموارد دون تخزين كلمات مرور أو أسرار، وبذلك تتجنب المخاطر المرتبطة ببيانات الاعتماد المكتوبة في الشيفرة.
عمليًا، تحدد الفرق التي تعمل مع Data Factory في Microsoft Fabric طريقة النقل المناسبة لكل مصدر، ونهج التحويل الذي يناسب مهاراتها، وكيفية المصادقة على خطوط الأنابيب وحوكمتها. ولأن الخدمة تقع داخل Fabric، فإن مخرجاتها تغذي مباشرةً تجارب lakehouse والمستودع التي تستخدمها بقية المنصة في التحليلات.
Overview compiled with AI from M365.FM episodes and the facts on this page. You can improve it with the edit button below.
| Type | Product |
|---|---|
| Documentation | Data Factory in Microsoft Fabric – Microsoft Learn learn.microsoft.com |
Frequently asked questions
Questions marked with AI were written with AI from the facts on this page.
ما هي Data Factory في Microsoft Fabric؟ (AI)
هي خدمة تكامل البيانات في Microsoft Fabric لنقل البيانات وتحويلها باستخدام خطوط الأنابيب وDataflow Gen2 ووظائف النسخ والنسخ المعكوس (mirroring). وتصفها Microsoft بأنها الجيل التالي من Azure Data Factory.
ما الخيارات المتاحة لنقل البيانات في Data Factory في Microsoft Fabric؟ (AI)
وظيفة النسخ (copy job) هي الخيار المفضل، وتتعامل مع عمليات النسخ الكاملة والتزايدية ونسخ التقاط تغيّرات البيانات. ويتيح نشاط النسخ تحكمًا يدويًا في التوازي، أما النسخ المعكوس (mirroring) فيحافظ على نسخة متماثلة شبه فورية لقاعدة بيانات تشغيلية داخل OneLake.
كيف يمكن تأمين خطوط الأنابيب وفقًا لـ M365.FM؟ (AI)
توصي الحلقة "Secure Microsoft Fabric Data Pipelines" باستخدام مصادقة الهوية المُدارة (managed identity)، التي تتصل بالموارد دون تخزين كلمات مرور أو أسرار في خطوط الأنابيب. كما تنصح بمراجعة سياسات نقل البيانات بانتظام.
Community wiki
Short info above, community knowledge below: add practical tips, examples or corrections. New contributions are reviewed first; trusted members publish directly.
Experts and companies for this topic
Nobody has listed this topic yet. Add it to your profile.
Sources
- Data Factory in Microsoft Fabric – Microsoft Learn learn.microsoft.com
Maintained by Mirko Peters (Microsoft MVP) · Last updated: