توقّف عن الترميز الثابت للقيم: كيفية استخدام المعلمات في تدفقات بيانات Power BI

By Mirko Peters · 2026-08-12

أهلاً بعودتكم إلى البودكاست وإلى تعمّقنا المستمر في هندسة البيانات الحديثة! في منشور المدونة اليوم، نتوسّع في موضوع كثيراً ما يُربك حتى المطوّرين ذوي الخبرة: الانتقال بعيداً عن القيم الثابتة الهشة في الشيفرة، واعتماد المعلمات في خطوط تحضير البيانات لديكم. إن كنتم قد واجهتم صعوبة في نقل تدفق بيانات من بيئة التطوير إلى بيئة الإنتاج دون كسر كل اتصال بمصدر البيانات، فهذا الدليل موجّه لكم. سنستعرض كيفي

Automatically translated with AI from the original post. Read the English original

أهلاً بعودتكم إلى البودكاست وإلى تعمّقنا المستمر في هندسة البيانات الحديثة! في منشور المدونة اليوم، نتوسّع في موضوع كثيراً ما يُربك حتى المطوّرين ذوي الخبرة: الانتقال بعيداً عن القيم الثابتة الهشة في الشيفرة، واعتماد المعلمات في خطوط تحضير البيانات لديكم. إن كنتم قد واجهتم صعوبة في نقل تدفق بيانات من بيئة التطوير إلى بيئة الإنتاج دون كسر كل اتصال بمصدر البيانات، فهذا الدليل موجّه لكم. سنستعرض كيفية جعل تدفقات البيانات لديكم مرنة وقابلة لإعادة الاستخدام وجاهزة للمؤسسات بحق.

مبادئ إعادة استخدام تدفقات البيانات في Power BI

التصميم المعياري

يمكنكم جعل تدفق البيانات قابلاً لإعادة الاستخدام عبر التصميم المعياري. عندما تقسّمون تدفق البيانات إلى أجزاء صغيرة، يصبح تعديل كل جزء أمراً سهلاً. تساعدكم تدفقات البيانات من الجيل الثاني (Dataflows Gen2) في Microsoft Fabric على تحقيق ذلك. يمكنكم استخدام تدفقات البيانات لتجهيز البيانات قبل إنشاء التقارير. يكفي أن تبنوا تدفق البيانات مرة واحدة، ثم يمكنكم استخدامه في أماكن كثيرة. هذا يوفّر الوقت ويحافظ على منطق العمل نفسه في كل مكان.

• يمكنكم مشاركة مجموعات البيانات مع مساحات العمل الأخرى. وهذا يعني أنه يمكنكم الاتصال بمجموعة بيانات رئيسية واحدة من مساحات عمل مختلفة. لستم بحاجة إلى إعادة بناء نموذج البيانات نفسه مراراً وتكراراً.
• تتيح لكم تدفقات البيانات من الجيل الثاني مشاركة التغييرات عبر التقارير. وهذا يحافظ على قابلية تدفق البيانات لإعادة الاستخدام وعلى تطابق بياناتكم.

المعلمات

تُعدّ المعلمات أمراً مهماً لجعل تدفق البيانات قابلاً لإعادة الاستخدام. يمكنكم استخدام المعلمات للتحكم في طريقة عمل تدفق البيانات في حالات مختلفة. على سبيل المثال، يمكنكم إعداد معلمات لمصادر بيانات أو مواقع مختلفة. وهذا يعني أنكم لستم بحاجة إلى تدفق بيانات جديد لكل حالة.

• تتيح لكم المعلمات استخدام المنطق نفسه في اختبار تدفق البيانات وبنائه وتشغيله.
• يمكنكم إدارة الاتصالات والإعدادات لكل موقع على حدة.
• لا تحتاجون إلى تكرار العمل، ويصبح تدفق البيانات قابلاً لإعادة الاستخدام على مستوى المجموعة بأكملها.

تجنّب المنطق المُرمَّز بقيم ثابتة

إذا لم تعتمدوا على القيم الثابتة في المنطق، يصبح تدفق البيانات أكثر مرونة. فالقيم الثابتة تربط تدفق البيانات بمصدر واحد أو بحالة واحدة. بدلاً من ذلك، استخدموا المعلمات وخطوات صغيرة. تساعدكم تدفقات البيانات من الجيل الثاني على تحقيق ذلك. يمكنكم الاتصال بمصادر بيانات كثيرة واستخدام إعدادات قابلة للتغيير. وهذا يساعد على بقاء تدفق البيانات قابلاً لإعادة الاستخدام عندما تتغير احتياجاتكم.

نصيحة: احرصوا دائماً على فصل منطق تحويل البيانات عن منطق إعداد التقارير. فهذا يجعل التحديثات سهلة ويُبقي تدفق البيانات قابلاً لإعادة الاستخدام في المشاريع الجديدة.

تدفقات بيانات Power BI: لماذا تهم إعادة الاستخدام

التعريف والفوائد

من المهم أن نفهم لماذا تهم إعادة الاستخدام في مشاريع البيانات. عندما تستخدمون تدفقات بيانات قابلة لإعادة الاستخدام، فإنكم تبنون أساساً متيناً للتحليلات. تتيح لكم تدفقات بيانات Power BI إنشاء منطق التحويل مرة واحدة واستخدامه مرات عديدة. وهذا يساعد على إبقاء بياناتكم منظمة وسهلة العثور عليها.

تتمتع تدفقات البيانات القابلة لإعادة الاستخدام بمزايا عديدة:

• يمكنكم استخدام منطق التحويل نفسه لكل تقرير. وهذا يعني أن جميع التقارير تتبع القواعد نفسها.
• لستم بحاجة إلى التعامل مع قدر كبير من منطق الأعمال. وهذا يجعل التحديثات سريعة وبسيطة.
• يكون لديكم مكان رئيسي واحد لبياناتكم. ويمكن لجميع أفراد فريقكم الوثوق بالنتائج.
• توفّرون الوقت لأنكم لا تكررون الخطوات لكل تقرير.
• ترتكبون أخطاءً أقل. فعندما تكون البيانات متطابقة دائماً، تقل الأخطاء.

مع تدفقات البيانات من الجيل الثاني، تحصلون على ميزات إضافية. يمكنكم الاتصال بمصادر كثيرة وتجهيز بياناتكم في مكان واحد. ويمكنكم مشاركة مجموعات بيانات خاصة مع التقارير ولوحات المعلومات. وهذا يساعد فريقكم على العمل معاً ويحافظ على قوة التحليلات.

ملاحظة: عندما تجهّزون البيانات في مكان واحد، يساعدكم ذلك على تحويل البيانات الخام إلى أفكار مفيدة.

المزالق الشائعة

إذا لم تفكّروا في إعادة الاستخدام، فقد تواجهون مشكلات. قد تنسخون منطق التحويل وتلصقونه في تقارير مختلفة. قد يؤدي ذلك إلى أخطاء ويُهدر الوقت. كما قد يصعب الحفاظ على تطابق بياناتكم.

من المشكلات الشائعة:

• إنشاء تدفقات بيانات جديدة لكل مشروع بدلاً من إعادة استخدام تدفق واحد.
• استخدام قيم ثابتة لا ينبغي أن تبقى ثابتة.
• عدم توثيق خطوات التحويل.
• عدم تجهيز البيانات في مكان رئيسي واحد.

تساعدكم تدفقات البيانات من الجيل الثاني على تجنّب هذه المشكلات. فهي توفّر أداة سحابية للحصول على البيانات وتعديلها وتخزينها. يمكنكم إدارة بياناتكم في مكان واحد ومشاركتها مع مجموعتكم بأكملها. وهذا يجعل عملكم في التحليلات سلساً وموثوقاً.

بناء تدفقات بيانات قابلة لإعادة الاستخدام

التصميم من أجل إعادة الاستخدام

يمكنك إنشاء تدفقات بيانات قابلة لإعادة الاستخدام باتباع خطوات بسيطة. أولاً، افتح Power BI Service وانتقل إلى مساحة العمل الخاصة بك. انقر على New Item ثم اختر Dataflow. أضف جدولاً واختر Power BI dataflow (Legacy). تحقق من تسجيل الدخول ثم انقر على Next. اختر الجداول التي تريدها وابدأ بتغيير بياناتك. تنفيذ كل خطوة بالترتيب يساعدك على بناء خطوط أنابيب بيانات قوية.

يتيح لك Power Query Online تنفيذ عملية ETL بنفسك. يمكنك الحصول على البيانات وتغييرها وتحميلها دون انتظار فريق تقنية المعلومات. تساعدك هذه الأداة على العمل باستقلالية وتجعل إعادة استخدام تدفقات البيانات أسهل. يمكنك إنشاء تدفقات بيانات تؤدي مهمة واحدة بكفاءة. على سبيل المثال، يمكنك بناء تدفق بيانات مرحلي (staging) يقوم فقط بإحضار البيانات الخام. ويمكن لتدفقات البيانات الأخرى استخدام هذا التدفق المرحلي لإجراء المزيد من التغييرات.

عند الرغبة في إعادة استخدام تدفقات البيانات، فكّر في القابلية للتجزئة (modularity). قسّم تدفقات بياناتك إلى أجزاء صغيرة. يجب أن يؤدي كل جزء مهمة واحدة فقط. هذا يجعل إصلاح جزء واحد أو تحديثه سهلاً دون تغيير كل شيء. يمكنك استخدام Dataflows Gen2 لإدارة هذه الأجزاء. يساعدك هذا الأسلوب على العمل بسرعة أكبر ويمكّن فريقك من خدمة نفسه.

نصيحة: أحضر فقط البيانات التي تحتاجها. لا تحمّل كل شيء احتياطاً. هذا يحافظ على سرعة تدفقات بياناتك وبساطة التعامل معها.

استخدام المعلمات والقوالب

تساعدك المعلمات والقوالب على استخدام تدفقات البيانات في مساحات عمل متعددة. يمكنك إعداد Power Query Parameters أو Fabric Variables للتعامل مع معرّفات العناصر (item IDs). هذا يجعل نقل تدفقات بياناتك إلى مساحات عمل جديدة أمراً سهلاً. فلا تحتاج إلى تغيير منطقك في كل مرة.

يمكنك استخدام المعلمات في Power BI Desktop لتحديد المكان الذي سيُرسل إليه تدفق البيانات. احفظ ملفك كقالب. عندها يمكنك استخدام تدفق البيانات في أماكن مختلفة بنقرات قليلة فقط. يساعدك هذا الأسلوب على العمل باستقلالية وتقليل الأخطاء. ويمكنك التبديل بسهولة بين الاختبار والاستخدام الفعلي.

• تساعد Power Query Parameters وFabric Variables على إعداد كل مساحة عمل.
• تتيح لك القوالب استخدام الإعداد نفسه للتدفقات الجديدة.
• يمكنك نقل تدفقات بياناتك من مرحلة البناء إلى الاختبار ثم إلى الاستخدام الفعلي بجهد أقل.

يجعل استخدام المعلمات والقوالب تدفقات بياناتك مرنة. يمكنك خدمة فرق ومشاريع كثيرة دون البدء من الصفر. وهذا أمر مهم للهندسة الذاتية للبيانات (self-service data engineering).

مصدر الحقيقة الوحيد

يعني مصدر الحقيقة الوحيد أن تحتفظ بمجموعة رئيسية واحدة من البيانات. هذا يساعد الجميع على الثقة بالنتائج. يمكنك استخدام Dataflows Gen2 لإنشاء نموذج دلالي واحد. تستخدم جميع تقاريرك ولوحات المعلومات هذا النموذج. هذا يقلل الأخطاء ويحافظ على اتساق بياناتك.

عندما تحتفظ ببياناتك في مكان واحد، تتحسن حوكمتها. يمكنك معرفة من يستخدم البيانات وكيف يستخدمها. وهذا يساعدك على الالتزام بالقواعد وإدارة البيانات بالشكل الصحيح. يجعل Dataflows Gen2 التعامل مع تصنيف البيانات وربطها أمراً سهلاً. يمكنك وضع قواعد للبيانات الحساسة والتأكد من أن الجميع يلتزم بها.

ملاحظة: يساعد مصدر الحقيقة الوحيد فريقك على اتخاذ قرارات جيدة. فالجميع يستخدم الأرقام والمصطلحات نفسها.

ممارسات التوثيق

يحافظ التوثيق الجيد على سهولة استخدام تدفقات بياناتك لفترة طويلة. ينبغي أن تدوّن كل خطوة تقوم بها لتجهيز بياناتك. هذا يساعد الآخرين على معرفة ما قمت به. امنح كل خطوة اسماً واضحاً. وأضف ملاحظات توضح سبب اختيارك لبعض القرارات.

• حدد من يملك كل تدفق بيانات ومن يقوم بتحديثه.
• أضف وصفاً لتدفق البيانات ولكل جدول فيه.
• تتبّع التقارير ولوحات المعلومات التي تستخدم تدفق البيانات الخاص بك.
• استخدم أسماء واضحة لكل خطوة تنشئها.

إليك جدولاً بأفضل الطرق للتوثيق والتنظيم:

قواعد التسمية مهمة أيضاً. استخدم أسماء مثل DF_HubSpot_Contacts_Daily. أضف DF_ في بداية تدفقات البيانات. أظهر البيئة، مثل DEV_ أو TEST_ أو PROD_. اختر نمطاً لكتابة الأسماء واستخدمه في كل مكان. هذا يجعل تدفقات بياناتك سهلة الإيجاد والفهم.

يهم إعداد مساحة العمل لإمكانية إعادة الاستخدام. ضع تدفقات بياناتك في مساحات عمل مختلفة. يساعد ذلك الأشخاص على العمل باستقلالية ويتيح لك التحكم في الأمان لكل فريق. لا تضع كل تدفقات البيانات في مساحة عمل واحدة. استخدم مساحات عمل مختلفة لمهام مختلفة. هذا يساعدك على توسيع الهندسة الذاتية للبيانات ودعم عدد أكبر من المستخدمين.

نصيحة: تنجح الخدمة الذاتية عندما يتمكن الجميع من إيجاد تدفقات البيانات التي يحتاجونها واستخدامها والثقة بها.

أمثلة & أخطاء شائعة في تدفقات بيانات Power BI

إعادة هيكلة تدفقات البيانات لمرة واحدة

قد تبدأ في بعض الأحيان بتدفق بيانات (dataflow) لتقرير واحد فقط، وقد يؤدي ذلك إلى الالتباس ومزيد من العمل لاحقاً. تعني إعادة الهيكلة (Refactoring) تحويل خطوط المعالجة المعقدة إلى لبنات بناء بسيطة. على سبيل المثال، كانت لدى Trident Advisory Group خطوط معالجة كثيرة لتقارير مختلفة، فجمعتها في تدفق بيانات واحد يجمع سجلات الأحداث الأولية. أصبح بإمكان محللي الأعمال الآن إنشاء تقارير جديدة دون الانتظار حتى يتدخل قسم تقنية المعلومات. أدى هذا التغيير إلى تسريع العمل وتبسيطه، فالتقارير التي كانت تستغرق ثلاث ساعات باتت تكتمل في خمس عشرة دقيقة. كما يستخدم فريقك المنطق نفسه في كل تقرير.

يعرض الجدول التالي الفوائد الرئيسية:

عند إعادة الهيكلة، تحقق من تأثير التغييرات على التطبيقات الأخرى. وتأكد من دمج البيانات التي لا يوجد لها مالك واضح، فهذا يساعد على الحفاظ على أمان بياناتك وتنظيمها.

أخطاء يجب تجنبها

قد تقع في أخطاء عند محاولة إعادة استخدام تدفقات البيانات. من هذه الأخطاء نسخ المنطق إلى كل تقرير بدلاً من استخدام تدفق بيانات واحد، وهو ما قد يتسبب في أخطاء ويجعل التحديثات صعبة. ومن الأخطاء الأخرى استخدام قيم ثابتة لا يمكن تغييرها، مما يقلل من المرونة. كما أن عدم توثيق خطواتك قد يُربك فريقك.

يساعدك Dataflows Gen2 على تجنب هذه المشكلات. يمكنك استخدام أداة مرئية لبناء خطوط المعالجة بقدر قليل من الشيفرة. كما أن Power Query سهل الاستخدام، ويمكنك إجراء تغييرات متقدمة عند الحاجة. تذكّر دائماً ضبط أوقات التحديث لتقاريرك. وعند نقل العناصر بين البيئات، يُسهّل Dataflows Gen2 عملية النشر.

نصيحة: احتفظ بمنطق تحويل بياناتك في مكان واحد، فهذا يساعد فريقك على الثقة بالبيانات ويُبقي كل شيء منظماً.

استخدام Power Query في Power BI وPower Query Online لإنشاء dataflows

ما هو تدفق بيانات Power BI، وما علاقته بـ Power Query؟

تدفق بيانات Power BI هو مجموعة من الجداول يتم إنشاؤها وإدارتها في خدمة Power BI، ويستخدم Power Query لاستخراج البيانات وتحويلها وتحميلها من مصادر متنوعة. وهو يُركّز إعداد البيانات في مكان واحد، بحيث تستطيع مجموعات البيانات في Power BI والتقارير اللاحقة إعادة استخدام البيانات نفسها بعد تحويلها، مما يقلل التكرار ويدعم البيانات ضمن حلول البيانات الكبيرة.

كيف أنشئ تدفق بيانات في خدمة Power BI؟

لإنشاء تدفق بيانات، افتح مساحة عمل في خدمة Power BI، واختر “Create” ثم “Dataflow”، واستخدم محرر Power Query عبر الإنترنت للاتصال بالبيانات من مصادر متنوعة (محلية أو Azure أو السحابة). ثم حدّد الكيانات والتحويلات واحفظ العمل. ويمكنك أيضاً إنشاء عدة تدفقات بيانات لتجزئة عملية ETL لمستودع البيانات أو للأحجام الكبيرة من البيانات.

هل يمكنني استخدام تدفقات البيانات في Power BI Desktop، وكيف ترتبط بمجموعات البيانات؟

نعم، يمكنك استخدام تدفقات البيانات في Power BI Desktop من خلال الاتصال بتدفقات بيانات Power BI كمصدر بيانات. وبعد الاتصال، يستخدم تقرير Power BI بيانات التدفق كمصدر، ويمكنك دمجها مع مصادر بيانات أخرى لبناء مجموعات بيانات في Power BI ونشر التقارير مرة أخرى إلى خدمة Power BI.

ما حالات الاستخدام الشائعة لتدفقات بيانات Power BI، وما سيناريوهات إنشاء تدفقات البيانات؟

تشمل حالات الاستخدام الشائعة مركزة منطق إعداد البيانات المشترك عبر عدة تقارير، وإنشاء مصدر موثوق واحد للمؤسسة، وإعداد البيانات لمستودع البيانات أو Azure Data Lake Storage Gen2، والتعامل مع الأحجام الكبيرة من البيانات بالتحديث المجدول، وإتاحة إعادة الاستخدام عبر عدة مجموعات بيانات في Power BI وتطبيقات Power Platform.

كيف يعمل تحديث تدفق البيانات، وكيف أجدول تحديثه؟

يقوم تحديث تدفق البيانات بتشغيل تحويلات Power Query المحددة في التدفق لتحديث الكيانات بأحدث البيانات. ويمكنك ضبط إعدادات جدولة التحديث في خدمة Power BI لتعمل وفق جدول زمني، أو استخدام Power Automate للتحديثات المرتبطة بالأحداث. وتجدر الإشارة إلى أن تكرار التحديث والتوازي قد يعتمدان على اشتراك Power BI Premium أو على السعة المخصصة لديك.

ما الفروق بين تدفقات البيانات ومجموعات البيانات في Power BI؟

تركّز تدفقات البيانات على عملية ETL في المراحل الأولى باستخدام Power Query Online لإنشاء جداول قابلة لإعادة الاستخدام تُخزَّن كبيانات تدفق، بينما صُممت مجموعات البيانات لتحليل البيانات ونمذجتها في Power BI (الجداول والعلاقات والمقاييس). وعادةً ما تستهلك مجموعات البيانات تدفقات البيانات كمصادر، بحيث تستطيع عدة مجموعات بيانات وتقارير مشاركة البيانات المُعدّة نفسها.

هل يمكن تخزين تدفقات البيانات في Azure، وما هو الدعم المتاح لـ ADLS Gen2؟

نعم، يمكن لتدفقات بيانات Power BI تخزين الكيانات في Azure Data Lake Storage Gen2 (ADLS Gen2) عند استخدام "محرك الحوسبة المحسّن" أو عند الربط بمساحة عمل مدعومة بـ ADLS Gen2، ما يتيح سيناريوهات البيانات الضخمة، والاستهلاك المباشر من Azure Data Factory أو أدوات أخرى، والتكامل ضمن بنية مستودع بيانات أوسع.

هل أحتاج إلى Power BI Premium لاستخدام تدفقات البيانات، وما الميزات التي تتطلب الاشتراك المميز؟

تتوفر تدفقات البيانات في خدمة Power BI للمستخدمين بترخيص Pro مع الإمكانات الأساسية، لكن الميزات مثل مساحة التخزين الأكبر، وتكرار التحديث الأعلى، والكيانات المرتبطة عبر مساحات العمل، وعزل الحوسبة لحجم البيانات الكبير، غالباً ما تتطلب Power BI Premium أو Premium Per User لضمان أداء قابل للتوسع وجداول تحديث بمستوى المؤسسات.

كيف تتعامل تدفقات البيانات مع البيانات المحلية والموصلات داخل خدمة Power BI؟

للاتصال بمصادر البيانات المحلية من تدفق بيانات، قم بتكوين بوابة البيانات المحلية واستخدامها في خدمة Power BI، ثم اختر الموصل المناسب في Power Query Online وأدخل بيانات الاعتماد. يتيح ذلك لتدفقات البيانات استخراج البيانات من قواعد البيانات المحلية وتحديثها في السحابة لتستخدمها مجموعات البيانات والتقارير.

ما الفرق بين استخدام تدفق بيانات واستخدام Azure Data Factory لعمليات ETL؟

صُممت تدفقات البيانات لعمليات ETL ذاتية الخدمة ومرتكزة على الأعمال، مع تحويلات Power Query مدمجة في Power BI وPower Platform، وهي مثالية لإعادة الاستخدام عبر مجموعات البيانات والتقارير. أما Azure Data Factory فيستهدف تنسيق العمليات على نطاق المؤسسات والخطوط المعقدة لمستودع البيانات، ومعالجة البيانات الضخمة، والتحويلات المتقدمة عبر أنظمة كثيرة. ومع ذلك، يمكن استخدام الأداتين معاً عند دمج البيانات في ADLS Gen2.

كيف أدير عدة تدفقات بيانات وأعيد استخدام التحويلات عبر مساحات العمل؟

يمكنك تنظيم تدفقات البيانات داخل مساحات العمل في خدمة Power BI، واستخدام الكيانات المرتبطة (Linked Entities) لإعادة استخدام الجداول من تدفق بيانات آخر، وإنشاء تدفق بيانات جديد يشير إلى تدفقات موجودة، وإدارة الوصول عبر أذونات مساحة العمل، بحيث تستهلك حلول Power BI وتقاريرها بشكل متسق البيانات المشتركة المُعدّة ضمن تدفقات البيانات في Power BI.

الخاتمة

للإنهاء، يُعد الابتعاد عن القيم المكتوبة مباشرةً في الكود (Hard-coded) من أكثر التحولات المعمارية تأثيراً في رحلتك مع Power BI. فمن خلال التصميم المعياري والمعاملات (Parameterization) وDataflows Gen2، تضمن أن تكون حلولك مرنة وسهلة الصيانة وجاهزة للترقية السلسة بين البيئات. وإذا كنت ترغب في التعمق أكثر في بناء خطوط بيانات حديثة وتنظيم بيئات Fabric لتحقيق النجاح، فتأكد من الاطلاع على حلقة البودكاست ذات الصلة: Build Reusable Dataflows Gen2 in Microsoft Fabric. شكراً لقراءتك، وتمنياتي لك بتقارير موفقة!