2025-11-03
הפחתת עלויות המחשוב של Dataflows Gen2 ב-Fabric

רוב צוותי Microsoft Fabric מבזבזים כסף כי הם מתייחסים ל-Dataflows Gen2 כמו ל-ETL הישן של Power BI. ב-Fabric, המחשוב—not האחסון—הוא המד שמחויב, ולכן כל רענון מיותר מפעיל אשכולות, טוען מחדש את אותם מקורות ומכפיל את העלות. הפתרון הוא ארכיטקטוני, לא ייצוא גיבורי של קבצי CSV. יש רק שלוש גישות סבירות: Bronze / Staging — טעינה של נתונים חיצוניים פעם אחת ל-Delta (באופן incremental במידת האפשר). כל השאר מפנים אליהם, ללא טעינה מחדש. Silver / Transform — ריכוז הלוגיקה העסקית ואיכות הנתונים. בניית ישויות מחושבות, אכיפת סמנטיקה, ושרשור flows ל-bronze לקבלת lineage נקי. Gold / Serve — חשיפת טבלאות Delta מאורגנות לצרכנים (מודלים סמנטיים Direct Lake, טבלאות משותפות). ללא רענוני import, ללא כפילות, עם השהיה נמוכה. הבחירה מבוססת על עלות, ממשל ומהירות. צוותים קטנים: bronze + silver דל. ארגונים גדולים: bronze/silver/gold מלא עם ריכוז מרכזי…