M365Con 2027 – כנס אונליין חינמי · 11–22 Jan 2027 · 120 sessions→ m365con.net

בלוג · Mirko Peters

הנחיה קבועה לעומת מומחיות מצבית: שינוי ארכיטקטורת ה-AI שלכם

By ·

ברוכים השבים לנספח הבלוג של הפודקאסט שלנו. בפוסט של היום אנחנו צוללים לעומק מכשול טכני שכמעט כל צוות ארגוני נתקל בו אחרי שהטמיע את גל ה-AI הראשון שלו. בונים סוכן AI מותאם אישית, ובהתחלה זה נראה כמו קסם. הוא מהיר, מדויק מאוד ומגיב היטב. אבל קפצו קדימה שלושה עד שישה חודשים. משהו מוזר קורה. זמני התגובה מתארכים, עלויות התפעול עולות בהדרגה, והסוכן מתחיל להזות או להסיט מההתנהגות שתוכננה לו. הנוהג הרווח

Automatically translated with AI from the original post. Read the English original

Cover: The End of AI Bloat: Why Modern Agents Need Skills

ברוכים השבים לנספח הבלוג של הפודקאסט שלנו. בפוסט של היום אנחנו צוללים לעומק מכשול טכני שכמעט כל צוות ארגוני נתקל בו אחרי שהטמיע את גל ה-AI הראשון שלו. בונים סוכן AI מותאם אישית, ובהתחלה זה נראה כמו קסם. הוא מהיר, מדויק מאוד ומגיב היטב. אבל קפצו קדימה שלושה עד שישה חודשים. משהו מוזר קורה. זמני התגובה מתארכים, עלויות התפעול עולות בהדרגה, והסוכן מתחיל להזות או להסיט מההתנהגות שתוכננה לו. הנוהג הרווח בארגונים רבים הוא להשקיע עוד משאבי חישוב בבעיה או לשדרג למודל שפה גדול יותר. אבל כפי שאנחנו בוחנים לעומק, הבעיה המרכזית אינה המודל עצמו, אלא ארכיטקטורת ההנחיות הבסיסית שלכם.

בפוסט הזה נפרק מדוע הנחיות מונוליתיות מובילות לניוון הקשר הרסני, כיצד להפריד בין התנהגויות ליבה אוניברסליות לבין זרימות עבודה ספציפיות למשימה, ומדוע דפוסי עיצוב מודולריים משנים את נוף ה-AI הארגוני.

מבוא: העלות הנסתרת של הנחיות מונוליתיות

כאשר צוותי הנדסה מאבטיפים לראשונה סוכני AI conversational, הם בדרך כלל נשענים על הנחיית מערכת יחידה ומקיפה. הנחיה זו קובעת מי הסוכן, איך עליו לדבר, אילו כללים עליו לקיים וכיצד לטפל במקרי קצה מורכבים. זו דרך אינטואיטיבית להתחיל. אלא שככל שהעסק מתפתח, כך גם ההנחיה. משאבי אנוש מוסיפים מדיניות חופשה חדשה, הרגולציה מוסיפה תקנות אזוריות, ותמיכת הלקוחות מצרפת תהליכי החזרים כספיים.

עוד מעט והנחיית המערכת שלכם תתנפח לאלפי טוקנים של הוראות צפופות. בכל פעם שמשתמש שואל שאלה פשוטה, כמו בדיקת שעות הפעילות של המשרד, מודל ה-AI נאלץ לקלוט, לעבד ולנמק על כל כלל, מדיניות ומקרה קצה בהנחיית המערכת כולה. למרות שחמישה-תשעים אחוזים מההוראות האלה אינן רלוונטיות בכלל לבדיקת שעות הפעילות, המודל עדיין צריך לנתח אותן. המס הנסתר הזה על החישוב והנימוק הוא מה שאנחנו מכנים **מס ההקשר** (Context Tax), והוא משנה לאורך זמן את מאפייני הביצועים של סוכן ה-AI שלכם מן היסוד.

הבנת מס ההקשר ומדוע סוכנים מתדרדרים עם הזמן

התדרדרות סוכנים בסביבות ייצור צפויה להפליא. היא אינה נובעת מכך שהמודל שכח איך לנמק. היא נובעת מכך שאנחנו מעמיסים על חלון ההקשר הפעיל של המודל רעש קוגניטיבי. כשמאלצים AI לעבור על הרים של תיעוד תהליכי לא קשור בכל אינטראקציה עם משתמש, מתרחשים במקביל כמה דברים:

  • צריכת הטוקנים מזנקת, ומייקרת ישירות את עלויות ההסקה לכל בקשה.
  • זמן ההשהיה של התגובה גדל, משום שהקשרים גדולים דורשים זמן עיבוד רב יותר.
  • הסיכוי להזיות עולה,ככל שהמודל מתקשה לשקלל הוראות סותרות או לא רלוונטיות.
  • עקביות הנימוק יורדת, כי תשומת הלב של המודל מתפצלת בין יותר מדי הנחיות מתחרות.

המערכת לא נעשתה פחות חכמה; פשוט מסלול הנימוק שלה נתקע בנתונים מיותרים. כדי לפתור זאת, עלינו להסתכל מקרוב על האופן שבו אנחנו מפזרים מידע בתוך הארכיטקטורות שלנו.

הנחיה קבועה לעומת מומחיות מצבית

אחת מתפיסות החשיבה החזקות ביותר שאפשר לאמץ בהנדסת AI מודרנית היא הפרדת הוראות המערכת לשתי קטגוריות נפרדות: הנחיה קבועה ומומחיות מצבית.

הנחיה קבועה כוללת את מסגרות ההגנה האוניברסליות ואת סמני הזהות שחייבים לחול על כל אינטראקציה, ללא קשר לכוונת המשתמש. זה כולל:

  • זהות הסוכן, פרסונה וטון דיבור
  • דרישות אבטחה ארגוניות אוניברסליות
  • כללי ציות מרכזיים וגבולות מוחלטים
  • העדפות עיצוב ופלט סטנדרטיות

מומחיות מצבית, לעומת זאת, היא תלויית הקשר לחלוטין. מדובר במידע בעל ערך רק כאשר תרחיש או זרימת עבודה ספציפיים מופעלים. דוגמאות לכך הן פרוטוקולים להטמעת ספקים, כללים לחישוב מס, מדיניות החזרות אזורית, או נהלי תגובה מורכבים לאירועי IT.

בארכיטקטורות מורשת, שתי הקטגוריות נדחסות יחד לפרומפט אחד ענק. בארכיטקטורה מודרנית ומובנית מחדש, נשאר טעון לצמיתות רק המדריך שפועל תמיד. כל השאר ארוז לרכיבים מודולריים שנטענים באופן דינמי.

אנטומיה של Skill: אריזת ידע עבור AI

כדי לבטל את ה-Context Tax, אנחנו צריכים מנגנון שישמור מומחיות מצבית מחוץ לפרומפט הראשי ויטען אותה רק כשצריך. המנגנון הזה הוא ה-AI Skill. Skill אינו רק קטע פרומפט; זוהי חבילה מקיפה וניתנת לשימוש חוזר של הוראות ונכסים ייעודיים למשימה. Skill מתוכנן היטב כולל בדרך כלל:

  • תיאורי הפעלה ברורים שאומרים לאורקסטרטור מתי ה-Skill רלוונטי
  • הוראות תהליכיות מובנות לטיפול במשימה
  • מסמכי עזר, טפסים או תבניות מדיניות
  • סקריפטים או הגדרות API אופציונליים לביצוע פעולות

במרכז החבילה נמצא קובץ התצורה המרכזי, שמובנה לרוב כקובץ SKILL.md. הקובץ הזה מתאר את ההיקף המדויק, המטרה ושלבי הביצוע של תחום הידע הספציפי. על ידי מודולריזציה של הידע בדרך זו, יוצרים יחידות נקיות וקלות לתחזוקה של יכולת ארגונית, שניתן לעדכן באופן עצמאי בלי לסכן את יציבותו של הסוכן המרכזי.

קביעת גבולות היגיון ברורים

מודולריזציה של סוכן ה-AI לפי Skills הנפרדים עושה יותר מסתם חיסכון באסימונים — היא קובעת גבולות היגיון מחמירים. כשמודל מקבל פרומפט מונוליטי, הוא מנסה לפתור כל בעיה דרך העדשה של כל הכללים בו זמנית. כשעובדים עם Skills, מבודדים את תחום ההיגיון.

לדוגמה, כשמשתמש מתחיל תהליך רכש, ה-Skill של הרכש נטען, ומנוע ההיגיון של הסוכן מתמקד כולו במדיניות רכישה, היררכיות אישור והנחיות ספקים. בזמן שה-Skill הזה פעיל, כללים לא קשורים בנוגע לניכויי מס או למדיניות משאבי אנוש נשארים מחוץ לחלון ההקשר הפעיל. הגבול הזה משפר מאוד הן את הדיוק והן את העקביות של הפלט של ה-AI, ומבטיח שהוא יפעל לפי נהלים מיוחדים בלי הפרעה מחלקים אחרים של העסק.

יישום חשיפה הדרגתית ליעילות

איך מנהלים את ה-Skills האלה בלי להעמיס על המערכת? התשובה טמונה בתבנית תכנון הידועה כחשיפה הדרגתית (progressive disclosure). במקום לטעון בזמן ההפעלה כל הוראה וכל תהליך עבודה, הסוכן שומר על קטלוג קל משקל שמכיל רק את שמות ותיאורי ה-Skills הזמינים.

כשמשתמש שולח פרומפט, תהליך העבודה פועל לפי רצף מדויק:

  1. האורקסטרטור מנתח את בקשת המשתמש מול קטלוג ה-Skills הקל משקל.
  2. הוא מזהה את ה-Skill הספציפי הנדרש לטיפול בתרחיש.
  3. המערכת טוענת באופן דינמי את ה-Skill היחיד הזה לתוך חלון ההקשר.
  4. הסוכן מבצע את המשימה בדיוק גבוה.
  5. לאחר סיום המשימה, ה-Skill נפרק, והסוכן חוזר למצב הבסיסי והקל שלו.

תבנית התכנון הזו מפחיתה בצורה דרסטית את דרישות החישוב, מקצרת את זמני ההמתנה ושומרת על עלויות התפעול בשליטה, תוך שהסוכנים שומרים על גישה לידע ארגוני מעמיק ומיוחד.

סיכום: בניית מחדש של ארכיטקטורת ה-AI לעתיד

פרומפטים מונוליתיים שירתו אותנו היטב בימים הראשונים של ניסויי AI generative, אבל פריסות ארגוניות דורשות מדרגיות גבוהה יותר, השהיה נמוכה יותר ואמינות רבה יותר. על ידי הפרדת ההדרכה שפועלת תמיד מהמומחיות המצבית, ואימוץ Skills מודולריים באמצעות חשיפה הדרגתית, אפשר לבטל את ה-Context Tax, למנוע הידרדרות של הסוכנים ולבנות מערכות AI חזקות שמתרחבות בצורה חלקה לצד הארגון.

כדי לשמוע פירוט מלא של דפוסי הארכיטקטורה האלה, יישומים מהעולם האמיתי, ואיך הרעיונות האלה חלים על פלטפורמות כמו Microsoft Copilot Studio, GitHub Copilot ו-Claude Code, כדאי לצפות בפרק הקשור שלנו: The End of AI Bloat: Why Modern Agents Need Skills. האזינו, הירשמו, ושתפו אותנו איך אתם מארגנים את סוכני ה-AI הארגוניים שלכם!

Entities in this article

Agent skill System prompt Context window AI agent Prompt Progressive disclosure

Related articles

RSS