スマートエージェントの愚かな失敗 を防ぐ唯一のバリデーション賢さを有能さに変えるたった一つ の門それが実行前契約チェックですツールが動く前にバリデーター は次の3つを順に証明します意図は実際の機能と一致している か呼び出し元に現在権限があるかそして要求された結果がデータ 境界内で実現可能かどれか一つでも失敗すれば何も実行されません 慎重になることもしませんしとりあえず試すこともしません理由と代替 案を添えて拒否するのですまずは機能の一致から始めます計画 にシェアポイントリストアイテムを更新するとある場合バリデーター はどのツールでどのメソッドでどのスキーマバージョンかを確認 します引数はレジストリと称号され必須項目があるか型は正しい か値の範囲は妥当かそして不正な追加フィールドが紛れ込んでいない かを確認しますツールのエイリアス別名は禁止です正規名を使うこと さもなければ拒否されますこれによりハルシネーション幻覚による ツールやパラメータの推測が悪さをする前に断ち切られます次は ポリシー準拠ですポリシーエンジンは提案された呼び出しをアクティブ なポリシーツールやドメインの許可リストイントラIDのクレーム やスコープに紐づくrbacアバック環境総ルールデータ分類の境界 と照らして評価しますエージェントが特定のサイトのファイル読み取り にスコープされている場合更新呼び出しや別のサイトへのアクセス は即座に拒否されますペイロードが人によるチェックなしで制限 対象の分類に触れる場合も同様に拒否されますトークンは最新 かスコープは正確かを確認し今回だけの特権昇格はそれが何である かつまり侵害の試みとして扱われますそしてポストコンディション 事後条件の実現可能性です結果を望むだけでは不十分です達成 可能で検証可能でなければなりませんバリデータは問いかけます送信 先はべき統制キーをサポートしているか後で確認できる永続 的な識別紙やeタグをシステムは出力するかダウンストリーム が失敗した場合の保証アクションはあるか検証可能な事後条件を 生み出せない計画は拒否されるか書き直されます信じてくれ後で ログに残すからという言い訳は認めません後でこそがインシデント を生む原因だからですこれらを合わせると機能の一致ポリシー 準拠事後条件の実現可能性という3つの門になります3つ全てを通過 して始めて実行プログラムが処理を進めます1つでも失敗すれば 理由付きの拒否パスが有効になりますそのパスは丁寧かつ徹底的で 曖昧さがありません実行しようとした内容を示します違反した 正確なポリシーやスキーマを伝えます安全な代替案を提示します ユーザーの意図が修正可能であればスコープを狭め読み取り専用の 概要に切り替え許可されたサイトへルーティングしますバリデーター は準拠した計画を提案し承認を求めます修正できない場合は全て のコンテキストを添えて人間によるチェックへエスカレーション するか即座に停止します原因不明の停止は起こしません何事も なかったかのように成功させることもありませんこれは知らず 知らずのうちに皆さんが経験してきた小さな物語ですエージェント に昨年度の人事関連文書をすべて要約してホーム部門にメールする よう指示が下りますリトリーバルが人事サイトとホームサイトを 跨ぐグラフクエリを提案しますバリデーターが境界線の越境を 検知します人事情報は制限されていますホーム情報は内部限定ですトリオ ゲートがクロス読み取りと外部へのメール送信を遮断します拒否パス が返されます制限されたコンテンツを検出しました代替案として内部 ポリシーのインデックスを要約し人事要約の閲覧権限を持つ担当者 への申請リンクを提供しますユーザーがこのコンプライアンスに準拠 した計画を承認しますエグゼキューターがこれを実行し内部コンテンツ を引用し人事資料の閲覧申請を添付します情報漏洩もなくトラブル もなく有益な結果となります実装は意図的に退屈であるべきです ポリシー dslが誰が何をどこでどのような副作用を伴って実行 できるかを定義しますスキーマレジストリがツールコントラクト名前バージョン 引数形式事後条件を格納します許可リストリゾルバーがドメイン サイトスコープを環境階層にマッピングしますバリデーターがこれらを 統合し全ての決定に監査記録入力ポリシー評価結果を刻印し実行 許可または修正案をエグゼキューターに渡しますエグゼキューター は赤信号を無視して勝手な行動は取りません決定を強制するか あるいは停止しますこのメンタルモデルはアーキテクチャ図の額 に刻めるほど明確ですエグゼキューターが強制しグラフが制約しバリデーター が決定するこの順序ですモデルは策の中でのみ提案を行い乗り 越えようとした瞬間にバリデーターが引き戻し理由を説明してゲート を指し示します秩序は持たれ安全は強化されポリシー内で進歩が阻害 されることはありません賢いエージェントが愚かなことをするのを防ぐ たった一つの方法を求めていましたよねこれこそがそれです実行 前のコントラクトチェックにより現実世界へ変化を及ぼす前に能力 権限そして検証可能な結果を証明しますできると思うを許可があり やり方を知っていて実行を証明できるという状態に変えます難弾 キーネス単調さなどという概念は我々にはありませんでしたこれで アーキテクチャは手に入りましたあとは使うだけです重要なポイント そしてct確信を重要なポイントはプロンプとは意見でありエグゼキューター と検証済グラフは操作であり実行前のコントラクトチェックはその 両方を誠実に保つガードレールであるということですこれが時間 の節約になったなら恩返しをしてくださいチャンネル登録を次は ランググラフとマイクロソフトエージェントフレームワークの 比較分析をご覧くださいパフォーマンス過観測性実際のトレースコスト p95値を取り上げますアップグレード経路を確保し通知をオンにして 次回の配信を確実にお受け取りください実行します多くの人はプロンプト を改善すれば不安定なエージェントが治ると考えています可愛い 理論ですねプロンプトは思考を導くものです操作を実行するわけ ではありません真実は信頼性はエグゼキューターとグラフ検証 から生まれるということです現実と直面したときエージェントが 顔面から転倒しないように支える背骨のようなものですこれを マイクロソフトのシナリオマイクロソフト365グラフ検索アジュール オープンaiの推論そして暴走しないコパイロットスタジオエージェント に組み込んでいきます目的はシンプルです精度0点子コストそして監査 可能性です雰囲気ではなく測定可能なこと頭の中でかけるメンタル モデル忘れられない言葉の図解そして賢いエージェントが愚かな 行動を取るのを防ぐ検証ステップを一つ教えします初日から使う べきだったアーキテクチャを紹介しますなぜプロンプトは運用で 失敗しエグゼキューター実行環境は失敗しないのかさて本題に入り ましょうllmは認識を担いますエグゼキューターは運用を担います これらを混同すると混乱が生まれますモデルは計画を提案 することはできますしかしメールが送信されたかファイルが保存 されたか権限が存在したかを保証することはできませんモデルは 確率で語りますが運用には保証が必要ですそこでエグゼキューター の出番です部屋にいる大人つまり状態制約とべき統制を持ちポリシー に縛られた関数実行プログラムだと考えてくださいアクション が成功したと信じるのではなく確認を行いますツールが存在する ことを前提とはしません試行する前に機能パラメータ権限 を検証しますそして失敗した場合は明確にエラーを分類しあらかじめ 定められた復旧ルートをたどりますプロンプトのみのエージェント のほとんどは3つの失敗モードに陥ります第一にツールが幻覚 ハルシネーションであることモデルが登録されていない関数を要求 したり存在しないフィールドで呼び出したりします第二に前提 条件の欠如サイトリストアイテムのバージョンへのアクセス権を 確認せずにシェアポイントファイルを編集しようとします第三にサイレント な部分的な失敗ステップ2で失敗しているのにエージェントは続行しテキスト の見た目が自信ありげなため成功したと宣言してしまいます皆さん も経験があるはずですそれを単に不安定と呼んでいたことでしょう エグゼキューターは退屈なループを回しますがだからこそ機能する のです前提条件入力権限不変条件を検証するアクション再試行 で二重請求や二重投稿が起きないようべき等キーを指定してツール を呼び出す事後条件信頼できるデータソースと照らし合わせて 結果を確認するエラー分類検証エラーか一時的なものかレート 制限か権限かポリシー違反か復旧一時的なものはバックオフして 再試行認証は再承認基地の代替案があれば切り替えポリシー違反 は理由を添えて停止するべき等性は交渉の余地のない条件ですアクション を再試行できる場合2回目の試行を無効にするか一貫した上書き にするためのキーが必要ですタイムアウトはゾンビ化した呼び出し を防ぎますバックオフはレート制限を尊重しますこれは本質的に確率 論的なテキスト生成を制御するための決定論的な振る舞いです エグゼキューターはギアボックスllmはエンジンですエンジンを全開 にして車輪が理解してくれることを願うような真似はしませんコントラクト 契約先行型の出力こそがベストエフォートな文章に対する特効薬です推論 モデルに勝手なことを喋らせてはいけませんスキーマに適合した ジェイソンを出力しますツール名引数そして期待される事後条件 ですバリデータが実行前にスキーマへの準拠をチェックします 形式が誤っていれば実行エンジンは理由を添えて拒否し修正された 計画を要求するかエスカレーションを行いますこれによって名刺の 羅列が本番環境でのインシデントになるのを防ぐのですさて皆さん はこう思っているかもしれませんモデルに自分で確認するよう指示 すればいいのでは頼むことはできますモデルははいと答える でしょう必ずそうします一般的なユーザーならそれで納得する でしょうしかし専門家には証明が必要です証明はマイクロソフト グラフやシェアポイントエクスチェンジといったシステムで検証された 事後条件の中に存在しますモデルの記憶ではなく真の信頼できる ソースシングル総集オフトルースですしかしここからが興味深い ところです単一ステップなら問題ありません実際のワークフロー には分岐並列処理補正そして人間によるチェックポイントが必要 です実行エンジンだけでは不十分です実行エンジンが読み取れる 地図が必要ですそれがワークフローグラフですグラフではノード は明確な契約を持つタスクやサブエージェントになりますエッジは制御フロー とデータフローを定義します状態は最優先事項です何が永続 化されるのか何がチェックポイントされるのか何が一時的なのか 実行エンジンはグラフを決定論的にたどり各エッジで許可リスト とスキーマを遵守しますノードが失敗した場合グラフは補正取り 消し修復またはエスカレーションを指定します謎のパイプライン は存在しませんあとは魔法のように解決ということもありませんこれ こそが信頼性が逆転する瞬間ですllmが提案し実行エンジン が強制しグラフが制約しバリデータが決定を下します秩序が回復しました 認知とオペレーションを分離すればエージェントは即興をやめ規律 に従うようになります彼らは依然として賢いままですが今や監視下 にありますブループリントの準備は整いましたテナントを混乱させ ずにマイクロソフト365と連携させましょうグラフワークフロー の基礎ノードエッジそして漏えいのない状態管理です想像してみて ください信頼できる実行エンジンはあるのに地図がない状態を 命令には従いますがどこへ向かうのでしょうかそこで登場するの が操作マニュアルであるワークフローグラフですノードは明確な契約 を持つタスクやサブエージェントですエッジは制御フローとデータ フローを定義しますグラフは何をいつ実行しどのデータが境界 を超えて良いかを符号化します即興やジャズのような適当な動き はありませんこれは楽譜なのですまずは形状から始めましょう ほとんどの本番用グラフはダグ有効批准解グラフです循環 は無限ループや状態の破損を招くからですループを組み込むことは 可能ですがカウンターやガード最大反復回数終了条件タイムアウト を使い意図的に定義しますそうすることで深く考えるシンクハーダー を永遠に考えるシンクフォーエバーにさせないのです条件付きルーティング は明示的です検索の信頼度が敷位置を超えていれば合成へ分岐 しますそうでなければサイクエリーへ分岐します並列処理も第一級 の機能として扱われますようやくと引用抽出を並行して実行し両方 の事後条件が満たされたか検証するバリアノードで合流させます 状態とは感覚的なものではなく大腸であるべきです維持すべき 状態には3つの種類があります永続的な状態クラッシュ後に復旧 可能な耐久性のあるチェックポイント入力決定署名済アクションです 一時的な状態とは長期記憶を汚したくない中間モデル出力のような 短命なバッファです派生状態とは埋め込みやフィルタリング された結果のように決定論的に再構築可能な成果物です原則 は単純探査で説明責任を果たせるものだけを永続化することです それ以外は意図的に破棄可能なものとしますロールバック戦略 は重要ですノードが外部世界を変化させカレンダー イベントを作成したりリスト項目を更新したりする場合逆アクション が存在すればそれを記録しなければ補完計画を記録します下流のノード で致命的なエラーが発生した場合グラフはそれらの補完アクション を逆順に実行できますこれはやりすぎではありません ceo の予定を重複させてしまったというミスが修正不可能な事態になる のを防ぐための備えですエッジには契約が伴いますエッジ は未知のパイプではなくノード間のapiです入出力のスキーマガタ 必須フィールド許可される値を定義します次のノードが呼び出せる ツールやドメインを許可リストとして定義します能力タグを定義 し受信側のノードが何を行い何を拒否するかを明示します実行エンジン は実行時にこれらを強制しますノードがようやくエッジを通じて シェアポイントトークンを不正に持ち出すことはできませんこれは セキュリティのパフォーマンスではなくエージェントによるラテラル ムーブメント横展開を防ぐ方法ですエラー処理はグラフ内に存在 すべきであり感覚に頼るべきではありません各ノードは検証エラー 一時的なインフラ障害レート制限認証認可ポリシー違反不明な エラーといったエラー分類を宣言しますクラスごとにグラフは適切な パスを提供します一時的な障害には指数バックオフによるリトライ 認証エラーにはトークン更新レート制限には代替ツールポリシー違反 には理由を添えた拒否を行います不明なエラーのためにデッドレター 9を用意します失敗したペイロードは全コンテキストと共に隔離され 本番環境で混乱を再現させることなく人間が調査できるようにします キューマンインザループのチェックポイントはその場限りのスラック メッセージではなくノードであるべきです実行を一時停止して 提案アクションと証拠を提示し記録署名された承認や修正 を要求します承認されると実行が再開されます拒否された場合 グラフは安全なホールバックへ誘導しますおめでとうございます これでメールよりも迅速であるため開発者が実際に従う変更管理 が実装されましたメモリの分離は交渉の余地のない必須条件です 各セッションには範囲を限定したコンテキストが割り当てられ必要な ドキュメントトークン中間結果のみが提供されますセッション間汚染 つまり一つの会話のプロンプトインジェクションが他に漏れ出す ことはデータ流出を招く原因ですグラフがその境界線を強制します 共有の可変メモリは禁止検証済ストアからの承認された読み取り のみを許可しコンテンツフィルターとスキーマバリデータを通します 埋め込みや要約のキャッシュは可能ですが出自と権限をタグ付け しポリシー変更時には削除する必要があります 可観測性は後付けではなく組み込みであるべきです ノードレベルのトレースで入力出力期間再試行そして後続の影響 を可視化します 異常検知が奇妙なパターンを フラグ立てしますツール呼び出しの急増異常なドメイン トークンの爆発的消費などですこれは興味深い出来事がインシデント に変わる前の早期警戒システムです 本質的にグラフが憲法となります実行エンジンは法執行機関です LLMは助言者であって裁判官ではありません ノードエッジ状態をこのように符号化すれば単にワークフロー が成功するだけではありませんワークフローは安全に失敗し 自らを説明し予測可能な形で復旧できるようになります これで設計図を手にしたのでテナントを無防備にさらすことなく Microsoft 365に接続できます設計によるセキュリティの確保 グラフ検証はカオスエンジニアリングに勝ります 本番環境にカオスを放り込み生き残ったものが強靭であることを願うのが 信頼性の証明ではありません実行前に安全でないワークフロー を拒否することこそが信頼性の証明です それがグラフ検証です静的チェックで無意味な処理を排除 し実行時ガードレールで危険を封じ込めます 静的検証は出発前の事前チェックです 離陸前に構造を確認します無限ループを生むサイクルは拒否 されるか反復ガードの宣言を強制されます 到達不可能なノードやデッドコードは削除か正当化が必要です 契約の欠如は許されず全てのノードは入出力スキーマ必要な機能副作用 を宣言しなければなりません権限境界として外部システムを改変 するノードは最小権限の視覚情報と明示的な許可リストを持つセグメント で実行しますもし要約ノードが突然シェアポイント への書き込み権限を要求すればバリデーターは即座に拒否します 次に実行時についてここで多くの人がずさんになります ポリシーエンジンは実行エンジンの背後ではなく横に配置すべき ですツールやドメインの許可リストは 単なる文書ではなく強制力を持つ決定事項です 呼び出し時エンジンはrbacやabacをアクティブなプリンシパルidトークン スコープクレームに対して検証しチェーン全体に適切に伝播させ ます周囲に野放しのスーパーパワー を持たせないことトークンはスコープを制限し許可 された場合のみ更新し信頼できる経路であっても決して横流ししませんエージェントは呼び出しごとに アクセス権を獲得しなければ呼び出しは行えません 入出力のサニタイズは必須の衛生管理でありオプションではありませんプロンプとインジェクションは 巧妙ではなく予測可能な攻撃です全ての受信コンテンツはコンテンツフィルターhtmlマークダウンスクラバーおよび 以前の指示を無視せよといった無意味な命令を防ぐファイアウォール を通過します出力はスキーマバリデーターを通過 しますノードがジェイソンを約束したなら エグゼキューターは文章を拒否し修正を要求します モデルは議論しますがバリデーターは交渉しません それは型範囲そして普遍条件を強制します サンドボックス化とセグメンテーションが被害範囲を封じ込めます 外部コードや信頼できないコネクタを呼び出すノードは制限された 環境レート制限付きのAPIゲートウェイラテラルムーブメントを防止する ネットワークポリシーそして精査されたドメインへの通信のみを 許可する出口制御下で実行されます本番環境で検索ノードに新しい データソースを発見させてはいけません発見は開発環境で行いテストの 裏側で許可リストへの署名付き更新を通じて行われます オブザーバビリティとは単にログを取ることではなく下下手術 のような精密さですノードレベルのトレーシングは 入力出力所要時間リトライそしてポリシーエンジンによる判断を 記録しますすべてをrunidの下で送還させます 監査ログは普遍で規則が明確でありどのプリンシパルがどのスコープ でいつどの操作を許可しなぜそのポリシーがそれを許可したのかを 記録します規制当局に誰が何をしたのかと 問われたとき肩をすくめるのではなく検索するのです コンプライアンス対応とはエビデンスが退屈で完全に揃っている 状態を指しますパッチやサードパーティのリスク はサプライチェーンの問題ですそれ相応の扱いをしてください 依存関係のスキャンはビルドの度に実行します コネクタやプラグインは監査しバージョンを固定し権限の肥大化 がないかレビューしますmcpやopenapiの使用をインポート する場合は宣言されたメソッドが期待する最小権限ポリシーと 一致しているかを確認しますワイルドカードのエンドポイント や読み取りを装った隠れた書き込みパスは禁止です 衛生管理は華やかではありませんしかしそれこそがあなたが安心 して眠れる理由です真実グラフのバリデーションは インシデントの発生後に記録するのではなくインシデントの クラス自体を未然に防ぐためカオスエンジニアリングよりも 優れています障害モードのテストは必要ですが それはガードレールがインストールし忘れられていたことを発見する ためではなくガードレールが機能することを確認するために行う ものですこれをメンタルモデルに繋ぎ合わせ ましょう静的チェックが設計図の健全性 を保ちます不可能なパス 孤立した処理 権限の漏洩を排除しますランタイムのガードレールが挙動 の健全性を保ちますすべての呼び出しは認証 認可 サニタイズされ監視されますエグゼキューターがグラフの制約 を強制しバリデーターがモデルを判断します モデルは境界内で提案を行い逸脱すれば抑制されます これは重すぎませんか侵害を好むのであればそうかもしれませんそのオーバーヘッドは機械的で 自動化されています静的バリデーションはビルド時 とデプロイ時に実行されますランタイムポリシーはサイドカー として動作し高速かつローカルで完結します スキーマチェックはミリ秒単位です 削減できるコストつまりインシデント手動レビュー後付修正のコスト は追加されるわずかな遅延を遥かに凌駕します そしてその成果は測定可能です不正な呼び出しやトークンの減少 そしてなぜこうなったのかを問う事後検証の回数は劇的に減ります平均的なユーザーが見落としている 点がもう一つありますバリデーションは構成可能です サードパーティのツールをプロ機種ノードでラップしツール自体を 信頼することなく契約とポリシーを強制することができます グラフを公開内部制限付きといった機密レベルでセグメント 化し新しい境界の検証を通過したワークフローのみをティア 間で昇格させることができますそれが安全に拡張する方法です 設計によるセキュリティはスローガンではなくワークフロー の特性です エージェントの動作を期待するのではなく構造的に不正動作 を困難にし運用上で可視化するのです レールが敷かれていればマイクロソフト365グラフとアジュールオープンai の導入はギャンブルではありませんそれはあなたの条件に基づいた 制御可能な力ですこれで否消しではなく配線の話が できるようになりますマイクロソフトのシナリオm365 グラフアジュールオープンaiそしてコパイロットスタジオの 組み合わせですキャストを集めましょう 検索エージェントマイクロソフトグラフから最小特権のみで情報 を取得する規律ある司書です推論エージェント計画を立て引用 を行い任務の範囲外を勝手に実行しないアジュールオープンaiモデル です実行エージェントべき当制と事後 条件チェックを伴いツールを動かすポリシーに縛られたオペレーター ですバリデータ万人でありスキーマ ポリシー協会の強制執行役ですポリシーガードすべてをエントラー アイディスコープとrbacに結びつけるランタイムのサイドカーです彼らは一丸となって脅威となる 委員会ではなく有能なチームとして機能しますデータアクセスは推測ではなく グラフから始まります検索エージェントは流度の細かい スコープを持つアプリ登録を保持しますファイルは特定のサイトに対して 読み取りを行いますメールは限定されたメールボックス に対して基本の読み取りを行いますカレンダーはリソースカレンダー に対して読み取りを行いますグラフのすべて読み書きのような無茶はしませんクエリはデルタと選択フィールド を使用しペイロードを軽量に保ちますページングは最優先事項です実行エージェントはタイムアウト を設けて決定論的に次リンクをたどりサービスの制限を遵守します429エラーが発生した際は数学的な バックオフを行います感情的な反応はなく指数関数的な 認体のみですグラウンディングは雰囲気ではなく パイプラインですグラフ検索やリストクエリを介して 候補ドキュメントを検索しますアイテムidとバージョンeタグで 重複排除し古い情報と最新情報が混ざらないようにしますセマンティックな境界セクションヘッダー スライド区切りでチャンク化し出書ドライブサイトパスアイテムid最終 更新割り当てられたハッシュを付与します推論エージェントはチャンクと メタデータのみを参照しそれらのidにマッピングされた引用を出力 することが求められます引用なしの主張は認められません実行エージェントは外部へのアクション の前に事後条件としてそれを強制しますオーケストレーションにはコパイロット スタジオを導入します宣言型ツールグラフクエリパックシェアポイント 書き込みアクションチーム投稿アウトルック送信を定義しそれぞれ を明確なスキーマと許可リストを持つプロ騎士の背後に配置しますエージェント間の連携は構造化 されています検索エージェントがグラウンディング ツールを公開します推論エージェントがパラメータを 指定してそれを要求します実行エージェントが仲介し検証を 行い根拠のあるコンテキストを返します人間のチェックポイントがネイティブ に組み込まれていますアクション提案ノードが実行を一時 停止し計画と引用を提示して承認を求めます承認は署名されログに記録されます拒否された場合は安全な代替手段 かエスカレーションへとルーティングされますトークンとレイテンシは願うのではなく 管理するものです選択的コンテキストとはテナント 全体ではなく関連するチャンクのみを供給することを意味しますようやくは事前計算されコンテンツ ハッシュと権限でキー付けされた埋め込みと共にキャッシュされますドキュメントを変更しキーを変更 すればキャッシュはミスとなり再計算されますストリーミング応答はUIをアクティブ に保ちエグゼキュータは完全なスキーマ有効プランが到着した後にのみ 副作用を処理します早期終了条件により信頼度とカバレッジ が敷地に達した時点で推論ループが停止しますモデルが私的な気分になったから といって余分な思考は発生しません に応じた墨消しスコープ結果が 記録されます普遍のログは記者のオブザーバビリティ スタック内に存在しますお好きなものをお選びくださいそのため副作用を再実行することなく 実行をリプレイできます誰が何をいつなぜ言ったかは魔女狩り ではなくクエリによって明らかになりますもちろん引用はそのまま残るため 回答がモデルの捏造ではなく実際のテナントコンテンツに基づいている ことを検証できます失敗は正常化されており退屈なものです429エラーですかエグゼキューターは実ターを 伴って再試行しそれでもダメなら低コストのクエリやページサイズ の縮小にホールバックしますキャッシュの期限切れですかバリデーターがETAGの不一致を 検出し更新を強制します権限の拒否ですかポリシーガードが理由と共に拒否 し同意リクエストパスを提案するか漏洩のない墨消しされた 要約へルーティングしますツールの停止ですかグラフは代替手段を宣言するか人間の修正に必要な完全なコンテキスト を添えて実行をデッドレター9に対比させます決定論的なホールバックにより インシデントはチケットへと変換されますでは非常に短いウォークスルー を行いますユーザーが全市販機のロードマップ 決定事項の要約をリンク付きで作成してと依頼します推論エージェントは特定のシェア ポイントサイトとチームチャンネル全体をグラフ検索し全市販機 でフィルタリングし統合すると提案しますバリデーターがリクエストされた スコープがエージェントの役割と一致しているかを確認します一致していますエグゼキュータはページングと フィールド選択を使用してグラフ呼び出しを発行しアイテムIDで 重複排除してチャンク化し出書付きのコンテキストを返します推論エンジンはアイテムIDにマッピング されたインライン引用付きの要約を作成しますバリデーターがスキーマと引用 を確認しパスします要約と証拠を伴う人間のチェック ポイントが表示されます承認者がokをクリックしますエグゼキュータは結果をチームに 投稿し関係者にメールします各アクションはべきトーキー を使用し再施行による二重投稿を防ぎますこの規律に注目してくださいエージェントがツールを勝手に 発明することはありませんどのノードも許可リスト外のドメイン を超えることはありませんトークンはエントラIDを介して 正しくスコープ設定及び電波されノード間でコピー&ペーストされる ことはありませんモデルが成功を自己判断することは ありませんエグゼキュータがグラフの事後条件 によってそれを証明します作成されたメッセージID更新された アイテムeタグカレンダーイベントIDなどを確認し実行完了のスタンプ を押しますはいこれを安全に拡張することは 可能ですプランナーやビバあるいはサード パーティーのサービスをmcpやopenapi経由で導入できますが厳格 なスキーマとネットワーク出口制御を備えたプロキシツール配下 で行う場合に限ります全てのコネクタを同じバリデータ ロジックとポリシーガードでラップしてください環境間での昇格には新しい境界条件 に適合するバリデーションパスが必要です開発環境からテスト本番環境 へと移行する際はスコープ拡大を当然とせず必ずレビューを行って くださいこれこそが適切に構築されたマイクロソフト のアーキテクチャです真実のためのグラフ思考にはazure openaiオーケストレーションにはコパイロット スタジオ操作にはエグゼキューター安全性にはバリデーターとポリシー そして証明には可観測性を使います次は数字です感覚ではありませんビフォーアフターのメトリクス です精度レイテンシコスト管理オーバーヘッド良いアーキテクチャですねそれを証明してください数字で示してください感覚ではなくまずはベースラインからプロンプトのみのエージェント は過剰反応しがちですソースをデッチ上げたり引用 を忘れたりするため精度が安定しませんグラウンディングがなければ根拠のない自信満々な文章 が生成されるだけですテールレイテンシは非常に過酷ですもっと深く考えろという直列 呼び出しが長く続きそれぞれが冗長なコンテキストで肥大化 しますやり取りのたびに完全なトランスクリプト や生のドキュメントをモデルに送るためコストが高額な宅配便のように 膨れ上がります管理オーバーヘッドは非常に高いですインシデント修正パッチ原因不明の失敗そして目隠しをして考古学調査 をするような監査作業が発生します次はエグゼキューターと検証済 グラフを用いた後の状態です主張には根拠が必要となるため精度が飛躍的に向上しますグラフ項目id eタグ署名付きハッシュに紐付いた 根拠ある引用により出所不明な回答はバリデータを 通過できなくなりますその効果は即座に現れます誤った回答の配布や手戻りが減り 評価セットにおけるタスク成功率が確実に向上します主張を裏付けられない場合エージェントは理由を添えて拒否 するか人間の承認を求めます予測可能で検証可能そして安全 です0.4は3つの理由で短縮されます第1に並列処理です取得リランキング引用抽出を並行して実行しバリアノードで同期させます第2にキャッシングですコンテンツハッシュと権限スコープ に基づく埋め込みや要約により変更のない処理を回避します第3に早期終了です網羅性と信頼性が敷地に達した 時点でグラフはループを停止しますモデルがパラグラフ単位で試案 しユーザーが離脱を検討するような直列プロンプト処理とは比較 になりませんトークンの規律が強制されるため コストは抑制されますスキーマ制約付きの出力により脱線 を防ぎます選択的コンテキストによりサイト 全体ではなく関連するチャンクとメタデータのみを供給します短いプロンプト小さなレスポンス そして再試行の減少エグゼキューターのべき統制とバック オフロジックが重複呼び出しや無駄なサイクルを回避します結果として成功あたりのトークン 消費は減り変動も大幅に抑えられます財務部門は変動の低減を好みます可観測性が設計によって組み込 まれているため管理オーバーヘッドは縮小しますノードレベルのトレースと普遍 ログによりインシデントの診断時間は劇的に短縮されますどのノードが失敗しなぜポリシー エンジンが拒否しエグゼキューターが次に何を試みたのかがわかります反復可能なデプロイメントにより 自分の環境では動くという無駄なやり取りを排除します全ての実行に誰が何をいつなぜ が含まれているためコンプライアンスが季節ごとの危機になることは ありません実際に運用可能な測定環境を使って これを具体化してみましょう代表的なタスク 引用付きのQ&A リンク付きの要約承認を伴うアクション提案から なる評価セットを構築しますそれぞれに対して正解となる 回答や合格基準を定義します項目IDにマッピングされた正確な 事実引用のカバレッジ許容される際 を設定しますSLO P50およびP95のエンドツーエンド 零点子成功タスクあたりのトークン消費量 ポリシー拠比率を計測します全てのメトリクスをトレースに紐付け 回帰が発生した際に追跡できるようにしますアーキテクチャを即興ではなく 設計通りに従った場合に期待できる結果です根拠のない主張はステージング 環境から外に出ないため回答の妥当性が向上します長い処理時間は並列ノードと 早期終了によって削減されるためP950.4が低下します長文ではなく関連するスニペット のみを送るためトークン消費量が削減されますほとんどの障害は決定論的な ホールバックで処理されるため管理者へのアラートが減少しますそして誰もが忘れがちな退屈な メトリクスもあります初回パスの完了率つまり人間 の介入なしに完了する実行数が増加しますビジネスへの影響として解決 の迅速化によりユーザーによる重複チケットの企業が減ります予測可能な支出によりトークン 消費による予期せぬ予算超過に悩まされることがなくなりますコンプライアンスの信頼性が高 まれば監査サイクルにロードマップを妨げられることも減ります見落とされがちなメリットは評判 の向上ですエージェントの回答がテナント のコンテンツを引用しリンクが機能すればユーザーは信頼して 利用しなぜこんなことを言ったのかといったスクリーンショットの 転送も止まります直言しますトレースとメトリクスの紐付け を測定しなければ推測で運用しているのと同じです実行内容を開いてどのノード がトークンを膨らませたりレイテンシを停滞させたのかを 確認できなければそれは過観測性ではなく単なるタイムスタンプ付き の雰囲気です優れた計画と実際の実行の間に バリデーターを配置すれば全てが変わります精度は安定しレイテンシは静まり コストは抑えられ管理者は安心して眠れますこれは魔法ではありませんプロンプトに誤って割り当て ていた作業をエグゼキューターグラフ検証がこなしているだけ なのです