스마트 에이전트가 어리석은 행동을 하지 않도록 막는 단 하나의 검증입니다.똑똑한 것을 유능한 것으로 바꿔주는 관문, 바로 실행 전 계약 검사입니다.도구가 실행되기 전에 검증기는 세 가지 사항을 순서대로 확인합니다.위도가 실제 기능과 일치하는지, 호출자에게 현재 권한이 있는지,요청된 결과가 선언된 데이터 범위 내에서 실행 가능한지 확인합니다.어느 하나라도 실패하면 아무것도 실행되지 않습니다.주의를 기울이거나 어떻게든 시도하는 일은 없습니다.이유와 대안을 제시하며 거부합니다.기능 일치부터 시작합니다.계획에 시어포인트 목록 항목 업데이트라고 적혀있습니다.검증기는 어떤 도구, 어떤 메서드, 어떤 스키마 버전을 사용하는지 묻습니다.인수는 레지스트리와 대조하여 검사하며, 필수 필드 존재 여부, 유형의 정확성, 가펌의 타당성을 확인합니다.물론 무시당하기를 바라며 몰래 끼워 넣은 추가 필드는 허용되지 않습니다.도구 별칭 사용은 금지됩니다.표준 이름을 사용하지 않으면 거부됩니다.이는 도구가 오작동하기 전에 환각된 도구와 추측성 매개 변수를 차단합니다.다음은 정책 준수입니다.정책 엔진은 활성 정책, 도구 및 도메인 허용 목록,클레임 및 범위에 따른 RBAC 또는 ABAC 검사, 환경계층 규칙, 데이터 분류 경계를 기준으로 제한된 호출을 평가합니다.에이전트가 특정 사이트의 읽기 전용 파일로 제한된 경우,업데이트 호출이나 다른 사이트에 대한 접근은 절대 허용되지 않습니다.데이터 페이로드가 사람의 확인 없이 제한된 분류 항목을 건드리는 경우도 마찬가지입니다.토큰은 실시간으로 검증되고, 범위는 정확하게 확인되며,이번 한 번만 시계 권한 상승은 보안 침해 시도로 간주됩니다.그 다음은 사후 조건의 실행 가능성입니다.결과를 원하는 것만으로는 충분하지 않습니다.발성 가능하고 검증 가능해야 합니다.검증기는 목적지가 몇 등성키를 지원하는가? 라고 묻습니다. 시스템이 나중에 확인할 수 있는 고유식 별자 나이 태그를 생성하는가?다운스트림 실패 시 보상 조치가 있는가?계획이 검증 가능한 사후 조건을 생성할 수 없다면 거부되거나 다시 작성됩니다.믿고 맡겨주세요. 나중에 기록할게요. 라는 말은 받아들여지지 않습니다.나중에 하려다 사고가 발생하기 때문입니다.이들을 종합하면 3중 관문인 기능 일치, 정책 준수,사후 조건 실행 가능성이 완성됩니다.세 가지를 모두 통과해야 실행기가 진행합니다.하나라도 실패하면 이유와 함께 거부 경로가 활성화됩니다.그 경로는 정중하고 철저하며 명확합니다.귀하가 시도한 내용은 이렇습니다.귀하가 위반한 정책 이나 스키마는 바로 이것입니다.여기 안전한 대안들이 있습니다.사용자의 의도를 수정할 수 있다면,범위를 좁히거나 읽기 전용 요약으로 전환하고 허용된 사이트로 경로를 변경합니다.검증기는 준수 가능한 계획을 제한하고 수인을 요청합니다.수정이 불가능하다면 전체 맥락과 함께 담당자에게 수인을 요청하거나 즉시 중단합니다.설명 없는 지연은 없습니다.조용한 성공도 없습니다.여러분도 이미 경험했을지도 모르는 아주 짧은 이야기입니다.에이전트가 지난 분기에 모든 인사 문서를 요약하여 법무팀에 이메일로 보내라는 요청을 받습니다.검색 단계에서 인사 및 법무 사이트 전반에 걸친 그래프 커리를 제한합니다.검증기가 경계 교차를 감지합니다.인사팀 정보는 제한되어 있습니다.법무팀 정보는 내부용입니다.트리오 게이트가 교차 읽기 및 외부 이메일 발송을 차단합니다.거부 경로가 반환됩니다.제한된 콘텐츠가 감지되었습니다.대안으로 내부 정책 세균을 요약하고 인사 문서 요약을 승인된 검토자에게 요청할 수 있는 링크를 제공합니다.사용자가 규정을 준수하는 계획을 승인합니다.실행기가 이를 수행하고 내부 콘텐츠를 인용하며 인사 자료에 대한 권한 요청을 참고합니다.유출도 문제도 없으며 여전히 유용합니다. 구현은 설계 상따분할 정도로 단순합니다.정책 DSL 이누가 무엇을 어디서 어떤 부작용과 함께 수행할 수 있는지 정의합니다.스키마 레지스트리가 도구 계약, 이름, 버전, 인자 형태 및 사후 조건을 저장합니다.허용 목록 해석기가 도메인, 사이트, 범위를 환경계층에 맵핑합니다.검증기가 이들을 구성하고 감사 기록, 입력합, 정책 평가, 결과와 함께 모든 결정에 도장을 찍은 뒤실행기에게 녹색 신호 나수정 계획을 전달합니다.실행기는 절대 빨간 신호를 무시하고 임의로 행동하지 않습니다.결정을 강제하거나 작업을 중단합니다.이 멘탈 모델은 아키텍처 다이어그램의 이마에 문신을 새겨도 될 만큼 깔끔합니다.실행기는 강제하고 그래프는 제약하며 검증기는 결정합니다.바로 그 순서대로입니다.모델은 울타리 안에서만 제안하며 울타리를 넘으려는 순간 검증기가 이를 당겨 제지하고이유를 설명하며 출입문을 가리킵니다.질서는 유지되고 안전은 강화되며 정책 범위 내에서 진척은 가로막히지 않습니다.똑똑한 에이전트가 멍청한 짓을 하지 않게 막아줄 무언가를 원하셨죠.바로 이것입니다.실제 환경을 변경하기 전에 역량, 권한, 검증 가능한 결과를 확인하는 사전 실행 계약 검사입니다.할 수 있다고 생각한다를 할 권한이 있고 방법을 알며 수행했음을 증명할 수 있다로 바꿉니다.따분함은 미처 생각하지 못했네요.이제 아키텍처를 가져두니 활용하세요.핵심 요점 그리고 시티 콜 투 액션입니다.핵심 요점 프롬프트는 의견이고 실행기와 검증된 그래프는 연산이며사전 실행 계약 검사느니 둘을 정직하게 유지하는 안전장치입니다.이 내용이 시간을 아껴주었다면 빚을 갚으세요.구독하세요.다음으로 랭그라프와 마이크로소프트 에이전트 프레임워크를 성능, 관측 가능성, 실제 추적, 비용 및 P95 지표 측면에서 비교 분석한 영상을 시청하세요.업그레이드 경로를 확보하고 알림 설정을 팔로우하여 다음 에피소드를 제때 확인하세요. 계속 진행합니다.대부분의 사람들은 더 나은 프롬프트가 불안정한 에이전트를 고칠 것이라 생각합니다.귀여운 이론이군요.프롬프트는 생각을 안내할 뿐입니다.프롬프트가 직접 연산을 실행하지는 않습니다.진실은 신뢰성이 실행기와 그래프 검증에서 나온다는 것입니다.현실과 마주했을 때 에이전트가 무너지지 않게 지탱해주는 척추와 같습니다.이 모든 것을 마이크로소프트 시나리오, 마이크로소프트 365 그래프 검색, 에이저 오픈하이 추론, 그리고 통제를 벗어나지 않는 코파일럿 스튜디오 에이전트에 연결해보겠습니다.핵심은 단순합니다.정확성, 지연시간, 비용, 그리고 감사 가능성입니다.느낌이 아닌 측정 가능한 지표여야 합니다.머릿속으로 그려볼 수 있는 멘탈 모델과 이 티지안을 언어적 도표, 그리고 똑똑한 에이전트가 멍청한 짓을 하지 않게 막아줄 검증 단계 하나를 알려드리겠습니다.첫날부터 사용했어야 할 아키텍처를 소개합니다.프롬프트가 작업실행기 익스커터에서 실패하는 이유를 알아보겠습니다.자, 본론으로 들어가죠. LLM은 인지능력을 담당합니다.실행기는 작업을 처리합니다.이 둘을 섞으면 혼란이 발생합니다.모델은 계획을 제한할 수 있습니다.하지만 이메일이 전송되었는지, 파일이 저장되었는지, 권한이 존재하는지는 보장할 수 없습니다.모델은 확률로 말하지만, 작업은 확답을 요구합니다.이제 실행기가 등장할 자례입니다.실행기를 이 방위 어른으로 생각하세요.상태 제약 조건과 멱등성을 가진 정책 기반의 함수 실행기입니다.실행기는 작업이 성공했다고 믿지 않고, 직접 확인합니다.도구가 존재한다고 가정하지 않습니다.시도조차 하기 전에 기능, 매개 변수, 권한을 검증합니다.그리고 실패할 경우 확실하게 오류를 알리고, 유형을 분류한 뒤 정해진 복구 경로를 따릅니다.프롬프트만 사용하는 대부분의 에이전트는 세 가지 실패 유형을 보입니다.첫째, 환각된 도구입니다. 모델이 등록되지 않은 함수를 요청하거나, 존재하지 않는 필드로 함수를 호출합니다.둘째, 누락된 전제조건입니다.사이트, 목록 또는 항목 버전에 액세스할 수 있는지 확인하지 않고,셰어포인트 파일을 편집하려고 합니다.셋째, 조용한 부분 실패입니다. 2단계가 실패했지만 에이전트는 계속 진행하며, 텍스트가 자신감 있어 보인다는 이유로 성공을 선언합니다.여러분도 보셨을 겁니다.여러분은 그걸 불안정하다고 불렀죠.실행기는 지루해 보이는 루프를 실행하는데, 바로 그 점이 효과적인 이유입니다.전제조건, 입력값, 권한, 불변성을 확인합니다.작업, 멱등성 키와 함께 도구를 호출하여,재시도 시 중복결제나 중복개시가 발생하지 않도록 합니다.사후조건, 진실의 원천, 소스 오브 트루스, 을 기준으로 결과를 확인합니다.오류 분류, 유효성 문제인가요?일시적인가요?속도 제한인가요?미숙함 때문인가요?아니면 정책 위반인가요?복구, 일시적 오류면 대기 후 재시도하고,인증 문제 면제 인증을 요청하며,알려진 대체 수단이 있다면 사용하고,정책 위반 시에는 이유를 밝히며 확실히 중단합니다.멱등성은 타협할 수 없는 원칙입니다.작업을 재시도할 수 있다면,두번째 시도가 아무런 영향도 주지 않거나,일관된 덮어쓰기가 되도록 하는 키가 필요합니다.시간 초바 설정은 좀비 호출을 방지합니다.대기 전략, 배고프, 은속도 제한을 준수합니다.이는 본질적으로 확률적인 텍스트 생성을 제어하는 결정론적 행동입니다.실행기는 기어박스이고, LLM은 엔진입니다.엔진을 끝까지 밟으면 서바퀴가 알아서 이해하기를 바랄 수는 없습니다.계약 우선, 컨트랙트 퍼스트,출력은 최선을 다한다는 식의 모호한 문단에 대한 해독제입니다.추론 모델이 횡설수설하게 두어서는 안됩니다.이것은 도구 이름, 인수,예상되는 사후 조건을 포함하는 스키마와 일치하는 JSON을 생성합니다.검증기는 실행 전에 스키마 준수 여부를 확인합니다. 형식이 잘못되면 실행기는 이유를 들어 거부하거나,수정된 계획을 요청하거나,상급자에게 보고합니다.그렇게 함으로써 엉성한 결과물이 운영상의 사고로 이어지는 것을 방지합니다.이제 여러분은 모델에게 스스로 확인하라고 지시하면 되지 않을까?라고 생각할지 모릅니다.물어볼 수는 있습니다.모델은 그렇다고 대답할 겁니다.항상 그렇게 답하죠.일반 사용자는 그걸로 만족합니다.전문가는 증거를 요구합니다.증거는 마이크로소프트 그래프,시어포인트,익스체인지 같은 시스템에서 검증된 사후 조건에 있습니다.모델의 기억이 아닌 실제 진실의 원천이죠.하지만 여기서부터가 흥미로워집니다.반일 단계는 괜찮습니다.실제 워크플로우에는 분기,병렬 처리,보상 조치,인간의 확인 단계가 필요합니다.실행기만으로는 부족합니다.실행기가 읽을 수 있는 지도가 필요합니다.그것이 바로 워크플로우 그래프입니다.그래프에서 노드는 명시적 계약을 가진 작업이나 하위 에이전트입니다.엣지는 제어 흐름과 데이터 흐름을 정의합니다.상태는 최우선 순위입니다.무엇이 지속되는가?무엇이 체크포인트로 저장되는가?무엇이 일시적인가?실행기는 각 엣지에서 허용 목록과 스키마를 준수하며결정론적으로 그래프를 따라 이동합니다.노드가 실패하면 그래프는 보상,취소,복구 또는 상급자 보고를 명시합니다.알 수 없는 파이프라인은 없습니다.그러고 나서 마법처럼 해결된다는 식은 없습니다.이 순간 신뢰성이 달라집니다. LLM 이 제안하고,실행기가 집행하며,그래프가 제약하고,검증이 결정합니다. 멈추고 정해진 대로 작동하기 시작합니다.물론 여전히 똑똑하게 느껴지겠지만,이제는 감독하에 있게 됩니다.청사진 준비 완료.여러분의 테넌트를 엉망으로 만들지 않으면,서마이크로소프트 365와 연결해보겠습니다.그래프 워크플로우 입문,노드,엣지,그리고 유출되지 않는 상태 관리.이 상황을 상상해보세요.신뢰할 수 있는 실행기는 있지만,지도가 없는 상황입니다.명령은 따르겠지만,어디로 가야 할까요?이제 워크플로우 그래프,즉 운영 매뉴얼이 등장할 자례입니다.노드는 명시적 계약을 가진 작업이나 하위 에이전트입니다.엣지는 제어 흐름과 데이터 흐름을 정의합니다.그래프는 무엇이 언제 실행될지,어떤 데이터가 경계를 넘을 수 있는지를 암호화합니다.즉흥적 인연주나 재즈는 없습니다.이것은 악보입니다.형태부터 시작하세요.대부분의 운영 그래프는 대그,방향성 비순환 그래프입니다.순환 구조는 무한 루프와 상태 오염을 초래하기 때문입니다.루프를 사용할 수는 있지만,카운터,가드,최대 반복 횟수,종료 조건,타임아웃을 사용해 위도적으로 표시해야 합니다.그것이 바로 더 깊게 생각하기,가,영원히 생각하기,가되지 않도록 하는 방법입니다.조건부 라우팅은 명시적입니다.검색 신뢰도가 인계값을 넘으면 합성 단계로 분기합니다.그렇지 않으면 재질의 단계로 분기합니다.병렬 처리는 매우 중요하게 다뤄집니다.요약과 인용 추출을 동시에 실행한 다음,두 작업 모두 사후 조건을 충족했는지 확인하는베리어 노드에서 결합하세요.상태는 막연한 분위기가 아니라 장부입니다.지속 상태,즉 충돌 후 복구 가능한 연구 체크 포인트,입력합, 결정사항,서명된 동작 등 3가지 유형을 유지하세요.일시적 상태는 장기 메모리를 오염시키고 싶지 않은중간 모델 출력물과 같은 단기 버퍼입니다.파생 상태는 인베딩이나 필터링된 결과처럼결정론적으로 재구축할 수 있는계산 가능한 아티팩트입니다.원칙은 간단합니다. 감사 시 증명할 수 있는 것만 저장하세요.그 외 모든 것은 위도적으로 일회용이어야 합니다.롤백 전략은 중요합니다.노드가 외부 세계를 변경하거나캘린더 이벤트를 생성하거나목록 항목을 업데이트할 때반대 동작이 존재하면 이를 기록하고그렇지 않으면 보상 계획을 기록합니다.하위 노드에서 치명적인 오류가 발생하면그래프는 해당 보상 조치를 역순으로 수행할 수 있습니다.아니요, 이건 과도한 조치가 아닙니다.어, CEO 일정을 이중 예약했네.아, 어, 고칠 방법이 없네.로 번지는 것을 방지하는 방법입니다.엣지, 엣지는 계약을 담고 있습니다.엣지는 미지의 파이프가 아니라노드 간의 API입니다.입출력 스키마, 타입, 필수 필드,허용 값을 정의하세요.다음 노드가 호출할 수 있는 도구나 도메인에 대한 허용 목록을 정의하세요.수신 노드가 수행을 약속하고거부할 내용을 나타내는 기능 태그를 정의하세요.실행 엔지는 런타임에 이를 강제합니다.노드가 요약 엣지를 통해시어포인트 토큰을 몰래 전송할 수는 없습니다.이는 보안을 위한 보여주기가 아니라에이전트 스스로에 의한 측면 이동을 방지하는 방법입니다.오류 처리는 막연한 감이 아닌그래프 내에 존재해야 합니다.모든 노드는 검증 오류,일시적 인프라 오류,속도 제한,인증,권한 부여,정책 위반,알 수 없는 오류와 같은 오류 분류를 선언해야 합니다.각 분류에 대해 그래프는 경로를 제공합니다.일시적 오류는 지수 105% 재시도하고,인증 오류는 토큰 갱신,속도 제한은 대체 도구 사용,정책 위반은 사유와 함께 거부합니다.알 수 없는 오류를 위한 데드레터 Q가 존재합니다.실패한 페이로드는 전체 컨텍스트와 함께 격리되어,사람이 프로덕션 환경에 혼란을 재현하지 않고검토할 수 있도록 합니다.휴먼 인 더 룩,체크 포인트는 임시 슬랙 메시지가 아니라노드여야 합니다.이 노드는 실행을 일시 중지하고,제한된 작업과 근거를 제시하며,기록되고 서명된 승인이나 수정을 요구합니다. 승인되면 실행이 재개됩니다.거부되면 그래프는 안전한 대체 경로로 이동합니다.축하합니다.개발자들이 이메일보다 빠르기 때문에기꺼이 따를 변경 제어 시스템을 구현하셨습니다.메모리 격리는 파협할 수 없습니다.각 세션은 해당 세션에 필요한 문서,토큰,중간 결과만 포함된 범위가 지정된 컨텍스트를 받습니다.한 대화의 프롬프트 인젝션이다른 대화로 번지는 세션 간 오염은 실수로데이터가 유출되는 원인이 됩니다.그래프가 이러한 경계를 강제합니다.공유 가변 메모리는 없습니다.콘텐츠 필터와 스키마 검증기가 있는검증된 저장소에서의 승인된 읽기만 가능합니다.인베딩과 요약은 캐싱할 수 있지만,출처와 권한을 태그로 지정하고정책 변경 시 삭제해야 합니다.가시성은 나중에 추가하는 것이 아니라내장되어야 합니다.노드 수준의 추적은 입력, 출력, 지속시간,제시도 및 하료 효과를 보여줍니다.추적을 그래프 실행 아이디로 묶어 재현,진단하고 규정 준수를 증명할 수 있습니다.누가, 무엇을, 언제, 왜 했는가?이상탐지는 이상한 패턴을 포착합니다.갑작스러운 도구 호출 급증,비정상적인 도메인, 토큰 폭주 등이 이에 해당합니다.이는 흥미로운 상황이 사고로 번지기 전이조기경보 시스템입니다.본질적으로 그래프가 곧 헌법입니다.실행엔진은 법 집행기관입니다. LLM은 판사가 아니라 변호사입니다.노드, 엣지, 상태를 이런 식으로 인코딩하면단순히 성공하는 워크플로우만 얻는 것이 아닙니다.안전하게 실패하고, 스스로를 설명하며,예측 가능하게 복구되는 워크플로우를 얻게 됩니다.이제 총사진을 손에 쥐었으니,페넌트를 뷔페로 만들지 않고도마이크로소프트 365에 연결할 수 있습니다.설계부터 안전하게,그래프 검증이 하우스 엔지니어링보다 낮습니다.프로덕션 환경에 혼란을 던져생존자가 탄력적 이기를 바라는 방식으로는신뢰성을 증명할 수 없습니다.안전하지 않은 워크플로우를 실행 전에 거부함으로써신뢰성을 증명하는 것입니다. 그것이 바로 그래프 검증입니다.정적검사는 헛소리를 걸러내고,런타임 가드레일은 위험을 격리합니다.정적검증은 이륙전 점검과 같습니다.비행전 구조를 미리 확인하는 것입니다.무한루프를 만드는 순환은거부되거나 반복 제한 설정을 강제합니다.도달할 수 없는 노드 나죽은 코드는삭제하거나 정당화해야 합니다.계약이 누락된 경우,모든 노드는 입력 및 출력 스키마,필요한 기능, 부작용을 선언해야 합니다.권한 경계, 외부 시스템을 변경하는 노드는최소 권한 자격 증명과명시적 허용 목록이 있는 세그먼트에서 실행되어야 합니다.맞습니다.요약 노드가 갑자기 시어포인트 쓰기 권한을 요청하면검증기는 단호하게 거부합니다.이제 런타임입니다.이 부분에서 사람들이 방심하기 쉽습니다.정책 엔진은 실행 엔진 뒤가 아닌 옆에 위치합니다.도구 및 도메인 허용 목록은문서가 아니라 강제되는 결정사항입니다.호출 시점에 엔진은 활성 주체와아이디 토큰, 범위, 클레임을 확인하고체인을 따라 권한을 올바르게 전파합니다.안목적인 초능력은 없습니다.토큰은 범위가 지정되고 허가시 갱신되며우호적인 경로를 통해 몰래 전달되지 않습니다.에이전트는 모든 호출에서 권한을 확보해야 하며그렇지 않으면 호출할 수 없습니다.입력 및 출력 정제는 선택이 아닌 위생관리입니다.프롬프트 인젝션은 영리한 것이 아니라예측 가능한 위협입니다.모든 인바운드 콘텐츠는 콘텐츠 필터, HTML 및 마크다운 스크러버,그리고 이전 지시 사항을 무시하는명령어 방화벽을 통과합니다.출력은 스키마 검증기를 통과해야 합니다.노드가 JSON을 약속했다면실행기는 서수령 답변을 거부하고수정을 요청합니다.모델은 따질 수 있어도검증기는 협상하지 않습니다.검증기는 타입, 범위, 불변성을 강제합니다.샌드 박신과 세분화는 피해 범위를 제한합니다.외부 코드나 신뢰할 수 없는 커넥터를 호출하는 노드는제약된 환경에서 실행되며속도 제한이 있는 API 게이트웨이,측면 이동을 방지하는 네트워크 정책,검증된 도메인으로만트래픽을 허용하는 송신 제어를 거칩니다. 운영 환경에서 검색 노드가새로운 데이터 소스를 탐색하게 두어서는 안 됩니다.탐색은 개발 환경에서 이루어지며테스트를 거친 후 서명된 업데이트를 통해허용 목록에 추가됩니다.관측 가능성은 단순히 어딘가에 기록하는 것이 아니라수술처럼 정밀해야 합니다.노드 수준 추적은 입력, 출력, 소요시간, 제시도,그리고 정책 엔진의 결정사항을 기록합니다.모든 것을 실행 아이디 하나로 연관지 씁니다.감사 로그는 변경 불가능하며누가, 언제, 어떤 범위로, 어떤 작업을 승인했는지,그리고 정책이 왜 그것을 허용했는지명확히 기록됩니다.규제 기관이 누가 무엇을 했는지 물을 때어깨를 으쓱하는 대신 검색하면 됩니다.규정 준수 준비가 되었다는 것은증거 자료가 지루할 정도로 완벽하다는 뜻입니다.패치 및 제3자 위험은 공급망 문제입니다.그렇게 대우하십시오.위존성 스캔은 모든 빌드마다 실행됩니다.커넥터와 플러그인은 감사 및 버전 고정 과정을 거치며권한 남용 여부를 검토받습니다. mcp나 오픈 api 사양을 가져올 때는선언된 메서드가 기대하는최소 권한 정책과 일치하는지 확인해야 합니다.와일드 카드 엔드 포인트 나 읽기 전용 인척하는숨겨진 쓰기 경로는 허용되지 않습니다.위생 관리는 화려하지 않습니다.하지만 그것이 당신이 편히 잠들 수 있는 이유입니다.진실 그래프 검증은 사고의 여파를 기록하는 대신사고 유형 자체를 방지함으로하우스 엔지니어링보다 뛰어납니다.여전히 장애모드 테스트는 수행하지만이는 보호장치를 설치하지 않아듬을 발견하기 위해서가 아니라보호장치를 확인하기 위해서입니다.이를 다시 정신모델과 연결해봅시다.정적검사는 설계도를 정상적으로 유지합니다.불가능한 경로, 고립된 작업, 권한 유출은 없습니다.런타임 보호장치는 동작을 정상적으로 유지합니다.모든 호출은 인증, 승인, 정화 및 관찰됩니다.실행기는 그래프 제약 조건을 강제하고검증기는 모델을 결정하며모델은 경계 내에서 제한하고 이탈하면 즉시 차단됩니다. 이게 너무 무거운 작업일까요?침해사고를 즐기는 분이 아니라면 그렇지 않습니다.오버헤드는 기계적이고 자동화되어 있습니다.정적검증은 빌드 및 배포 시점에 실행됩니다.런타임 정책은 빠르고 로컬에서 작동하는 사이드카입니다.스키마 검사는 밀리초 단위로 끝납니다.제거되는 비용, 사고, 수동 검토, 수정 작업이 추가되는 마이크로 단위의 지연 시간보다 훨씬 큽니다.그리고 그 성과는 측정 가능합니다.무단 호출이 줄고 토큰 사용이 줄며왜 그랬지? 라는 질문을 던지는 사후 분석도 훨씬 줄어듭니다.평범한 사용자가 놓치는 한 가지 포인트가 더 있습니다.검증은 조합 가능합니다.도구 자체를 신뢰하지 않고도계약과 정책을 강제하는 프록시노드로제3자 도구를 감싸할 수 있습니다.그래프를 민감도, 공개, 내부, 제한 수준으로 분할하고새로운 경계에 대한 유효성 검사를 통과한 경우M1계층 간 워크플로우를 숨겨갈 수 있습니다.그것이 바로 안전하게 확장하는 방법입니다.설계에 의한 보안, 시큐어 바이 디자인, 은구호가 아니라워크플로우의 속성입니다.에이전트가 알아서 잘 행동하기를 바라지 마십시오.부적절한 행동을 구조적으로 어렵게 만들고운영상 눈에 띄게 해야 합니다.가이드라인이 마련되면마이크로소프트 365 그래프와에이저 오픈하이를 연결하는 것은 도박이 아닙니다.원하는 조건에 따라 제어되는 강력한 기능입니다.이제는 화재 진압이 아닌 설계에 대해 이야기할 수 있습니다.마이크로소프트 시나리오, 즉 M365 그래프,에이저 오픈하이, 코파일러 스튜디오의 조합입니다.등장인물을 모아보겠습니다.검색 에이전트는 최소 권한으로마이크로소프트 그래프에서만 정보를 가져오는절제된 사서입니다.추론 에이전트는 계획을 세우고 범위를 설정하며주어진 업무 범위를 절대 벗어나지 않는에이저 오픈하이 모델입니다.실행기는 역등성 및 사후 조건 확인을 통해도구를 실행하는 정책 기반 운영자입니다. 검증기는 스키마, 정책, 경계 집행을 담당하는 문지기입니다.정책가드는 모든 것을 엔트라 아이디 범위 및RBAC와 연결하는 런타임 사이드카입니다.이들은 함께 모여 위협적인 위원회가 아닌 유능한 팀처럼 행동합니다.데이터 액세스는 추측이 아닌 그래프에서 시작됩니다.검색 에이전트는 세분화된 범위를 가진 앱 등록 정보를 보유합니다.파일은 특정 사이트에 대해서만 읽기 권한을 갖습니다.메일은 제한된 사소함에 대해 기본 읽기 권한을 갖습니다.캘린더는 리소스 캘린더에 대해 읽기 권한을 갖습니다.그래프 리드 라이트 올과 같은 무모한 권한은 사용하지 않습니다.커리는 델타 및 선택적 필드를 사용하여 페이로드를 가볍게 유지합니다.페이징은 1급 객체로 다뤄집니다.실행기는 서비스 스로틀링을 준수하며 제한시간과 함께 결정론적으로 다음 링크를 따릅니다.그리고 429 오류가 발생하면 지수적 배고프가 적용됩니다.성급하게 굵지 않고 지수적인 인내심을 발휘합니다.그라운딩, 그라운딩은 분위기가 아니라 파이프라인입니다.그래프 검색 또는 목록 커리를 통해 후보 문서를 검색합니다.항목 아이디와 버전 이태그로 중복을 제거하여 최신 데이터와 오래된 데이터가 섞이지 않게 합니다.위미 론적 경계, 섹션 헤더, 슬라이드 구분 기호 단위로 청킹한 뒤 출처, 드라이브, 사이트, 경로, 항목 아이디, 최종 수정일, 할당된 해시를 참고합니다.추론 에이전트는 청크와 메타 데이터만 확인하며 해당 아이디에 맵핑된 인용문을 출력해야 합니다.인용이 없으면 주장도 없습니다.실행기는 외부 동작을 수행하기 전에 사후 조건으로 이를 강제합니다.오케스트레이션을 위해 코파일러 스튜디오를 도입합니다.선언적 도구, 그래프 커리 팩, 시어포인트 쓰기 작업, 팀 재개시, 아울룩 전송 등을 정의하며각각은 명시적 스키마와 허용 목록을 갖춘 프록시 뒤에 위치합니다.에이전트 간의 조정은 구조화되어 있습니다. 검색 에이전트가 그라운딩 도구를 노출합니다.추론 에이전트가 매개 변수와 함께 이를 요청합니다.실행기가 이를 중재하고 검증한 뒤 그라운딩된 컨텍스트를 반환합니다.사람에 위한 체크포인트가 기본적으로 포함되어 있습니다.제한된 작업 노드는 실행을 일시 중지하고 계획과 인용문을 제시하며 수인을 요구합니다.승인된 내용은 서명되고 기록됩니다.거부된 경우 안전한 대안으로 이동하거나 에스컬레이션 합니다.토큰과 지연 시간은 바라는 것이 아니라 관리하는 것입니다.선택적 컨텍스트란 전체 테넌트가 아닌 관련 청크만 제공하는 것을 의미합니다.요약은 콘텐츠 해시와 권한으로 키가 지정된 인베딩을 통해 미리 계산되고 캐시됩니다.문서가 변경되면 키도 변경되고 캐시를 놓치면 다시 계산합니다.스트리밍 응답은 UI를 활성 상태로 유지하며실행기는 전체 스키마 유효계획이 도착한 후에만 부작용을 처리합니다.조기 종료 조건은 신뢰도와 커버리지가 임계값에 도달하면 추론 루프를 중지합니다.모델이 감상적이라고 해서 추가적인 사고를 하지 않습니다.감사 기능은 기본적으로 내장되어 있습니다.모든 작업은 서비스 주체나 위임된 사용자에 의해 서명되며실행 아이디, 도구, 맥의 변수, 필요한 경우 수정된 내용, 범위, 결과가 찍힙니다.변경 불가능한 로그가 관찰 가능성 스택에 유지됩니다.원하는 것을 선택하세요.따라서 부작용을 다시 실행하지 않고도 실행을 재현할 수 있습니다.누가, 무엇을, 언제, 왜 했는지는 마녀사냥이 아니라 커리가 됩니다.또한 인용문은 그대로 유지되므로 답변이 모델의 환각이 아닌 실제 테넌트 콘텐츠를 추적했는지 확인할 수 있습니다.실패는 일상적이고 지루한 일입니다. 429 오류인가요?실행기는 지터를 사용하여 재시도한 다음, 접이용컬이 나주러든 페이지 크기로 대체합니다.오래된 캐시인가요?검증기가 일치하지 않는 애태그를 감지하여 새로 고침을 강제합니다. 권한 거부인가요?정책가들은 이와 함께 거부하고, 동의 요청 경로를 제한하거나, 정보가 유출되지 않는 수정된 요약으로 라우팅합니다.도구 중단인가요?그래프는 대안을 선언하거나 사람이 해결할 수 있도록 전체 컨텍스트를 담아 데드레터큐의 실행을 보관합니다.결정론적 대체 조치가 사고를 티켓으로 전환합니다.이제 아주 짧은 연습을 해보겠습니다.사용자가 지난 분기 로드맵 결정사항을 링크와 함께 요약해체, 라고 요청합니다.추론 에이전트가 특정 시어포인트 사이트와 팀즈 채널에서 그래프 검색을 사용하고, 지난 분기로 필터링한 후 종합하세요, 라고 제안합니다.검증기가 요청된 범위가 에이전트의 역할과 일치하는지 확인합니다.일치합니다.실행기는 페이징과 필드 선택을 사용하여 그래프 호출을 수행하고, 항목 아이디별로 중복을 제거하고, 청크를 나눈 후 출처와 함께 컨텍스트를 반환합니다.추론 에이전트가 항목 아이디 엠에핑된 인라인 인용문이 포함된 요약을 생성합니다.검증기가 스키마와 인용문을 확인하고 통과시킵니다.요약과 증거가 포함된 사람 확인 지점이 나타납니다.승인자가 확인을 클릭합니다.실행기는 팀즈에 결과를 게시하고, 이해 관계자에게 이메일을 보냅니다.각 작업은 역등성 키를 사용하여 제시도로 인한 중복 게시를 방지합니다.이 절차를 주목하세요.어떤 에이전트도 도구를 마음대로 만들지 않습니다.어떤 노드도 허용 목록밖에 도메인을 넘나들지 않습니다.토큰은 엔트라 아이디를 통해 올바르게 범위가 지정되고 전파되며, 노드 간에 복사붙여 넣기 되지 않습니다.모델은 결코 성공을 단정짓지 않습니다.실행기가 그래프 사후 조건을 통해 성공을 증명합니다.메시지 아이디 생성, 항목의 태그 업데이트, 캘린더 이벤트 아이디 생성 후 실행 완료를 표시합니다.네, 물론 안전하게 확장할 수 있습니다.플래너, 비바 또는 타사 서비스를 mcp나 오픈 api를 통해 도입하되, 반드시 엄격한 스키마와 네트워크 송신 제어를 갖춘 풀옥시 도구 뒤에서 실행해야 합니다. 모든 커넥터를 동일한 유효성 검사 로직과 정책 카드로 감싸십시오.환경 간의 전환 시에는 새로운 경계에 맞는 유효성 검사 과정을 거쳐야 합니다.개발에서 테스트, 운영으로 넘어갈 때 범위 확장은 가정하는 것이 아니라 검토되어야 합니다.이것이 바로 제대로 구현된 마이크로소프트의 아키텍처입니다.진실을 위한 그래플, 사고를 위한 에이저 오픈아이, 오케스트레이션을 위한 코파일러 스튜디오, 운영을 위한 실행기, 익스커터즈, 안전을 위한 검사기 및 정책, 그리고 증명을 위한 관찰 가능성입니다.느낌이 아닌 수치로 증명하십시오.전후 매트릭을 비교하십시오.정확도, 지연시간, 비용, 관리 오버헤드입니다.좋은 아키텍처군요.증명해보십시오.느낌이 아니라 수치가 중요합니다.기준 전부터 잡으십시오.프롬프트만 사용하는 에이전트는 감정 과잉입니다.출처를 조작하고 인용을 잊어버리기 때문에 정확도가 일관되지 않습니다.근거, 그라운딩, 다 없으면 아무 의미 없는 확신에 찬글만 나올 뿐입니다.꼬리 지연시간, 테일 레이튼시, 이치명적입니다.불필요한 컨텍스트로 가득 찬, 길고 연속적인, 더 깊은 생각 호출의 체인입니다.매번 전체 기록과 원본 문서를 고액 연봉의 택배 서비스처럼 모델에 다시 보내기 때문에 비용이 급증합니다.관리 오버헤드는 어떻습니까?높습니다.사건 사고, 핫픽스, 원인 불명의 실패, 그리고 눈을 가리고 고고학을 하는 것 같은 감사 작업이 이어집니다.이제 실행기와 검증된 그래프를 도입한 후의 상태를 살펴보겠습니다.주장에 대한 근거가 필요하기 때문에 정확도가 급상승합니다.그래프 항목 ID, 이 태그, 서명된 해시에 연결된 근거 기반 인용은 출처가 없는 답변이 검사기를 통과할 수 없게 합니다.효과는 즉각적입니다.잘못된 답변이 줄고 재작업 루프가 감소하며 평가세트에서 작업 성공률이 측정 가능할 정도로 향상됩니다.주장을 뒷받침할 수 없는 경우 에이전트는 이유를 밝히며 거부하거나 사람의 쓰인을 요청합니다. 예측 가능하고 검토 가능하며 안전합니다.지연시간은 세 가지 이유로 압축됩니다.첫째, 병렬 처리, 검색, 재순위 지정, 인용 추출이 동시에 실행된 후 베리어 노드에서 동기화됩니다.둘째, 콘텐츠 해시와 권한 범위로 키가 지정된 캐싱, 인베딩 및 요약은 변경되지 않은 내용을 다시 계산하지 않습니다.셋째, 조기 종류입니다.커버리지와 신뢰도가 인계값에 도달하면 그래프가 루프를 멈춥니다.모델이 한 단락을 생각하는 동안 사용자가 포기를 고민하게 만드는 연속 프롬프트 방식과 비교해 보십시오.토큰 규율이 강제되기 때문에 비용이 절감됩니다.스키마 제약 출력이 장황한 설명을 방지합니다.전체 사이트가 아닌 메타데이터가 포함된 관련 청크만 선택적으로 컨텍스트에 제공합니다.더 짧은 프롬프트, 더 작은 응답, 더 적은 제시도, 실행기의 역등성, 이댄포텐시, 과 105프로직은 중복 부출과 낭비되는 주기를 방지합니다.결과적으로 성공적인 결과 당 토큰 수가 줄어들고 편차는 훨씬 작아집니다.재무팀은 편차 감소를 좋아합니다.관찰 가능성이 즉흥적이 아닌 공학적으로 설계되었기 때문에 관리 오버헤드가 줄어듭니다.노드 수준의 추적과 불변 로그가 사고 진단 시간을 대폭 단축합니다.어떤 노드가 실패했는지, 왜 정책 엔진이 거부했는지, 실행기가 다음에 무엇을 시도했는지 확인할 수 있습니다.반복 가능한 배포는 내 컴퓨터에서는 되는데 시계 소모적인 상황을 종식시킵니다.모든 실행에 누가, 무엇을, 언제, 왜 했는지가 담겨 있으므로 규정 준수는 더 이상 계절성 위기가 아닙니다.실제로 실행 가능한 측정 장비를 통해 이를 구체화해봅시다.대표적인 작업, 출처가 포함된 Q&A, 링크가 있는 요약, 승인이 포함된 실행 제한으로 평가 세트를 구축하세요.각 작업에 대해 정의된 정답 또는 승인 기준을 설정하십시오.맵핑된 항목 ID, 출처 범위, 허용된 오차를 바탕으로 팩트를 교정하십시오. SLO, P50 및 P95 엔드2 엔드 지연 시간, 성공한 작업당 토큰 사용량, 정책 거부율을 계측하세요.모든 지표를 추적 정보와 연결하여 회기 발생 시 추적 경로를 확보하십시오.즉흥적으로 구축하지 않고 아키텍처를 따를 때 기대할 수 있는 결과입니다.검증되지 않은 주장은 스테이징을 벗어나지 못함으로 답변의 정확도가 높아집니다.병렬로드와 조기 종료를 통해 긴 대기 시간을 줄임으로 P95 지연 시간이 낮아집니다.소설 같은 긴 글 대신 관련성 높은 정보만 전달함으로 토큰 비용이 절감됩니다.대부분의 실패가 결정론적 대체 경로로 처리되므로 관리자 호출이 줄어듭니다.그리고 네, 모두가 간과하는 지루하지만 중요한 지표가 있습니다. 1차 성공 완료율입니다.사람의 개입 없이 완료되는 실행이 더 많아집니다.비즈니스 측면에서 문제 해결이 빨라지면 사용자가 중복 티켓을 생성하는 일이 줄어듭니다.예측 가능한 지출은 예상치 못한 토큰 비용 부담 없이 예산을 관리할 수 있게 합니다.규정 준수에 대한 확신은 로드맵을 방해하는 감사 주기를 줄여줍니다.눈에 띄지 않는 가장 큰 성과는 평판의 향상입니다.에이전트의 답변이 실제 콘텐츠를 인용하고 링크가 정상 작동하면사람들은 이를 신뢰하고 사용하며 왜 이런 답변이 나왔죠?라는 스크린샷 전달을 멈춥니다.강력히 권고하건대 추적 정보와 지표를 연동하세요.그렇지 않으면 여러분은 그저 짐작으로 비행하는 것입니다.실행을 열어서 어떤 노드가 토큰을 부풀렷 거나 지연을 유발했는지 볼 수 없다면그것은 관찰 가능성이 아니라 타임스탬프가 찍힌 느낌일 뿐입니다.검증기가 멋진 계획과 실제 실행 사이에 위치하는 순간 모든 것이 바뀝니다.정확도는 안정화되고 지연 시간은 줄어들며 비용은 평탄해지고 관리자는 편히 잠들 수 있습니다.이것은 마법이 아닙니다.프롬프트에 잘못 할당했던 작업을 실행기, 그래프, 검증기가 수행하고 있는 것입니다.