WEBVTT

00:00:00.000 --> 00:00:03.660
스마트 에이전트가 어리석은 행동을 하지 않도록 막는 단 하나의 검증입니다.

00:00:03.820 --> 00:00:07.620
똑똑한 것을 유능한 것으로 바꿔주는 관문, 바로 실행 전 계약 검사입니다.

00:00:07.840 --> 00:00:11.240
도구가 실행되기 전에 검증기는 세 가지 사항을 순서대로 확인합니다.

00:00:11.440 --> 00:00:14.680
위도가 실제 기능과 일치하는지, 호출자에게 현재 권한이 있는지,

00:00:15.040 --> 00:00:18.040
요청된 결과가 선언된 데이터 범위 내에서 실행 가능한지 확인합니다.

00:00:18.240 --> 00:00:20.520
어느 하나라도 실패하면 아무것도 실행되지 않습니다.

00:00:20.720 --> 00:00:22.680
주의를 기울이거나 어떻게든 시도하는 일은 없습니다.

00:00:22.980 --> 00:00:24.520
이유와 대안을 제시하며 거부합니다.

00:00:24.740 --> 00:00:25.920
기능 일치부터 시작합니다.

00:00:25.920 --> 00:00:28.600
계획에 시어포인트 목록 항목 업데이트라고 적혀있습니다.

00:00:28.740 --> 00:00:32.140
검증기는 어떤 도구, 어떤 메서드, 어떤 스키마 버전을 사용하는지 묻습니다.

00:00:32.340 --> 00:00:37.540
인수는 레지스트리와 대조하여 검사하며, 필수 필드 존재 여부, 유형의 정확성, 가펌의 타당성을 확인합니다.

00:00:37.700 --> 00:00:41.280
물론 무시당하기를 바라며 몰래 끼워 넣은 추가 필드는 허용되지 않습니다.

00:00:41.480 --> 00:00:43.100
도구 별칭 사용은 금지됩니다.

00:00:43.320 --> 00:00:45.360
표준 이름을 사용하지 않으면 거부됩니다.

00:00:45.580 --> 00:00:49.380
이는 도구가 오작동하기 전에 환각된 도구와 추측성 매개 변수를 차단합니다.

00:00:49.620 --> 00:00:51.120
다음은 정책 준수입니다.

00:00:51.660 --> 00:00:54.820
정책 엔진은 활성 정책, 도구 및 도메인 허용 목록,

00:00:55.920 --> 00:01:04.120
클레임 및 범위에 따른 RBAC 또는 ABAC 검사, 환경계층 규칙, 데이터 분류 경계를 기준으로 제한된 호출을 평가합니다.

00:01:04.340 --> 00:01:06.860
에이전트가 특정 사이트의 읽기 전용 파일로 제한된 경우,

00:01:07.280 --> 00:01:10.280
업데이트 호출이나 다른 사이트에 대한 접근은 절대 허용되지 않습니다.

00:01:10.440 --> 00:01:15.000
데이터 페이로드가 사람의 확인 없이 제한된 분류 항목을 건드리는 경우도 마찬가지입니다.

00:01:15.180 --> 00:01:18.740
토큰은 실시간으로 검증되고, 범위는 정확하게 확인되며,

00:01:19.160 --> 00:01:22.720
이번 한 번만 시계 권한 상승은 보안 침해 시도로 간주됩니다.

00:01:22.720 --> 00:01:25.020
그 다음은 사후 조건의 실행 가능성입니다.

00:01:25.020 --> 00:01:27.220
결과를 원하는 것만으로는 충분하지 않습니다.

00:01:27.360 --> 00:01:29.300
발성 가능하고 검증 가능해야 합니다.

00:01:29.480 --> 00:01:32.920
검증기는 목적지가 몇 등성키를 지원하는가? 라고 묻습니다.

00:01:33.200 --> 00:01:36.600
시스템이 나중에 확인할 수 있는 고유식 별자 나이 태그를 생성하는가?

00:01:36.740 --> 00:01:38.880
다운스트림 실패 시 보상 조치가 있는가?

00:01:39.060 --> 00:01:42.880
계획이 검증 가능한 사후 조건을 생성할 수 없다면 거부되거나 다시 작성됩니다.

00:01:43.060 --> 00:01:45.660
믿고 맡겨주세요. 나중에 기록할게요. 라는 말은 받아들여지지 않습니다.

00:01:45.860 --> 00:01:47.700
나중에 하려다 사고가 발생하기 때문입니다.

00:01:47.880 --> 00:01:50.440
이들을 종합하면 3중 관문인 기능 일치, 정책 준수,

00:01:50.440 --> 00:01:52.100
사후 조건 실행 가능성이 완성됩니다.

00:01:52.100 --> 00:01:54.440
세 가지를 모두 통과해야 실행기가 진행합니다.

00:01:54.600 --> 00:01:57.340
하나라도 실패하면 이유와 함께 거부 경로가 활성화됩니다.

00:01:57.540 --> 00:01:59.860
그 경로는 정중하고 철저하며 명확합니다.

00:02:00.080 --> 00:02:01.460
귀하가 시도한 내용은 이렇습니다.

00:02:01.700 --> 00:02:03.840
귀하가 위반한 정책 이나 스키마는 바로 이것입니다.

00:02:04.040 --> 00:02:05.340
여기 안전한 대안들이 있습니다.

00:02:05.680 --> 00:02:07.000
사용자의 의도를 수정할 수 있다면,

00:02:07.400 --> 00:02:11.040
범위를 좁히거나 읽기 전용 요약으로 전환하고 허용된 사이트로 경로를 변경합니다.

00:02:11.240 --> 00:02:14.260
검증기는 준수 가능한 계획을 제한하고 수인을 요청합니다.

00:02:14.260 --> 00:02:18.780
수정이 불가능하다면 전체 맥락과 함께 담당자에게 수인을 요청하거나 즉시 중단합니다.

00:02:18.980 --> 00:02:20.220
설명 없는 지연은 없습니다.

00:02:20.580 --> 00:02:21.740
조용한 성공도 없습니다.

00:02:22.140 --> 00:02:25.160
여러분도 이미 경험했을지도 모르는 아주 짧은 이야기입니다.

00:02:25.380 --> 00:02:29.360
에이전트가 지난 분기에 모든 인사 문서를 요약하여 법무팀에 이메일로 보내라는 요청을 받습니다.

00:02:29.580 --> 00:02:32.620
검색 단계에서 인사 및 법무 사이트 전반에 걸친 그래프 커리를 제한합니다.

00:02:32.820 --> 00:02:34.460
검증기가 경계 교차를 감지합니다.

00:02:34.700 --> 00:02:36.080
인사팀 정보는 제한되어 있습니다.

00:02:36.380 --> 00:02:37.780
법무팀 정보는 내부용입니다.

00:02:37.980 --> 00:02:40.580
트리오 게이트가 교차 읽기 및 외부 이메일 발송을 차단합니다.

00:02:40.580 --> 00:02:42.160
거부 경로가 반환됩니다.

00:02:42.360 --> 00:02:44.100
제한된 콘텐츠가 감지되었습니다.

00:02:44.100 --> 00:02:50.020
대안으로 내부 정책 세균을 요약하고 인사 문서 요약을 승인된 검토자에게 요청할 수 있는 링크를 제공합니다.

00:02:50.240 --> 00:02:52.460
사용자가 규정을 준수하는 계획을 승인합니다.

00:02:52.680 --> 00:02:56.880
실행기가 이를 수행하고 내부 콘텐츠를 인용하며 인사 자료에 대한 권한 요청을 참고합니다.

00:02:57.100 --> 00:02:59.020
유출도 문제도 없으며 여전히 유용합니다.

00:02:59.200 --> 00:03:00.980
구현은 설계 상따분할 정도로 단순합니다.

00:03:01.180 --> 00:03:04.800
정책 DSL 이누가 무엇을 어디서 어떤 부작용과 함께 수행할 수 있는지 정의합니다.

00:03:04.800 --> 00:03:09.660
스키마 레지스트리가 도구 계약, 이름, 버전, 인자 형태 및 사후 조건을 저장합니다.

00:03:09.820 --> 00:03:13.940
허용 목록 해석기가 도메인, 사이트, 범위를 환경계층에 맵핑합니다.

00:03:14.160 --> 00:03:19.860
검증기가 이들을 구성하고 감사 기록, 입력합, 정책 평가, 결과와 함께 모든 결정에 도장을 찍은 뒤

00:03:19.860 --> 00:03:22.300
실행기에게 녹색 신호 나수정 계획을 전달합니다.

00:03:22.500 --> 00:03:25.220
실행기는 절대 빨간 신호를 무시하고 임의로 행동하지 않습니다.

00:03:25.400 --> 00:03:27.280
결정을 강제하거나 작업을 중단합니다.

00:03:27.520 --> 00:03:31.060
이 멘탈 모델은 아키텍처 다이어그램의 이마에 문신을 새겨도 될 만큼 깔끔합니다.

00:03:31.060 --> 00:03:34.540
실행기는 강제하고 그래프는 제약하며 검증기는 결정합니다.

00:03:34.660 --> 00:03:35.900
바로 그 순서대로입니다.

00:03:36.100 --> 00:03:40.960
모델은 울타리 안에서만 제안하며 울타리를 넘으려는 순간 검증기가 이를 당겨 제지하고

00:03:40.960 --> 00:03:43.480
이유를 설명하며 출입문을 가리킵니다.

00:03:43.680 --> 00:03:48.260
질서는 유지되고 안전은 강화되며 정책 범위 내에서 진척은 가로막히지 않습니다.

00:03:48.460 --> 00:03:52.340
똑똑한 에이전트가 멍청한 짓을 하지 않게 막아줄 무언가를 원하셨죠.

00:03:52.480 --> 00:03:53.340
바로 이것입니다.

00:03:53.600 --> 00:03:58.920
실제 환경을 변경하기 전에 역량, 권한, 검증 가능한 결과를 확인하는 사전 실행 계약 검사입니다.

00:03:58.920 --> 00:04:03.800
할 수 있다고 생각한다를 할 권한이 있고 방법을 알며 수행했음을 증명할 수 있다로 바꿉니다.

00:04:03.920 --> 00:04:05.940
따분함은 미처 생각하지 못했네요.

00:04:06.220 --> 00:04:08.420
이제 아키텍처를 가져두니 활용하세요.

00:04:08.680 --> 00:04:11.280
핵심 요점 그리고 시티 콜 투 액션입니다.

00:04:11.480 --> 00:04:15.600
핵심 요점 프롬프트는 의견이고 실행기와 검증된 그래프는 연산이며

00:04:15.600 --> 00:04:19.140
사전 실행 계약 검사느니 둘을 정직하게 유지하는 안전장치입니다.

00:04:19.360 --> 00:04:22.180
이 내용이 시간을 아껴주었다면 빚을 갚으세요.

00:04:22.180 --> 00:04:22.940
구독하세요.

00:04:23.180 --> 00:04:31.080
다음으로 랭그라프와 마이크로소프트 에이전트 프레임워크를 성능, 관측 가능성, 실제 추적, 비용 및 P95 지표 측면에서 비교 분석한 영상을 시청하세요.

00:04:31.280 --> 00:04:35.060
업그레이드 경로를 확보하고 알림 설정을 팔로우하여 다음 에피소드를 제때 확인하세요.

00:04:35.240 --> 00:04:36.000
계속 진행합니다.

00:04:36.180 --> 00:04:38.900
대부분의 사람들은 더 나은 프롬프트가 불안정한 에이전트를 고칠 것이라 생각합니다.

00:04:39.060 --> 00:04:39.920
귀여운 이론이군요.

00:04:40.060 --> 00:04:41.420
프롬프트는 생각을 안내할 뿐입니다.

00:04:41.600 --> 00:04:43.360
프롬프트가 직접 연산을 실행하지는 않습니다.

00:04:43.600 --> 00:04:46.340
진실은 신뢰성이 실행기와 그래프 검증에서 나온다는 것입니다.

00:04:46.340 --> 00:04:49.720
현실과 마주했을 때 에이전트가 무너지지 않게 지탱해주는 척추와 같습니다.

00:04:50.020 --> 00:04:57.440
이 모든 것을 마이크로소프트 시나리오, 마이크로소프트 365 그래프 검색, 에이저 오픈하이 추론, 그리고 통제를 벗어나지 않는 코파일럿 스튜디오 에이전트에 연결해보겠습니다.

00:04:57.740 --> 00:04:58.780
핵심은 단순합니다.

00:04:59.000 --> 00:05:02.460
정확성, 지연시간, 비용, 그리고 감사 가능성입니다.

00:05:02.680 --> 00:05:04.900
느낌이 아닌 측정 가능한 지표여야 합니다.

00:05:05.100 --> 00:05:11.940
머릿속으로 그려볼 수 있는 멘탈 모델과 이 티지안을 언어적 도표, 그리고 똑똑한 에이전트가 멍청한 짓을 하지 않게 막아줄 검증 단계 하나를 알려드리겠습니다.

00:05:11.940 --> 00:05:14.740
첫날부터 사용했어야 할 아키텍처를 소개합니다.

00:05:14.900 --> 00:05:18.060
프롬프트가 작업실행기 익스커터에서 실패하는 이유를 알아보겠습니다.

00:05:18.300 --> 00:05:19.720
자, 본론으로 들어가죠.

00:05:19.880 --> 00:05:21.700
LLM은 인지능력을 담당합니다.

00:05:21.920 --> 00:05:23.420
실행기는 작업을 처리합니다.

00:05:23.680 --> 00:05:25.620
이 둘을 섞으면 혼란이 발생합니다.

00:05:25.860 --> 00:05:27.580
모델은 계획을 제한할 수 있습니다.

00:05:27.840 --> 00:05:32.420
하지만 이메일이 전송되었는지, 파일이 저장되었는지, 권한이 존재하는지는 보장할 수 없습니다.

00:05:32.700 --> 00:05:35.380
모델은 확률로 말하지만, 작업은 확답을 요구합니다.

00:05:35.620 --> 00:05:37.240
이제 실행기가 등장할 자례입니다.

00:05:37.520 --> 00:05:39.360
실행기를 이 방위 어른으로 생각하세요.

00:05:39.360 --> 00:05:43.020
상태 제약 조건과 멱등성을 가진 정책 기반의 함수 실행기입니다.

00:05:43.180 --> 00:05:46.380
실행기는 작업이 성공했다고 믿지 않고, 직접 확인합니다.

00:05:46.580 --> 00:05:48.660
도구가 존재한다고 가정하지 않습니다.

00:05:48.920 --> 00:05:52.700
시도조차 하기 전에 기능, 매개 변수, 권한을 검증합니다.

00:05:52.900 --> 00:05:57.840
그리고 실패할 경우 확실하게 오류를 알리고, 유형을 분류한 뒤 정해진 복구 경로를 따릅니다.

00:05:58.040 --> 00:06:01.580
프롬프트만 사용하는 대부분의 에이전트는 세 가지 실패 유형을 보입니다.

00:06:01.780 --> 00:06:03.640
첫째, 환각된 도구입니다.

00:06:03.920 --> 00:06:08.320
모델이 등록되지 않은 함수를 요청하거나, 존재하지 않는 필드로 함수를 호출합니다.

00:06:08.320 --> 00:06:10.600
둘째, 누락된 전제조건입니다.

00:06:10.780 --> 00:06:13.980
사이트, 목록 또는 항목 버전에 액세스할 수 있는지 확인하지 않고,

00:06:14.140 --> 00:06:15.640
셰어포인트 파일을 편집하려고 합니다.

00:06:15.860 --> 00:06:17.400
셋째, 조용한 부분 실패입니다.

00:06:17.580 --> 00:06:21.160
2단계가 실패했지만 에이전트는 계속 진행하며, 텍스트가 자신감 있어 보인다는 이유로 성공을 선언합니다.

00:06:21.320 --> 00:06:22.280
여러분도 보셨을 겁니다.

00:06:22.540 --> 00:06:24.020
여러분은 그걸 불안정하다고 불렀죠.

00:06:24.180 --> 00:06:26.900
실행기는 지루해 보이는 루프를 실행하는데, 바로 그 점이 효과적인 이유입니다.

00:06:27.080 --> 00:06:29.980
전제조건, 입력값, 권한, 불변성을 확인합니다.

00:06:30.180 --> 00:06:32.240
작업, 멱등성 키와 함께 도구를 호출하여,

00:06:32.240 --> 00:06:34.980
재시도 시 중복결제나 중복개시가 발생하지 않도록 합니다.

00:06:35.140 --> 00:06:38.700
사후조건, 진실의 원천, 소스 오브 트루스, 을 기준으로 결과를 확인합니다.

00:06:38.880 --> 00:06:40.460
오류 분류, 유효성 문제인가요?

00:06:40.680 --> 00:06:41.420
일시적인가요?

00:06:41.660 --> 00:06:42.520
속도 제한인가요?

00:06:42.760 --> 00:06:43.740
미숙함 때문인가요?

00:06:44.000 --> 00:06:45.220
아니면 정책 위반인가요?

00:06:45.440 --> 00:06:47.260
복구, 일시적 오류면 대기 후 재시도하고,

00:06:47.620 --> 00:06:48.880
인증 문제 면제 인증을 요청하며,

00:06:49.200 --> 00:06:50.600
알려진 대체 수단이 있다면 사용하고,

00:06:50.940 --> 00:06:52.900
정책 위반 시에는 이유를 밝히며 확실히 중단합니다.

00:06:53.100 --> 00:06:54.880
멱등성은 타협할 수 없는 원칙입니다.

00:06:55.120 --> 00:06:56.020
작업을 재시도할 수 있다면,

00:06:56.020 --> 00:06:57.900
두번째 시도가 아무런 영향도 주지 않거나,

00:06:58.000 --> 00:06:59.840
일관된 덮어쓰기가 되도록 하는 키가 필요합니다.

00:06:59.980 --> 00:07:01.900
시간 초바 설정은 좀비 호출을 방지합니다.

00:07:02.060 --> 00:07:04.360
대기 전략, 배고프, 은속도 제한을 준수합니다.

00:07:04.560 --> 00:07:08.700
이는 본질적으로 확률적인 텍스트 생성을 제어하는 결정론적 행동입니다.

00:07:08.940 --> 00:07:10.280
실행기는 기어박스이고,

00:07:10.680 --> 00:07:11.640
LLM은 엔진입니다.

00:07:11.860 --> 00:07:14.600
엔진을 끝까지 밟으면 서바퀴가 알아서 이해하기를 바랄 수는 없습니다.

00:07:14.860 --> 00:07:15.980
계약 우선, 컨트랙트 퍼스트,

00:07:16.140 --> 00:07:18.240
출력은 최선을 다한다는 식의 모호한 문단에 대한 해독제입니다.

00:07:18.420 --> 00:07:20.360
추론 모델이 횡설수설하게 두어서는 안됩니다.

00:07:20.360 --> 00:07:21.740
이것은 도구 이름, 인수,

00:07:21.980 --> 00:07:24.940
예상되는 사후 조건을 포함하는 스키마와 일치하는 JSON을 생성합니다.

00:07:25.080 --> 00:07:27.560
검증기는 실행 전에 스키마 준수 여부를 확인합니다.

00:07:27.720 --> 00:07:29.580
형식이 잘못되면 실행기는 이유를 들어 거부하거나,

00:07:29.860 --> 00:07:30.820
수정된 계획을 요청하거나,

00:07:31.060 --> 00:07:31.880
상급자에게 보고합니다.

00:07:32.060 --> 00:07:34.760
그렇게 함으로써 엉성한 결과물이 운영상의 사고로 이어지는 것을 방지합니다.

00:07:34.940 --> 00:07:37.140
이제 여러분은 모델에게 스스로 확인하라고 지시하면 되지 않을까?

00:07:37.220 --> 00:07:38.200
라고 생각할지 모릅니다.

00:07:38.380 --> 00:07:39.120
물어볼 수는 있습니다.

00:07:39.380 --> 00:07:40.420
모델은 그렇다고 대답할 겁니다.

00:07:40.620 --> 00:07:41.520
항상 그렇게 답하죠.

00:07:41.720 --> 00:07:43.120
일반 사용자는 그걸로 만족합니다.

00:07:43.340 --> 00:07:44.660
전문가는 증거를 요구합니다.

00:07:44.660 --> 00:07:46.100
증거는 마이크로소프트 그래프,

00:07:46.340 --> 00:07:46.840
시어포인트,

00:07:47.060 --> 00:07:49.020
익스체인지 같은 시스템에서 검증된 사후 조건에 있습니다.

00:07:49.240 --> 00:07:51.420
모델의 기억이 아닌 실제 진실의 원천이죠.

00:07:51.620 --> 00:07:53.280
하지만 여기서부터가 흥미로워집니다.

00:07:53.440 --> 00:07:54.680
반일 단계는 괜찮습니다.

00:07:54.920 --> 00:07:56.020
실제 워크플로우에는 분기,

00:07:56.240 --> 00:07:56.700
병렬 처리,

00:07:56.880 --> 00:07:57.340
보상 조치,

00:07:57.540 --> 00:07:58.600
인간의 확인 단계가 필요합니다.

00:07:58.940 --> 00:07:59.980
실행기만으로는 부족합니다.

00:08:00.240 --> 00:08:01.860
실행기가 읽을 수 있는 지도가 필요합니다.

00:08:02.080 --> 00:08:03.500
그것이 바로 워크플로우 그래프입니다.

00:08:03.700 --> 00:08:06.000
그래프에서 노드는 명시적 계약을 가진 작업이나 하위 에이전트입니다.

00:08:06.000 --> 00:08:07.860
엣지는 제어 흐름과 데이터 흐름을 정의합니다.

00:08:08.020 --> 00:08:09.140
상태는 최우선 순위입니다.

00:08:09.320 --> 00:08:10.140
무엇이 지속되는가?

00:08:10.300 --> 00:08:11.580
무엇이 체크포인트로 저장되는가?

00:08:11.700 --> 00:08:12.640
무엇이 일시적인가?

00:08:12.780 --> 00:08:15.040
실행기는 각 엣지에서 허용 목록과 스키마를 준수하며

00:08:15.040 --> 00:08:16.660
결정론적으로 그래프를 따라 이동합니다.

00:08:16.820 --> 00:08:18.600
노드가 실패하면 그래프는 보상,

00:08:18.940 --> 00:08:19.280
취소,

00:08:19.580 --> 00:08:21.420
복구 또는 상급자 보고를 명시합니다.

00:08:21.600 --> 00:08:23.020
알 수 없는 파이프라인은 없습니다.

00:08:23.380 --> 00:08:25.480
그러고 나서 마법처럼 해결된다는 식은 없습니다.

00:08:25.760 --> 00:08:27.320
이 순간 신뢰성이 달라집니다.

00:08:27.520 --> 00:08:28.420
LLM 이 제안하고,

00:08:28.720 --> 00:08:29.620
실행기가 집행하며,

00:08:29.920 --> 00:08:30.760
그래프가 제약하고,

00:08:31.020 --> 00:08:31.860
검증이 결정합니다.

00:08:36.000 --> 00:08:38.080
멈추고 정해진 대로 작동하기 시작합니다.

00:08:38.300 --> 00:08:39.920
물론 여전히 똑똑하게 느껴지겠지만,

00:08:40.360 --> 00:08:41.540
이제는 감독하에 있게 됩니다.

00:08:41.760 --> 00:08:42.960
청사진 준비 완료.

00:08:43.140 --> 00:08:44.780
여러분의 테넌트를 엉망으로 만들지 않으면,

00:08:44.940 --> 00:08:46.960
서마이크로소프트 365와 연결해보겠습니다.

00:08:47.300 --> 00:08:48.600
그래프 워크플로우 입문,

00:08:48.800 --> 00:08:49.040
노드,

00:08:49.280 --> 00:08:49.560
엣지,

00:08:49.780 --> 00:08:51.080
그리고 유출되지 않는 상태 관리.

00:08:51.220 --> 00:08:52.240
이 상황을 상상해보세요.

00:08:52.520 --> 00:08:53.560
신뢰할 수 있는 실행기는 있지만,

00:08:53.760 --> 00:08:54.580
지도가 없는 상황입니다.

00:08:54.800 --> 00:08:55.560
명령은 따르겠지만,

00:08:55.900 --> 00:08:56.580
어디로 가야 할까요?

00:08:56.760 --> 00:08:57.760
이제 워크플로우 그래프,

00:08:58.020 --> 00:08:59.340
즉 운영 매뉴얼이 등장할 자례입니다.

00:08:59.340 --> 00:09:02.220
노드는 명시적 계약을 가진 작업이나 하위 에이전트입니다.

00:09:02.420 --> 00:09:04.520
엣지는 제어 흐름과 데이터 흐름을 정의합니다.

00:09:04.760 --> 00:09:06.140
그래프는 무엇이 언제 실행될지,

00:09:06.500 --> 00:09:08.600
어떤 데이터가 경계를 넘을 수 있는지를 암호화합니다.

00:09:08.840 --> 00:09:10.440
즉흥적 인연주나 재즈는 없습니다.

00:09:10.820 --> 00:09:11.760
이것은 악보입니다.

00:09:11.960 --> 00:09:13.080
형태부터 시작하세요.

00:09:13.320 --> 00:09:14.680
대부분의 운영 그래프는 대그,

00:09:14.900 --> 00:09:16.540
방향성 비순환 그래프입니다.

00:09:16.780 --> 00:09:19.800
순환 구조는 무한 루프와 상태 오염을 초래하기 때문입니다.

00:09:20.000 --> 00:09:21.000
루프를 사용할 수는 있지만,

00:09:21.380 --> 00:09:21.740
카운터,

00:09:21.960 --> 00:09:22.220
가드,

00:09:22.500 --> 00:09:23.240
최대 반복 횟수,

00:09:23.520 --> 00:09:24.000
종료 조건,

00:09:24.000 --> 00:09:26.240
타임아웃을 사용해 위도적으로 표시해야 합니다.

00:09:26.400 --> 00:09:27.840
그것이 바로 더 깊게 생각하기,

00:09:28.120 --> 00:09:28.220
가,

00:09:28.400 --> 00:09:29.080
영원히 생각하기,

00:09:29.300 --> 00:09:30.520
가되지 않도록 하는 방법입니다.

00:09:30.700 --> 00:09:32.520
조건부 라우팅은 명시적입니다.

00:09:32.800 --> 00:09:36.040
검색 신뢰도가 인계값을 넘으면 합성 단계로 분기합니다.

00:09:36.300 --> 00:09:38.280
그렇지 않으면 재질의 단계로 분기합니다.

00:09:38.500 --> 00:09:40.600
병렬 처리는 매우 중요하게 다뤄집니다.

00:09:40.780 --> 00:09:42.780
요약과 인용 추출을 동시에 실행한 다음,

00:09:43.220 --> 00:09:45.660
두 작업 모두 사후 조건을 충족했는지 확인하는

00:09:45.660 --> 00:09:47.060
베리어 노드에서 결합하세요.

00:09:47.320 --> 00:09:49.440
상태는 막연한 분위기가 아니라 장부입니다.

00:09:49.660 --> 00:09:50.140
지속 상태,

00:09:50.440 --> 00:09:52.320
즉 충돌 후 복구 가능한 연구 체크 포인트,

00:09:52.320 --> 00:09:53.780
입력합, 결정사항,

00:09:54.080 --> 00:09:55.820
서명된 동작 등 3가지 유형을 유지하세요.

00:09:55.980 --> 00:09:58.380
일시적 상태는 장기 메모리를 오염시키고 싶지 않은

00:09:58.380 --> 00:10:00.500
중간 모델 출력물과 같은 단기 버퍼입니다.

00:10:00.700 --> 00:10:02.840
파생 상태는 인베딩이나 필터링된 결과처럼

00:10:02.840 --> 00:10:04.340
결정론적으로 재구축할 수 있는

00:10:04.340 --> 00:10:05.640
계산 가능한 아티팩트입니다.

00:10:05.820 --> 00:10:06.880
원칙은 간단합니다.

00:10:07.080 --> 00:10:08.920
감사 시 증명할 수 있는 것만 저장하세요.

00:10:09.120 --> 00:10:11.200
그 외 모든 것은 위도적으로 일회용이어야 합니다.

00:10:11.400 --> 00:10:12.720
롤백 전략은 중요합니다.

00:10:12.960 --> 00:10:14.280
노드가 외부 세계를 변경하거나

00:10:14.280 --> 00:10:15.820
캘린더 이벤트를 생성하거나

00:10:15.820 --> 00:10:17.300
목록 항목을 업데이트할 때

00:10:17.300 --> 00:10:19.280
반대 동작이 존재하면 이를 기록하고

00:10:19.280 --> 00:10:21.160
그렇지 않으면 보상 계획을 기록합니다.

00:10:21.320 --> 00:10:23.020
하위 노드에서 치명적인 오류가 발생하면

00:10:23.020 --> 00:10:25.520
그래프는 해당 보상 조치를 역순으로 수행할 수 있습니다.

00:10:25.760 --> 00:10:27.440
아니요, 이건 과도한 조치가 아닙니다.

00:10:27.620 --> 00:10:28.800
어, CEO 일정을 이중 예약했네.

00:10:28.960 --> 00:10:30.080
아, 어, 고칠 방법이 없네.

00:10:30.140 --> 00:10:31.340
로 번지는 것을 방지하는 방법입니다.

00:10:31.540 --> 00:10:33.280
엣지, 엣지는 계약을 담고 있습니다.

00:10:33.580 --> 00:10:34.920
엣지는 미지의 파이프가 아니라

00:10:34.920 --> 00:10:36.320
노드 간의 API입니다.

00:10:36.540 --> 00:10:38.800
입출력 스키마, 타입, 필수 필드,

00:10:38.800 --> 00:10:40.120
허용 값을 정의하세요.

00:10:40.260 --> 00:10:41.720
다음 노드가 호출할 수 있는 도구

00:10:41.720 --> 00:10:43.700
나 도메인에 대한 허용 목록을 정의하세요.

00:10:43.700 --> 00:10:45.480
수신 노드가 수행을 약속하고

00:10:45.480 --> 00:10:47.860
거부할 내용을 나타내는 기능 태그를 정의하세요.

00:10:48.060 --> 00:10:50.120
실행 엔지는 런타임에 이를 강제합니다.

00:10:50.380 --> 00:10:51.480
노드가 요약 엣지를 통해

00:10:51.480 --> 00:10:53.620
시어포인트 토큰을 몰래 전송할 수는 없습니다.

00:10:53.920 --> 00:10:55.360
이는 보안을 위한 보여주기가 아니라

00:10:55.360 --> 00:10:58.200
에이전트 스스로에 의한 측면 이동을 방지하는 방법입니다.

00:10:58.440 --> 00:11:00.040
오류 처리는 막연한 감이 아닌

00:11:00.040 --> 00:11:01.620
그래프 내에 존재해야 합니다.

00:11:01.900 --> 00:11:03.360
모든 노드는 검증 오류,

00:11:03.800 --> 00:11:04.960
일시적 인프라 오류,

00:11:05.400 --> 00:11:06.080
속도 제한,

00:11:06.480 --> 00:11:06.820
인증,

00:11:07.240 --> 00:11:07.840
권한 부여,

00:11:08.260 --> 00:11:08.900
정책 위반,

00:11:09.400 --> 00:11:11.960
알 수 없는 오류와 같은 오류 분류를 선언해야 합니다.

00:11:11.960 --> 00:11:14.620
각 분류에 대해 그래프는 경로를 제공합니다.

00:11:14.820 --> 00:11:16.800
일시적 오류는 지수 105% 재시도하고,

00:11:17.180 --> 00:11:18.260
인증 오류는 토큰 갱신,

00:11:18.660 --> 00:11:19.980
속도 제한은 대체 도구 사용,

00:11:20.360 --> 00:11:21.920
정책 위반은 사유와 함께 거부합니다.

00:11:22.080 --> 00:11:24.560
알 수 없는 오류를 위한 데드레터 Q가 존재합니다.

00:11:24.780 --> 00:11:27.080
실패한 페이로드는 전체 컨텍스트와 함께 격리되어,

00:11:27.420 --> 00:11:29.360
사람이 프로덕션 환경에 혼란을 재현하지 않고

00:11:29.360 --> 00:11:30.420
검토할 수 있도록 합니다.

00:11:30.580 --> 00:11:31.260
휴먼 인 더 룩,

00:11:31.420 --> 00:11:33.340
체크 포인트는 임시 슬랙 메시지가 아니라

00:11:33.340 --> 00:11:34.120
노드여야 합니다.

00:11:34.360 --> 00:11:35.840
이 노드는 실행을 일시 중지하고,

00:11:36.160 --> 00:11:37.700
제한된 작업과 근거를 제시하며,

00:11:37.700 --> 00:11:40.020
기록되고 서명된 승인이나 수정을 요구합니다.

00:11:40.160 --> 00:11:41.680
승인되면 실행이 재개됩니다.

00:11:41.860 --> 00:11:44.480
거부되면 그래프는 안전한 대체 경로로 이동합니다.

00:11:44.660 --> 00:11:45.240
축하합니다.

00:11:45.500 --> 00:11:47.380
개발자들이 이메일보다 빠르기 때문에

00:11:47.380 --> 00:11:50.020
기꺼이 따를 변경 제어 시스템을 구현하셨습니다.

00:11:50.240 --> 00:11:51.900
메모리 격리는 파협할 수 없습니다.

00:11:52.220 --> 00:11:53.900
각 세션은 해당 세션에 필요한 문서,

00:11:54.260 --> 00:11:54.780
토큰,

00:11:54.860 --> 00:11:57.380
중간 결과만 포함된 범위가 지정된 컨텍스트를 받습니다.

00:11:57.620 --> 00:11:59.140
한 대화의 프롬프트 인젝션이

00:11:59.140 --> 00:12:01.440
다른 대화로 번지는 세션 간 오염은 실수로

00:12:01.440 --> 00:12:03.040
데이터가 유출되는 원인이 됩니다.

00:12:03.040 --> 00:12:05.120
그래프가 이러한 경계를 강제합니다.

00:12:05.300 --> 00:12:06.600
공유 가변 메모리는 없습니다.

00:12:06.960 --> 00:12:08.620
콘텐츠 필터와 스키마 검증기가 있는

00:12:08.620 --> 00:12:10.840
검증된 저장소에서의 승인된 읽기만 가능합니다.

00:12:11.020 --> 00:12:12.560
인베딩과 요약은 캐싱할 수 있지만,

00:12:13.020 --> 00:12:14.420
출처와 권한을 태그로 지정하고

00:12:14.420 --> 00:12:15.900
정책 변경 시 삭제해야 합니다.

00:12:16.100 --> 00:12:17.660
가시성은 나중에 추가하는 것이 아니라

00:12:17.660 --> 00:12:18.640
내장되어야 합니다.

00:12:18.860 --> 00:12:21.260
노드 수준의 추적은 입력, 출력, 지속시간,

00:12:21.600 --> 00:12:22.940
제시도 및 하료 효과를 보여줍니다.

00:12:23.140 --> 00:12:25.140
추적을 그래프 실행 아이디로 묶어 재현,

00:12:25.540 --> 00:12:27.560
진단하고 규정 준수를 증명할 수 있습니다.

00:12:27.880 --> 00:12:30.160
누가, 무엇을, 언제, 왜 했는가?

00:12:30.160 --> 00:12:32.220
이상탐지는 이상한 패턴을 포착합니다.

00:12:32.380 --> 00:12:33.560
갑작스러운 도구 호출 급증,

00:12:33.760 --> 00:12:35.820
비정상적인 도메인, 토큰 폭주 등이 이에 해당합니다.

00:12:35.960 --> 00:12:37.780
이는 흥미로운 상황이 사고로 번지기 전이

00:12:37.780 --> 00:12:38.800
조기경보 시스템입니다.

00:12:38.980 --> 00:12:40.880
본질적으로 그래프가 곧 헌법입니다.

00:12:41.120 --> 00:12:42.720
실행엔진은 법 집행기관입니다.

00:12:42.960 --> 00:12:44.720
LLM은 판사가 아니라 변호사입니다.

00:12:44.960 --> 00:12:47.440
노드, 엣지, 상태를 이런 식으로 인코딩하면

00:12:47.440 --> 00:12:49.680
단순히 성공하는 워크플로우만 얻는 것이 아닙니다.

00:12:49.860 --> 00:12:51.720
안전하게 실패하고, 스스로를 설명하며,

00:12:52.000 --> 00:12:53.860
예측 가능하게 복구되는 워크플로우를 얻게 됩니다.

00:12:53.860 --> 00:12:55.400
이제 총사진을 손에 쥐었으니,

00:12:55.700 --> 00:12:57.040
페넌트를 뷔페로 만들지 않고도

00:12:57.040 --> 00:12:59.160
마이크로소프트 365에 연결할 수 있습니다.

00:12:59.380 --> 00:13:00.480
설계부터 안전하게,

00:13:00.700 --> 00:13:03.080
그래프 검증이 하우스 엔지니어링보다 낮습니다.

00:13:03.300 --> 00:13:04.540
프로덕션 환경에 혼란을 던져

00:13:04.540 --> 00:13:06.540
생존자가 탄력적 이기를 바라는 방식으로는

00:13:06.540 --> 00:13:07.700
신뢰성을 증명할 수 없습니다.

00:13:07.960 --> 00:13:10.040
안전하지 않은 워크플로우를 실행 전에 거부함으로써

00:13:10.040 --> 00:13:11.140
신뢰성을 증명하는 것입니다.

00:13:11.340 --> 00:13:12.740
그것이 바로 그래프 검증입니다.

00:13:12.980 --> 00:13:14.380
정적검사는 헛소리를 걸러내고,

00:13:14.640 --> 00:13:16.200
런타임 가드레일은 위험을 격리합니다.

00:13:16.420 --> 00:13:18.120
정적검증은 이륙전 점검과 같습니다.

00:13:18.460 --> 00:13:20.300
비행전 구조를 미리 확인하는 것입니다.

00:13:20.560 --> 00:13:21.920
무한루프를 만드는 순환은

00:13:21.920 --> 00:13:24.260
거부되거나 반복 제한 설정을 강제합니다.

00:13:24.480 --> 00:13:26.060
도달할 수 없는 노드 나죽은 코드는

00:13:26.060 --> 00:13:27.840
삭제하거나 정당화해야 합니다.

00:13:28.060 --> 00:13:29.040
계약이 누락된 경우,

00:13:29.460 --> 00:13:31.200
모든 노드는 입력 및 출력 스키마,

00:13:31.500 --> 00:13:33.620
필요한 기능, 부작용을 선언해야 합니다.

00:13:33.820 --> 00:13:36.320
권한 경계, 외부 시스템을 변경하는 노드는

00:13:36.320 --> 00:13:37.840
최소 권한 자격 증명과

00:13:37.840 --> 00:13:41.020
명시적 허용 목록이 있는 세그먼트에서 실행되어야 합니다.

00:13:41.240 --> 00:13:41.740
맞습니다.

00:13:41.980 --> 00:13:44.840
요약 노드가 갑자기 시어포인트 쓰기 권한을 요청하면

00:13:44.840 --> 00:13:46.680
검증기는 단호하게 거부합니다.

00:13:46.860 --> 00:13:47.800
이제 런타임입니다.

00:13:48.060 --> 00:13:50.120
이 부분에서 사람들이 방심하기 쉽습니다.

00:13:50.340 --> 00:13:52.980
정책 엔진은 실행 엔진 뒤가 아닌 옆에 위치합니다.

00:13:53.220 --> 00:13:54.660
도구 및 도메인 허용 목록은

00:13:54.660 --> 00:13:57.020
문서가 아니라 강제되는 결정사항입니다.

00:13:57.240 --> 00:13:59.320
호출 시점에 엔진은 활성 주체와

00:13:59.320 --> 00:14:02.320
아이디 토큰, 범위, 클레임을 확인하고

00:14:02.320 --> 00:14:04.680
체인을 따라 권한을 올바르게 전파합니다.

00:14:04.920 --> 00:14:06.340
안목적인 초능력은 없습니다.

00:14:06.720 --> 00:14:08.560
토큰은 범위가 지정되고 허가시 갱신되며

00:14:08.560 --> 00:14:10.680
우호적인 경로를 통해 몰래 전달되지 않습니다.

00:14:10.900 --> 00:14:12.700
에이전트는 모든 호출에서 권한을 확보해야 하며

00:14:12.700 --> 00:14:13.980
그렇지 않으면 호출할 수 없습니다.

00:14:14.200 --> 00:14:16.700
입력 및 출력 정제는 선택이 아닌 위생관리입니다.

00:14:16.900 --> 00:14:18.720
프롬프트 인젝션은 영리한 것이 아니라

00:14:18.720 --> 00:14:19.940
예측 가능한 위협입니다.

00:14:20.180 --> 00:14:22.140
모든 인바운드 콘텐츠는 콘텐츠 필터,

00:14:22.480 --> 00:14:24.160
HTML 및 마크다운 스크러버,

00:14:24.580 --> 00:14:26.040
그리고 이전 지시 사항을 무시하는

00:14:26.040 --> 00:14:27.420
명령어 방화벽을 통과합니다.

00:14:27.660 --> 00:14:29.860
출력은 스키마 검증기를 통과해야 합니다.

00:14:30.120 --> 00:14:31.780
노드가 JSON을 약속했다면

00:14:31.780 --> 00:14:33.840
실행기는 서수령 답변을 거부하고

00:14:33.840 --> 00:14:34.740
수정을 요청합니다.

00:14:34.960 --> 00:14:36.020
모델은 따질 수 있어도

00:14:36.020 --> 00:14:37.740
검증기는 협상하지 않습니다.

00:14:37.960 --> 00:14:40.660
검증기는 타입, 범위, 불변성을 강제합니다.

00:14:40.660 --> 00:14:43.500
샌드 박신과 세분화는 피해 범위를 제한합니다.

00:14:43.700 --> 00:14:46.320
외부 코드나 신뢰할 수 없는 커넥터를 호출하는 노드는

00:14:46.320 --> 00:14:47.920
제약된 환경에서 실행되며

00:14:47.920 --> 00:14:50.400
속도 제한이 있는 API 게이트웨이,

00:14:50.760 --> 00:14:52.820
측면 이동을 방지하는 네트워크 정책,

00:14:53.260 --> 00:14:54.320
검증된 도메인으로만

00:14:54.320 --> 00:14:56.360
트래픽을 허용하는 송신 제어를 거칩니다.

00:14:56.620 --> 00:14:58.180
운영 환경에서 검색 노드가

00:14:58.180 --> 00:15:00.540
새로운 데이터 소스를 탐색하게 두어서는 안 됩니다.

00:15:00.820 --> 00:15:02.180
탐색은 개발 환경에서 이루어지며

00:15:02.180 --> 00:15:04.060
테스트를 거친 후 서명된 업데이트를 통해

00:15:04.060 --> 00:15:05.020
허용 목록에 추가됩니다.

00:15:05.180 --> 00:15:06.980
관측 가능성은 단순히 어딘가에 기록하는 것이 아니라

00:15:06.980 --> 00:15:08.180
수술처럼 정밀해야 합니다.

00:15:08.340 --> 00:15:10.900
노드 수준 추적은 입력, 출력, 소요시간, 제시도,

00:15:11.160 --> 00:15:12.780
그리고 정책 엔진의 결정사항을 기록합니다.

00:15:12.940 --> 00:15:15.120
모든 것을 실행 아이디 하나로 연관지 씁니다.

00:15:15.320 --> 00:15:16.600
감사 로그는 변경 불가능하며

00:15:16.600 --> 00:15:19.480
누가, 언제, 어떤 범위로, 어떤 작업을 승인했는지,

00:15:19.840 --> 00:15:21.300
그리고 정책이 왜 그것을 허용했는지

00:15:21.300 --> 00:15:22.140
명확히 기록됩니다.

00:15:22.320 --> 00:15:23.840
규제 기관이 누가 무엇을 했는지 물을 때

00:15:23.840 --> 00:15:25.520
어깨를 으쓱하는 대신 검색하면 됩니다.

00:15:25.740 --> 00:15:26.860
규정 준수 준비가 되었다는 것은

00:15:26.860 --> 00:15:28.700
증거 자료가 지루할 정도로 완벽하다는 뜻입니다.

00:15:28.880 --> 00:15:30.960
패치 및 제3자 위험은 공급망 문제입니다.

00:15:31.140 --> 00:15:32.240
그렇게 대우하십시오.

00:15:32.240 --> 00:15:34.440
위존성 스캔은 모든 빌드마다 실행됩니다.

00:15:34.600 --> 00:15:36.960
커넥터와 플러그인은 감사 및 버전 고정 과정을 거치며

00:15:36.960 --> 00:15:38.460
권한 남용 여부를 검토받습니다.

00:15:38.660 --> 00:15:40.880
mcp나 오픈 api 사양을 가져올 때는

00:15:40.880 --> 00:15:42.540
선언된 메서드가 기대하는

00:15:42.540 --> 00:15:45.280
최소 권한 정책과 일치하는지 확인해야 합니다.

00:15:45.480 --> 00:15:47.820
와일드 카드 엔드 포인트 나 읽기 전용 인척하는

00:15:47.820 --> 00:15:49.760
숨겨진 쓰기 경로는 허용되지 않습니다.

00:15:49.980 --> 00:15:51.520
위생 관리는 화려하지 않습니다.

00:15:51.780 --> 00:15:54.120
하지만 그것이 당신이 편히 잠들 수 있는 이유입니다.

00:15:54.320 --> 00:15:56.740
진실 그래프 검증은 사고의 여파를 기록하는 대신

00:15:56.740 --> 00:15:58.220
사고 유형 자체를 방지함으로

00:15:58.220 --> 00:15:59.920
하우스 엔지니어링보다 뛰어납니다.

00:16:00.120 --> 00:16:01.460
여전히 장애모드 테스트는 수행하지만

00:16:01.460 --> 00:16:03.740
이는 보호장치를 설치하지 않아듬을 발견하기 위해서가 아니라

00:16:03.740 --> 00:16:05.060
보호장치를 확인하기 위해서입니다.

00:16:05.200 --> 00:16:07.140
이를 다시 정신모델과 연결해봅시다.

00:16:07.340 --> 00:16:09.800
정적검사는 설계도를 정상적으로 유지합니다.

00:16:10.020 --> 00:16:13.280
불가능한 경로, 고립된 작업, 권한 유출은 없습니다.

00:16:13.680 --> 00:16:16.400
런타임 보호장치는 동작을 정상적으로 유지합니다.

00:16:16.640 --> 00:16:19.880
모든 호출은 인증, 승인, 정화 및 관찰됩니다.

00:16:20.140 --> 00:16:22.000
실행기는 그래프 제약 조건을 강제하고

00:16:22.000 --> 00:16:23.680
검증기는 모델을 결정하며

00:16:23.680 --> 00:16:26.700
모델은 경계 내에서 제한하고 이탈하면 즉시 차단됩니다.

00:16:26.900 --> 00:16:28.220
이게 너무 무거운 작업일까요?

00:16:28.420 --> 00:16:30.540
침해사고를 즐기는 분이 아니라면 그렇지 않습니다.

00:16:30.760 --> 00:16:32.700
오버헤드는 기계적이고 자동화되어 있습니다.

00:16:33.020 --> 00:16:35.320
정적검증은 빌드 및 배포 시점에 실행됩니다.

00:16:35.560 --> 00:16:38.220
런타임 정책은 빠르고 로컬에서 작동하는 사이드카입니다.

00:16:38.440 --> 00:16:40.220
스키마 검사는 밀리초 단위로 끝납니다.

00:16:40.460 --> 00:16:43.100
제거되는 비용, 사고, 수동 검토, 수정 작업

00:16:43.100 --> 00:16:45.520
이 추가되는 마이크로 단위의 지연 시간보다 훨씬 큽니다.

00:16:45.520 --> 00:16:47.520
그리고 그 성과는 측정 가능합니다.

00:16:47.520 --> 00:16:49.940
무단 호출이 줄고 토큰 사용이 줄며

00:16:49.940 --> 00:16:53.980
왜 그랬지? 라는 질문을 던지는 사후 분석도 훨씬 줄어듭니다.

00:16:54.180 --> 00:16:57.000
평범한 사용자가 놓치는 한 가지 포인트가 더 있습니다.

00:16:57.320 --> 00:16:58.760
검증은 조합 가능합니다.

00:16:58.980 --> 00:17:00.600
도구 자체를 신뢰하지 않고도

00:17:00.600 --> 00:17:02.860
계약과 정책을 강제하는 프록시노드로

00:17:02.860 --> 00:17:04.600
제3자 도구를 감싸할 수 있습니다.

00:17:04.860 --> 00:17:08.140
그래프를 민감도, 공개, 내부, 제한 수준으로 분할하고

00:17:08.140 --> 00:17:10.560
새로운 경계에 대한 유효성 검사를 통과한 경우

00:17:10.560 --> 00:17:12.620
M1계층 간 워크플로우를 숨겨갈 수 있습니다.

00:17:12.620 --> 00:17:14.840
그것이 바로 안전하게 확장하는 방법입니다.

00:17:15.000 --> 00:17:17.040
설계에 의한 보안, 시큐어 바이 디자인, 은구호가 아니라

00:17:17.040 --> 00:17:17.920
워크플로우의 속성입니다.

00:17:18.060 --> 00:17:20.180
에이전트가 알아서 잘 행동하기를 바라지 마십시오.

00:17:20.300 --> 00:17:22.280
부적절한 행동을 구조적으로 어렵게 만들고

00:17:22.280 --> 00:17:23.620
운영상 눈에 띄게 해야 합니다.

00:17:23.820 --> 00:17:24.680
가이드라인이 마련되면

00:17:24.680 --> 00:17:26.280
마이크로소프트 365 그래프와

00:17:26.280 --> 00:17:28.280
에이저 오픈하이를 연결하는 것은 도박이 아닙니다.

00:17:28.460 --> 00:17:30.620
원하는 조건에 따라 제어되는 강력한 기능입니다.

00:17:30.840 --> 00:17:33.300
이제는 화재 진압이 아닌 설계에 대해 이야기할 수 있습니다.

00:17:33.540 --> 00:17:36.100
마이크로소프트 시나리오, 즉 M365 그래프,

00:17:36.400 --> 00:17:38.900
에이저 오픈하이, 코파일러 스튜디오의 조합입니다.

00:17:38.900 --> 00:17:40.500
등장인물을 모아보겠습니다.

00:17:40.500 --> 00:17:42.440
검색 에이전트는 최소 권한으로

00:17:42.440 --> 00:17:44.880
마이크로소프트 그래프에서만 정보를 가져오는

00:17:44.880 --> 00:17:45.900
절제된 사서입니다.

00:17:46.100 --> 00:17:48.660
추론 에이전트는 계획을 세우고 범위를 설정하며

00:17:48.660 --> 00:17:50.800
주어진 업무 범위를 절대 벗어나지 않는

00:17:50.800 --> 00:17:52.140
에이저 오픈하이 모델입니다.

00:17:52.380 --> 00:17:55.000
실행기는 역등성 및 사후 조건 확인을 통해

00:17:55.000 --> 00:17:57.460
도구를 실행하는 정책 기반 운영자입니다.

00:17:57.840 --> 00:18:02.100
검증기는 스키마, 정책, 경계 집행을 담당하는 문지기입니다.

00:18:02.100 --> 00:18:04.500
정책가드는 모든 것을 엔트라 아이디 범위 및

00:18:04.500 --> 00:18:06.900
RBAC와 연결하는 런타임 사이드카입니다.

00:18:06.900 --> 00:18:10.140
이들은 함께 모여 위협적인 위원회가 아닌 유능한 팀처럼 행동합니다.

00:18:10.320 --> 00:18:12.600
데이터 액세스는 추측이 아닌 그래프에서 시작됩니다.

00:18:12.780 --> 00:18:15.400
검색 에이전트는 세분화된 범위를 가진 앱 등록 정보를 보유합니다.

00:18:15.600 --> 00:18:17.580
파일은 특정 사이트에 대해서만 읽기 권한을 갖습니다.

00:18:17.780 --> 00:18:19.760
메일은 제한된 사소함에 대해 기본 읽기 권한을 갖습니다.

00:18:19.960 --> 00:18:21.980
캘린더는 리소스 캘린더에 대해 읽기 권한을 갖습니다.

00:18:22.180 --> 00:18:24.560
그래프 리드 라이트 올과 같은 무모한 권한은 사용하지 않습니다.

00:18:24.720 --> 00:18:27.620
커리는 델타 및 선택적 필드를 사용하여 페이로드를 가볍게 유지합니다.

00:18:27.620 --> 00:18:29.460
페이징은 1급 객체로 다뤄집니다.

00:18:29.620 --> 00:18:33.520
실행기는 서비스 스로틀링을 준수하며 제한시간과 함께 결정론적으로 다음 링크를 따릅니다.

00:18:33.700 --> 00:18:36.380
그리고 429 오류가 발생하면 지수적 배고프가 적용됩니다.

00:18:36.560 --> 00:18:38.860
성급하게 굵지 않고 지수적인 인내심을 발휘합니다.

00:18:39.040 --> 00:18:41.360
그라운딩, 그라운딩은 분위기가 아니라 파이프라인입니다.

00:18:41.560 --> 00:18:44.240
그래프 검색 또는 목록 커리를 통해 후보 문서를 검색합니다.

00:18:44.440 --> 00:18:48.660
항목 아이디와 버전 이태그로 중복을 제거하여 최신 데이터와 오래된 데이터가 섞이지 않게 합니다.

00:18:48.660 --> 00:18:57.700
위미 론적 경계, 섹션 헤더, 슬라이드 구분 기호 단위로 청킹한 뒤 출처, 드라이브, 사이트, 경로, 항목 아이디, 최종 수정일, 할당된 해시를 참고합니다.

00:18:57.880 --> 00:19:03.160
추론 에이전트는 청크와 메타 데이터만 확인하며 해당 아이디에 맵핑된 인용문을 출력해야 합니다.

00:19:03.360 --> 00:19:04.880
인용이 없으면 주장도 없습니다.

00:19:05.220 --> 00:19:08.400
실행기는 외부 동작을 수행하기 전에 사후 조건으로 이를 강제합니다.

00:19:08.620 --> 00:19:11.060
오케스트레이션을 위해 코파일러 스튜디오를 도입합니다.

00:19:11.060 --> 00:19:16.160
선언적 도구, 그래프 커리 팩, 시어포인트 쓰기 작업, 팀 재개시, 아울룩 전송 등을 정의하며

00:19:16.160 --> 00:19:19.180
각각은 명시적 스키마와 허용 목록을 갖춘 프록시 뒤에 위치합니다.

00:19:19.400 --> 00:19:21.280
에이전트 간의 조정은 구조화되어 있습니다.

00:19:21.600 --> 00:19:23.980
검색 에이전트가 그라운딩 도구를 노출합니다.

00:19:24.220 --> 00:19:26.800
추론 에이전트가 매개 변수와 함께 이를 요청합니다.

00:19:27.040 --> 00:19:30.720
실행기가 이를 중재하고 검증한 뒤 그라운딩된 컨텍스트를 반환합니다.

00:19:31.000 --> 00:19:33.460
사람에 위한 체크포인트가 기본적으로 포함되어 있습니다.

00:19:33.780 --> 00:19:38.460
제한된 작업 노드는 실행을 일시 중지하고 계획과 인용문을 제시하며 수인을 요구합니다.

00:19:38.460 --> 00:19:40.600
승인된 내용은 서명되고 기록됩니다.

00:19:40.780 --> 00:19:43.400
거부된 경우 안전한 대안으로 이동하거나 에스컬레이션 합니다.

00:19:43.400 --> 00:19:46.360
토큰과 지연 시간은 바라는 것이 아니라 관리하는 것입니다.

00:19:46.540 --> 00:19:50.540
선택적 컨텍스트란 전체 테넌트가 아닌 관련 청크만 제공하는 것을 의미합니다.

00:19:50.720 --> 00:19:55.040
요약은 콘텐츠 해시와 권한으로 키가 지정된 인베딩을 통해 미리 계산되고 캐시됩니다.

00:19:55.260 --> 00:19:58.700
문서가 변경되면 키도 변경되고 캐시를 놓치면 다시 계산합니다.

00:19:58.960 --> 00:20:01.200
스트리밍 응답은 UI를 활성 상태로 유지하며

00:20:01.200 --> 00:20:04.780
실행기는 전체 스키마 유효계획이 도착한 후에만 부작용을 처리합니다.

00:20:04.980 --> 00:20:09.260
조기 종료 조건은 신뢰도와 커버리지가 임계값에 도달하면 추론 루프를 중지합니다.

00:20:09.260 --> 00:20:12.220
모델이 감상적이라고 해서 추가적인 사고를 하지 않습니다.

00:20:12.420 --> 00:20:14.360
감사 기능은 기본적으로 내장되어 있습니다.

00:20:14.700 --> 00:20:17.260
모든 작업은 서비스 주체나 위임된 사용자에 의해 서명되며

00:20:17.800 --> 00:20:23.560
실행 아이디, 도구, 맥의 변수, 필요한 경우 수정된 내용, 범위, 결과가 찍힙니다.

00:20:23.740 --> 00:20:26.420
변경 불가능한 로그가 관찰 가능성 스택에 유지됩니다.

00:20:26.620 --> 00:20:27.260
원하는 것을 선택하세요.

00:20:27.980 --> 00:20:30.660
따라서 부작용을 다시 실행하지 않고도 실행을 재현할 수 있습니다.

00:20:30.920 --> 00:20:34.000
누가, 무엇을, 언제, 왜 했는지는 마녀사냥이 아니라 커리가 됩니다.

00:20:34.000 --> 00:20:39.420
또한 인용문은 그대로 유지되므로 답변이 모델의 환각이 아닌 실제 테넌트 콘텐츠를 추적했는지 확인할 수 있습니다.

00:20:39.680 --> 00:20:41.500
실패는 일상적이고 지루한 일입니다.

00:20:41.680 --> 00:20:42.880
429 오류인가요?

00:20:43.080 --> 00:20:47.120
실행기는 지터를 사용하여 재시도한 다음, 접이용컬이 나주러든 페이지 크기로 대체합니다.

00:20:47.320 --> 00:20:48.280
오래된 캐시인가요?

00:20:48.520 --> 00:20:51.700
검증기가 일치하지 않는 애태그를 감지하여 새로 고침을 강제합니다.

00:20:51.900 --> 00:20:52.820
권한 거부인가요?

00:20:53.040 --> 00:20:58.360
정책가들은 이와 함께 거부하고, 동의 요청 경로를 제한하거나, 정보가 유출되지 않는 수정된 요약으로 라우팅합니다.

00:20:58.560 --> 00:20:59.500
도구 중단인가요?

00:20:59.500 --> 00:21:04.940
그래프는 대안을 선언하거나 사람이 해결할 수 있도록 전체 컨텍스트를 담아 데드레터큐의 실행을 보관합니다.

00:21:05.120 --> 00:21:07.880
결정론적 대체 조치가 사고를 티켓으로 전환합니다.

00:21:08.100 --> 00:21:09.580
이제 아주 짧은 연습을 해보겠습니다.

00:21:10.040 --> 00:21:14.180
사용자가 지난 분기 로드맵 결정사항을 링크와 함께 요약해체, 라고 요청합니다.

00:21:14.400 --> 00:21:21.180
추론 에이전트가 특정 시어포인트 사이트와 팀즈 채널에서 그래프 검색을 사용하고, 지난 분기로 필터링한 후 종합하세요, 라고 제안합니다.

00:21:21.420 --> 00:21:24.820
검증기가 요청된 범위가 에이전트의 역할과 일치하는지 확인합니다.

00:21:25.000 --> 00:21:25.540
일치합니다.

00:21:25.540 --> 00:21:31.940
실행기는 페이징과 필드 선택을 사용하여 그래프 호출을 수행하고, 항목 아이디별로 중복을 제거하고, 청크를 나눈 후 출처와 함께 컨텍스트를 반환합니다.

00:21:32.080 --> 00:21:35.940
추론 에이전트가 항목 아이디 엠에핑된 인라인 인용문이 포함된 요약을 생성합니다.

00:21:36.140 --> 00:21:38.920
검증기가 스키마와 인용문을 확인하고 통과시킵니다.

00:21:39.100 --> 00:21:41.580
요약과 증거가 포함된 사람 확인 지점이 나타납니다.

00:21:41.800 --> 00:21:43.220
승인자가 확인을 클릭합니다.

00:21:43.440 --> 00:21:46.280
실행기는 팀즈에 결과를 게시하고, 이해 관계자에게 이메일을 보냅니다.

00:21:46.480 --> 00:21:49.180
각 작업은 역등성 키를 사용하여 제시도로 인한 중복 게시를 방지합니다.

00:21:49.340 --> 00:21:50.340
이 절차를 주목하세요.

00:21:50.340 --> 00:21:52.460
어떤 에이전트도 도구를 마음대로 만들지 않습니다.

00:21:52.620 --> 00:21:55.120
어떤 노드도 허용 목록밖에 도메인을 넘나들지 않습니다.

00:21:55.280 --> 00:22:00.040
토큰은 엔트라 아이디를 통해 올바르게 범위가 지정되고 전파되며, 노드 간에 복사붙여 넣기 되지 않습니다.

00:22:00.260 --> 00:22:02.320
모델은 결코 성공을 단정짓지 않습니다.

00:22:02.540 --> 00:22:05.080
실행기가 그래프 사후 조건을 통해 성공을 증명합니다.

00:22:05.280 --> 00:22:09.460
메시지 아이디 생성, 항목의 태그 업데이트, 캘린더 이벤트 아이디 생성 후 실행 완료를 표시합니다.

00:22:09.680 --> 00:22:11.600
네, 물론 안전하게 확장할 수 있습니다.

00:22:11.600 --> 00:22:18.560
플래너, 비바 또는 타사 서비스를 mcp나 오픈 api를 통해 도입하되, 반드시 엄격한 스키마와 네트워크 송신 제어를 갖춘 풀옥시 도구 뒤에서 실행해야 합니다.

00:22:18.700 --> 00:22:21.960
모든 커넥터를 동일한 유효성 검사 로직과 정책 카드로 감싸십시오.

00:22:22.080 --> 00:22:25.500
환경 간의 전환 시에는 새로운 경계에 맞는 유효성 검사 과정을 거쳐야 합니다.

00:22:25.700 --> 00:22:28.940
개발에서 테스트, 운영으로 넘어갈 때 범위 확장은 가정하는 것이 아니라 검토되어야 합니다.

00:22:29.100 --> 00:22:31.520
이것이 바로 제대로 구현된 마이크로소프트의 아키텍처입니다.

00:22:31.520 --> 00:22:41.540
진실을 위한 그래플, 사고를 위한 에이저 오픈아이, 오케스트레이션을 위한 코파일러 스튜디오, 운영을 위한 실행기, 익스커터즈, 안전을 위한 검사기 및 정책, 그리고 증명을 위한 관찰 가능성입니다.

00:22:41.700 --> 00:22:43.680
느낌이 아닌 수치로 증명하십시오.

00:22:43.800 --> 00:22:45.300
전후 매트릭을 비교하십시오.

00:22:45.440 --> 00:22:48.140
정확도, 지연시간, 비용, 관리 오버헤드입니다.

00:22:48.300 --> 00:22:49.260
좋은 아키텍처군요.

00:22:49.500 --> 00:22:50.180
증명해보십시오.

00:22:50.280 --> 00:22:51.680
느낌이 아니라 수치가 중요합니다.

00:22:51.860 --> 00:22:52.520
기준 전부터 잡으십시오.

00:22:53.160 --> 00:22:55.160
프롬프트만 사용하는 에이전트는 감정 과잉입니다.

00:22:55.160 --> 00:22:58.540
출처를 조작하고 인용을 잊어버리기 때문에 정확도가 일관되지 않습니다.

00:22:58.700 --> 00:23:01.940
근거, 그라운딩, 다 없으면 아무 의미 없는 확신에 찬글만 나올 뿐입니다.

00:23:02.080 --> 00:23:04.460
꼬리 지연시간, 테일 레이튼시, 이치명적입니다.

00:23:04.660 --> 00:23:09.040
불필요한 컨텍스트로 가득 찬, 길고 연속적인, 더 깊은 생각 호출의 체인입니다.

00:23:09.240 --> 00:23:15.060
매번 전체 기록과 원본 문서를 고액 연봉의 택배 서비스처럼 모델에 다시 보내기 때문에 비용이 급증합니다.

00:23:15.260 --> 00:23:16.840
관리 오버헤드는 어떻습니까?

00:23:17.100 --> 00:23:17.560
높습니다.

00:23:17.800 --> 00:23:22.620
사건 사고, 핫픽스, 원인 불명의 실패, 그리고 눈을 가리고 고고학을 하는 것 같은 감사 작업이 이어집니다.

00:23:22.620 --> 00:23:25.460
이제 실행기와 검증된 그래프를 도입한 후의 상태를 살펴보겠습니다.

00:23:25.760 --> 00:23:28.480
주장에 대한 근거가 필요하기 때문에 정확도가 급상승합니다.

00:23:28.660 --> 00:23:35.360
그래프 항목 ID, 이 태그, 서명된 해시에 연결된 근거 기반 인용은 출처가 없는 답변이 검사기를 통과할 수 없게 합니다.

00:23:35.520 --> 00:23:36.740
효과는 즉각적입니다.

00:23:37.000 --> 00:23:42.260
잘못된 답변이 줄고 재작업 루프가 감소하며 평가세트에서 작업 성공률이 측정 가능할 정도로 향상됩니다.

00:23:42.440 --> 00:23:46.780
주장을 뒷받침할 수 없는 경우 에이전트는 이유를 밝히며 거부하거나 사람의 쓰인을 요청합니다.

00:23:46.980 --> 00:23:49.380
예측 가능하고 검토 가능하며 안전합니다.

00:23:49.620 --> 00:23:51.520
지연시간은 세 가지 이유로 압축됩니다.

00:23:51.520 --> 00:23:57.260
첫째, 병렬 처리, 검색, 재순위 지정, 인용 추출이 동시에 실행된 후 베리어 노드에서 동기화됩니다.

00:23:57.420 --> 00:24:03.100
둘째, 콘텐츠 해시와 권한 범위로 키가 지정된 캐싱, 인베딩 및 요약은 변경되지 않은 내용을 다시 계산하지 않습니다.

00:24:03.280 --> 00:24:04.720
셋째, 조기 종류입니다.

00:24:04.940 --> 00:24:08.240
커버리지와 신뢰도가 인계값에 도달하면 그래프가 루프를 멈춥니다.

00:24:08.420 --> 00:24:13.320
모델이 한 단락을 생각하는 동안 사용자가 포기를 고민하게 만드는 연속 프롬프트 방식과 비교해 보십시오.

00:24:13.460 --> 00:24:16.140
토큰 규율이 강제되기 때문에 비용이 절감됩니다.

00:24:16.140 --> 00:24:18.880
스키마 제약 출력이 장황한 설명을 방지합니다.

00:24:19.020 --> 00:24:23.520
전체 사이트가 아닌 메타데이터가 포함된 관련 청크만 선택적으로 컨텍스트에 제공합니다.

00:24:23.720 --> 00:24:31.260
더 짧은 프롬프트, 더 작은 응답, 더 적은 제시도, 실행기의 역등성, 이댄포텐시, 과 105프로직은 중복 부출과 낭비되는 주기를 방지합니다.

00:24:31.460 --> 00:24:35.160
결과적으로 성공적인 결과 당 토큰 수가 줄어들고 편차는 훨씬 작아집니다.

00:24:35.340 --> 00:24:37.000
재무팀은 편차 감소를 좋아합니다.

00:24:37.260 --> 00:24:41.000
관찰 가능성이 즉흥적이 아닌 공학적으로 설계되었기 때문에 관리 오버헤드가 줄어듭니다.

00:24:41.000 --> 00:24:44.420
노드 수준의 추적과 불변 로그가 사고 진단 시간을 대폭 단축합니다.

00:24:44.580 --> 00:24:49.240
어떤 노드가 실패했는지, 왜 정책 엔진이 거부했는지, 실행기가 다음에 무엇을 시도했는지 확인할 수 있습니다.

00:24:49.420 --> 00:24:53.020
반복 가능한 배포는 내 컴퓨터에서는 되는데 시계 소모적인 상황을 종식시킵니다.

00:24:53.180 --> 00:24:58.700
모든 실행에 누가, 무엇을, 언제, 왜 했는지가 담겨 있으므로 규정 준수는 더 이상 계절성 위기가 아닙니다.

00:24:58.880 --> 00:25:01.860
실제로 실행 가능한 측정 장비를 통해 이를 구체화해봅시다.

00:25:02.040 --> 00:25:07.800
대표적인 작업, 출처가 포함된 Q&A, 링크가 있는 요약, 승인이 포함된 실행 제한으로 평가 세트를 구축하세요.

00:25:07.800 --> 00:25:11.200
각 작업에 대해 정의된 정답 또는 승인 기준을 설정하십시오.

00:25:11.300 --> 00:25:15.820
맵핑된 항목 ID, 출처 범위, 허용된 오차를 바탕으로 팩트를 교정하십시오.

00:25:15.960 --> 00:25:21.620
SLO, P50 및 P95 엔드2 엔드 지연 시간, 성공한 작업당 토큰 사용량, 정책 거부율을 계측하세요.

00:25:21.780 --> 00:25:25.400
모든 지표를 추적 정보와 연결하여 회기 발생 시 추적 경로를 확보하십시오.

00:25:25.540 --> 00:25:29.160
즉흥적으로 구축하지 않고 아키텍처를 따를 때 기대할 수 있는 결과입니다.

00:25:29.380 --> 00:25:33.500
검증되지 않은 주장은 스테이징을 벗어나지 못함으로 답변의 정확도가 높아집니다.

00:25:33.500 --> 00:25:38.900
병렬로드와 조기 종료를 통해 긴 대기 시간을 줄임으로 P95 지연 시간이 낮아집니다.

00:25:39.080 --> 00:25:43.740
소설 같은 긴 글 대신 관련성 높은 정보만 전달함으로 토큰 비용이 절감됩니다.

00:25:43.940 --> 00:25:48.140
대부분의 실패가 결정론적 대체 경로로 처리되므로 관리자 호출이 줄어듭니다.

00:25:48.340 --> 00:25:51.140
그리고 네, 모두가 간과하는 지루하지만 중요한 지표가 있습니다.

00:25:51.400 --> 00:25:52.640
1차 성공 완료율입니다.

00:25:52.900 --> 00:25:55.140
사람의 개입 없이 완료되는 실행이 더 많아집니다.

00:25:55.320 --> 00:25:58.860
비즈니스 측면에서 문제 해결이 빨라지면 사용자가 중복 티켓을 생성하는 일이 줄어듭니다.

00:25:58.860 --> 00:26:02.280
예측 가능한 지출은 예상치 못한 토큰 비용 부담 없이 예산을 관리할 수 있게 합니다.

00:26:02.420 --> 00:26:05.740
규정 준수에 대한 확신은 로드맵을 방해하는 감사 주기를 줄여줍니다.

00:26:05.940 --> 00:26:08.640
눈에 띄지 않는 가장 큰 성과는 평판의 향상입니다.

00:26:08.840 --> 00:26:12.320
에이전트의 답변이 실제 콘텐츠를 인용하고 링크가 정상 작동하면

00:26:12.320 --> 00:26:15.760
사람들은 이를 신뢰하고 사용하며 왜 이런 답변이 나왔죠?

00:26:15.860 --> 00:26:17.700
라는 스크린샷 전달을 멈춥니다.

00:26:17.900 --> 00:26:20.560
강력히 권고하건대 추적 정보와 지표를 연동하세요.

00:26:20.780 --> 00:26:23.260
그렇지 않으면 여러분은 그저 짐작으로 비행하는 것입니다.

00:26:23.260 --> 00:26:27.000
실행을 열어서 어떤 노드가 토큰을 부풀렷 거나 지연을 유발했는지 볼 수 없다면

00:26:27.000 --> 00:26:30.400
그것은 관찰 가능성이 아니라 타임스탬프가 찍힌 느낌일 뿐입니다.

00:26:30.540 --> 00:26:34.580
검증기가 멋진 계획과 실제 실행 사이에 위치하는 순간 모든 것이 바뀝니다.

00:26:34.740 --> 00:26:39.520
정확도는 안정화되고 지연 시간은 줄어들며 비용은 평탄해지고 관리자는 편히 잠들 수 있습니다.

00:26:39.720 --> 00:26:40.940
이것은 마법이 아닙니다.

00:26:41.120 --> 00:26:46.120
프롬프트에 잘못 할당했던 작업을 실행기, 그래프, 검증기가 수행하고 있는 것입니다.
