이번에는 4주차 AI 에이전트 엔지니어링(한빛미디어) 인프런 스터디에 'Part3 신뢰할 수 있는 에이전트 운영과 거버넌스'를 정리했습니다. 세부 섹션은 Chapter9 검증 및 측정, Chapter10 운영 환경 모니터링 입니다. Chapter9 검증 및 측정이번 장의 목적- 에이전트 시스템의 성능을 측정하고 신뢰성을 검증하는 방법론 학습- 측정의 중요성 이해: 빠른 배포 압박 속에서도 엄격한 평가가 필수- 다층평가 체계 구축 컴포넌트 수준: 도구, 계획, 메모리, 학습 평가 시스템 수준: 엔드투엔드 통합 테스트 품질 수준: 배포 준비 및 게이트 메커니즘- 고객 지원 에이전트(깨진 머그 환불 시나리오) 사레로 실전 이해 측정: 에이전틱 시스템의 핵심 - 엄격한 측정 없이는 설제 개선인지 회귀인지 ..

대 AI시대가 되면서 이제 몇시간이면 앱이나 웹을 딸깍 만들 수 있는 시대가 되었습니다. 그렇다면 다른 사람보다 빠르게 도메인 지식과 AI도구를 활용해서 서비스들을 만들면 모두 성공할 수 있을 것도 같습니다. 그렇지만 그런 방식은 기존의 성공 방정식을 AI시대에 적용한 것일 뿐입니다. 나만 빨라진 것이 아니기 때문에 결국 다른 사람들도 유사한 서비스를 빠르게 개발할 수있기 때문입니다. 이전 생존전략 #1로 'AI활용능력, 전문 도메인, 적극적 시행착오', #2로 '인간과 사회에 대한 통찰'을 제안했습니다.그런데 이것만 가지고는 뭔가 부족했습니다. 왜나하면 부지런히 다른 사람도 관심을 가질만한 적당히 괜찮은 상품의 콘텐츠들을 금방 대체가 가능하기 때문입니다. 하루하루 열심히 일은 하지만... 어딘지 공허..

오늘은 3주차 AI 에이전트 엔지니어링(한빛미디어) 인프런 스터디에 Chapter8 단일 에이전트에서 멀티 에이전트로에 대해서 다룹니다. Chapter8 단일 에이전트에서 멀티 에이전트로에이전트는 몇 개나 필요할까?기본 원칙: 단순함에서 출발하여 필요할 때만 복잡성 추가영향 요인: - 작업 난이도와 도구 개수(16개 이상이면 성능 저하) 요즘은 더 많이 사용 가능...- 환경 복잡성과 병렬 처리 필요성-지연시간(latency) 요구사항선택 경로:1) 단일 에이전트로 시작2) 계층적/시맨틱 도구 선택으로 최적화3) 필요시만 멀티 에이전트로 전 단일 에이전트 vs 멀티 에이전트구분단일 에이전트멀티 에이전트구현 난이도단순복잡지연시간낮음높음(조율 오버헤드)도구 관리도구가 많을 수록 성능 떨어짐전문화로 정확도 높..