모델 849건 · 국산 132 · 가격 688 추적 중
AI 에이전트·툴 유즈

AWS, 에이전트 '스킬' 평가하는 전용 지표 공개

AWS ML Blog·2026-09-22영문 원문

요약

AWS가 Strands Evals SDK와 Amazon Bedrock AgentCore Evaluations에 에이전트의 '스킬' 사용을 진단하는 전용 평가지표를 추가했다. 스킬은 SKILL.md 형태로 저장되는 재사용 가능한 도메인별 지침 묶음으로, 에이전트가 필요할 때만 불러와 사용하는 방식이다. 새 지표는 적절한 스킬을 선택했는지 이진 판정하는 Skill Selection Accuracy, 선택한 스킬의 절차를 얼마나 충실히 따랐는지 5단계로 평가하는 Skill Instruction Following, 스킬이 실제로 로드됐는지 확인하는 결정론적 검사 Skill Invoked로 구성된다. AWS는 인사(HR) 어시스턴트 사례를 들어, 잘못된 스킬을 고르는 경우와 올바른 스킬을 고르고도 지시를 일부만 따르는 경우를 구분해 진단할 수 있다고 설명했다.

큐레이터 노트

원문에 없는 맥락입니다

그동안 에이전트 평가가 최종 응답의 그럴듯함만 봤다면, 이 지표는 스킬 선택과 지시 이행 과정을 단계별로 분리해 어느 지점에서 실패했는지 짚어낼 수 있게 한다.

다른 매체는 이렇게 썼다

같은 사안을 다룬 다른 곳의 보도입니다

AI 모델만으론 부족…스노우플레이크, 기업 데이터로 승부
ZDNet Korea · 2026-11-03

스노우플레이크가 오픈AI·앤트로픽 모델을 활용하면서도 기업 데이터와 업무 맥락을 연결하는 역량으로 차별화를 꾀한다. '엑스페디션 2026'에서 목표만 정해주면 스스로 작업을 수행하는 '코코·코워크 봇'을 프라이빗 프리뷰로 공개했고, 부서마다 다른 용어 정의를 통일하는 '비즈니스 온톨로지…

이스라엘 보안기업 7곳, 한국서 AI 에이전트 보안 등 피칭
ZDNet Korea · 2026-11-03

이스라엘 사이버보안 기업 7곳이 경기 성남에서 열린 '이스라엘-한국 사이버보안 포럼 2026'에 참가해 국가 사이버 방어, AI 에이전트 보안, 양자안전 통신, 클라우드 보안, 아이덴티티 보안 등 기술을 소개했다. 드림은 정부용 소버린 AI와 스스로 취약점을 찾는 에이전트형 보안 도구 …

어라이즈 “AI 에이전트 행동까지 추적해야”
IT조선 · 2026-11-03

이승민 어라이즈 아시아태평양·일본 솔루션 총괄이 서울 서대문구에서 열린 ‘월간AX 10월 세미나’에서 AI 에이전트 거버넌스의 중요성을 강조했다. 그는 에이전트에게 특정 파일을 보지 말라고 지시하는 것만으로는 부족하며, 실제 접근 권한을 제한하고 어떤 정보를 조회하고 어떤 행동을 했는지…

이 사안의 흐름

같은 주제를 다룬 이 사이트의 기록 — 최신순

이 글에 나온 말

용어집 전체 →
평가
AI 모델이나 시스템의 출력이 원하는 기준에 얼마나 부합하는지를 정량적·정성적으로 측정하는 절차를 말한다.

이 분야 브리핑

여러 매체가 함께 다룬 사안을 한 번에

이 페이지는 원문을 요약·재서술하고 이 사이트가 쌓은 기록을 덧붙인 큐레이션입니다. 원문 본문은 싣지 않으며, 수치와 표기는 원문 기준을 유지했습니다.

AWS ML Blog 원문 전체 보기 →

같은 분야의 다른 소식

전체 뉴스 →