모델 817건 · 국산 131 · 가격 654 추적 중
AI 에이전트·툴 유즈

AWS, 에이전트 '스킬' 평가하는 전용 지표 공개

AWS ML Blog·2026-09-22영문 원문

요약

AWS가 Strands Evals SDK와 Amazon Bedrock AgentCore Evaluations에 에이전트의 '스킬' 사용을 진단하는 전용 평가지표를 추가했다. 스킬은 SKILL.md 형태로 저장되는 재사용 가능한 도메인별 지침 묶음으로, 에이전트가 필요할 때만 불러와 사용하는 방식이다. 새 지표는 적절한 스킬을 선택했는지 이진 판정하는 Skill Selection Accuracy, 선택한 스킬의 절차를 얼마나 충실히 따랐는지 5단계로 평가하는 Skill Instruction Following, 스킬이 실제로 로드됐는지 확인하는 결정론적 검사 Skill Invoked로 구성된다. AWS는 인사(HR) 어시스턴트 사례를 들어, 잘못된 스킬을 고르는 경우와 올바른 스킬을 고르고도 지시를 일부만 따르는 경우를 구분해 진단할 수 있다고 설명했다.

큐레이터 노트

원문에 없는 맥락입니다

그동안 에이전트 평가가 최종 응답의 그럴듯함만 봤다면, 이 지표는 스킬 선택과 지시 이행 과정을 단계별로 분리해 어느 지점에서 실패했는지 짚어낼 수 있게 한다.

다른 매체는 이렇게 썼다

같은 사안을 다룬 다른 곳의 보도입니다

제미나이 '나 대신 전화', 지인에게도 쓸 수 있게 확장 검토
The Verge AI · 2026-10-05

Android Authority가 APK 분석을 통해 구글 Gemini의 'Call for Me' 기능이 업무용 전화를 넘어 가족이나 친구에게도 메시지를 전달하는 용도로 확장될 수 있음을 발견했다고 The Verge가 전했다. 발견된 '제미나이 콜링' 소개 화면에는 '엄마에게 전화해서 …

Instinct, AI 에이전트 단체 채팅 기능 출시
TechCrunch AI · 2026-10-05

Instinct가 친구들이 함께 AI 에이전트를 사용할 수 있는 단체 채팅 기능을 출시했다. 여행 계획, 카풀 조율, 일정 관리 등의 작업을 그룹으로 처리할 수 있다. 계정이 없는 친구도 참여할 수 있으며, 개인 계정은 별도로 유지된다. 개인 에이전트가 정보를 공유하거나 행동을 취하려면…

올트먼 "AI 혜택 크니 일부 부작용은 감수해야"
The Verge AI · 2026-10-05

샘 올트먼 OpenAI CEO가 해킹, 사기 등 'AI로 인한 나쁜 일'이 일부 발생하더라도 사회가 이를 감수해야 한다고 말했다. 그는 사람들이 AI로 훨씬 더 많은 좋은 일을 할 것이라며 구체적인 이점은 설명하지 않았다. 이 발언은 OpenAI가 AI 규제에 대해 '가벼운 손길' 접근…

이 사안의 흐름

같은 주제를 다룬 이 사이트의 기록 — 최신순

이 글에 나온 말

용어집 전체 →
평가
AI 모델이나 시스템의 출력이 원하는 기준에 얼마나 부합하는지를 정량적·정성적으로 측정하는 절차를 말한다.

이 분야 브리핑

여러 매체가 함께 다룬 사안을 한 번에

이 페이지는 원문을 요약·재서술하고 이 사이트가 쌓은 기록을 덧붙인 큐레이션입니다. 원문 본문은 싣지 않으며, 수치와 표기는 원문 기준을 유지했습니다.

AWS ML Blog 원문 전체 보기 →

같은 분야의 다른 소식

전체 뉴스 →