에이전트 스킬, 구성 따라 성능 저하

최근 30일 조회수 —좋아요 —

핵심 요약

스킬 효과는 실행 구성에 따라 달라졌으며 연산 중심 선택과 단계별 계획이 통과율을 높였다.

에이전트 스킬(Agent Skills)은 관련성이 높다고 해서 반드시 성능을 높이지는 않는다는 실증 결과가 나왔다. 2026년 10월 8일 공개된 arXiv 프리프린트 2610.08875v1은 SkillsBench 87개 과제에서 같은 모델·실행 도구 구성을 유지한 채, 스킬 사용 여부에 따른 통과율 차이를 측정했다.1

연구진이 동일한 스킬을 9가지 실행 구성에서 비교한 결과, 과제의 36.78%에서는 한 구성에 도움이 된 스킬이 다른 구성에서는 오히려 성능을 떨어뜨렸다. 실행 기록을 분석하니 권장 절차 자체가 작업 부담으로 바뀌는 사례도 있었다. 또 관련성 중심 순위는 더 유용한 후보를 놓쳤다. 3개 구성에서 과제에 필요한 연산을 얼마나 지원하는지 기준으로 후보 순서를 다시 매기자, 평가한 후보군 내 첫 번째 선택의 통과율이 4.35~5.80%포인트 올랐다.

여러 스킬을 묶을 때는 단순 사용 순서보다 단계별 계획(Stage Plan)과 의존성 그래프(Dependency DAG)가 나았으며, 그래프의 추가 이점은 스킬 5~6개를 제공한 과제에 집중됐다. 연구진은 복구 가능한 실행 절차, 과제 요구사항 보존, 최종 산출물 검사 등을 잇는 작성 원칙 17가지를 제안했다. 이 논문은 arXiv에 공개된 프리프린트다.

Footnotes

  1. arXiv cs.AI, An Empirical Study of Agent Skills’ Downstream Utility, arXiv:2610.08875v1. ↩

읽기 목록은 이 브라우저에 저장됩니다.

출처

  1. An Empirical Study of Agent Skills' Downstream Utility — arXiv cs.AI · 자료: 2026. 10. 8.

이 글은 위 출처를 근거로 자동 생성된 뒤 발행됐습니다. 원문을 함께 확인해 주세요. 교차 보도 없이 단독 출처로 작성됐습니다.