코딩 에이전트 정책 준수, 지시 문구에 좌우

최근 30일 조회수 —좋아요 —

핵심 요약

86개 과제 실험에서 조건형 정책 문구의 준수율이 낮았고, 모든 환경에 통하는 최적 문체는 없었다.

코딩 에이전트가 AGENTS.md 같은 에이전트 컨텍스트 파일(ACF)의 정책을 따르는 비율은 지시 문구에 따라 달라진다는 연구가 나왔다. 11월 4일 공개된 arXiv 프리프린트 2611.04367v1은 조건형 문구가 규정형·설명형 문구보다 덜 준수됐다고 보고했다.1

연구진은 코딩 에이전트의 정책 준수 문제를 살피기 위해 벤치마크 과제 86개의 ACF에 하나의 정책을 네 가지 문체로 바꿔 넣고, 네 가지 하니스-모델 조합에서 실험했다. 규정형과 설명형 가운데 어느 쪽의 준수율이 더 높은지는 조합마다 달라, 모든 환경에 통하는 한 가지 최적 문체는 확인되지 않았다.

다만 초록은 구체적인 준수율과 네 번째 문체, 사용한 모델·하니스의 명칭을 제시하지 않는다.

Footnotes

  1. arXiv cs.SE, “Do Coding Agents Follow AGENTS.md? The Effect of Policy Wording on Instruction Compliance”, 2026-11-04. ↩

읽기 목록은 이 브라우저에 저장됩니다.

출처

  1. Do Coding Agents Follow AGENTS.md? The Effect of Policy Wording on Instruction Compliance — arXiv cs.SE · 자료: 2026. 11. 4.

이 글은 위 출처를 근거로 자동 생성된 뒤 발행됐습니다. 원문을 함께 확인해 주세요. 교차 보도 없이 단독 출처로 작성됐습니다.