공유 코드 에이전트 충돌 벤치마크 공개

최근 30일 조회수 —좋아요 —

핵심 요약

ParallACT 평가에서 병렬 코딩 에이전트는 상충 과제 성공률이 62%에서 16%로 떨어졌다.

공유 코드 저장소에서 여러 코딩 에이전트가 서로 다른 요청을 동시에 처리할 때 생기는 충돌을 평가하는 벤치마크 ParallACT가 공개됐다. 11월 3일 발표된 arXiv 프리프린트(2611.00314v1)는 별도 오케스트레이터 없이 작동하는 에이전트들이 각자 만든 코드를 합치는 상황을 다룬다.1

ParallACT는 에이전트별 구현이 공통 인터페이스를 통해 결합돼야 하는 ‘상호보완 과제’와, 같은 코드를 양립할 수 없는 방식으로 고쳐야 하는 ‘상충 과제’로 구성된다. 연구진은 모든 요구사항을 한꺼번에 받은 단일 에이전트 오라클과 실행 순서, 작업 공개 범위, 다른 에이전트의 존재 인식, 통신 채널 제공 여부를 달리한 다중 에이전트 환경을 비교했다.

저자들에 따르면 오라클은 대부분의 과제를 해결했지만 병렬 에이전트의 성능은 크게 낮았다. Claude Code와 Claude Opus 4.8 조합의 상충 과제 성공률은 62%에서 16%로 떨어졌으며, 병합된 코드는 대체로 두 요구사항 중 하나만 충족했다. 두 에이전트 실행 도구와 공개 가중치 모델 3종을 조합한 추가 6개 구성에서도 같은 격차가 나타났다.

다른 에이전트가 있다고 알리는 것만으로는 유의미한 개선이 없었고, 통신 채널도 토큰 비용을 늘리면서 성능 일부만 회복했다. 이는 프리프린트에 담긴 저자 보고 결과다. 논문 링크

Footnotes

  1. arXiv cs.AI, “Decentralized Multi-Agent Coordination and Communication in Shared Codebases”, 2026-11-03. ↩

읽기 목록은 이 브라우저에 저장됩니다.

출처

  1. Decentralized Multi-Agent Coordination and Communication in Shared Codebases — arXiv cs.AI · 자료: 2026. 11. 3.

이 글은 위 출처를 근거로 자동 생성된 뒤 발행됐습니다. 원문을 함께 확인해 주세요. 교차 보도 없이 단독 출처로 작성됐습니다.