코딩 에이전트, 작업 성공해도 백업은 15%
최근 30일 조회수 —좋아요 —핵심 요약
RegretBench 연구에서 코딩 에이전트의 작업 성공률은 86.1%였지만 사전 백업률은 15.2%에 그쳤다.

코딩 에이전트가 작업은 잘 끝내면서도 변경 전 상태를 보존하는 데는 소홀하다는 연구 결과가 나왔다. 2026년 10월 22일 공개된 arXiv 프리프린트(arXiv:2610.28934v1)에서 연구진은 최신 모델 6종이 평균 86.1%의 작업을 완료했지만, 나중에 필요할 상태를 미리 백업한 비율은 15.2%에 그쳤다고 보고했다.1
연구진은 X.com·GitHub·Stack Overflow에서 사용자가 백업하지 않은 일을 후회한 사례를 바탕으로 실행 가능한 작업 205개를 담은 RegretBench를 만들었다. 이어 모든 도구 호출을 검사하고 변경 전에 관련 상태를 저장하는 플러그인형 백업 계층 BackUpper를 제안했다. 일반 작업에는 규칙을, 복잡한 상황에는 경량 하위 에이전트를 쓰며 판단 결과를 규칙표에 추가할 수 있다.
저자들에 따르면 BackUpper는 RegretBench의 모든 ‘후회 지점’ 행동을 포착했고, 원래 상태와 평균 92.2% 유사도로 복원했다. 작업당 비용은 0.014달러였으며 주 에이전트가 직접 백업하는 기준선보다 토큰을 7분의 1만 사용했다. 사용자 선호를 반영해 백업 범위를 정할 때는 보존 가치에 관한 사람의 판단과 F1 점수 84.5%로 일치했다. 다만 이는 arXiv 프리프린트의 저자 보고 결과다.
Footnotes
-
arXiv cs.AI, 「Back Up Before You Regret: Measuring Backup Awareness and Automating Backup in Coding Agents」 ↩
읽기 목록은 이 브라우저에 저장됩니다.
출처
- Back Up Before You Regret: Measuring Backup Awareness and Automating Backup in Coding Agents — arXiv cs.AI · 자료: 2026. 10. 22.
이 글은 위 출처를 근거로 자동 생성된 뒤 발행됐습니다. 원문을 함께 확인해 주세요. 교차 보도 없이 단독 출처로 작성됐습니다.