코딩 에이전트
20건
기사 통계를 확인하고 있습니다.
코딩 에이전트 스킬 호출률 측정 연구
4개 실행 환경과 2개 모델에서 스킬 호출의 일관성을 2만400회 실험으로 검증하는 연구가 공개됐다.
토큰 한도 고지, 코딩 에이전트 성능 개선 못해
위약 대조 실험에서 토큰 한도 고지는 코딩 에이전트의 문제 해결률을 유의미하게 높이지 못했다.

코딩 에이전트, 정답 뒤에도 작업 지속
코딩 에이전트가 정답 패치를 만든 뒤에도 작업을 이어가며 일부는 이를 되돌려 오답이 되는 현상이 확인됐다.

인간·에이전트 협업으로 X선 실험 자율화
코딩 에이전트가 싱크로트론 X선 실험을 수행하고 판단과 오류 수정 과정을 추적하는 협업 체계가 제시됐다.

코딩 에이전트 프로젝트 인수 완수율 4.95%
37개 과제 평가에서 코딩 에이전트는 요구사항 복원과 구현에 모두 어려움을 보였다.

코딩 에이전트 벤치마크 타당성 점검
연구진은 코딩 벤치마크 9개의 지표와 교란 요인을 분석하고 구성 타당도 강화 필요성을 제기했다.
코딩 에이전트 정책 준수, 지시 문구에 좌우
86개 과제 실험에서 조건형 정책 문구의 준수율이 낮았고, 모든 환경에 통하는 최적 문체는 없었다.
공유 코드 에이전트 충돌 벤치마크 공개
ParallACT 평가에서 병렬 코딩 에이전트는 상충 과제 성공률이 62%에서 16%로 떨어졌다.
CrossSWE, 코딩 에이전트 저장소 공동 수정 평가
CrossSWE 평가에서 최고 모델도 성공률 58.48%에 그쳐 저장소 간 변경 일관성의 한계를 드러냈다.
코딩 에이전트 선제 해결률 6~25%
Foresight-SWE 평가에서 11개 모델이 후속 결함까지 피한 비율은 6.13~24.53%에 그쳤다.
코딩 에이전트 메모리 파일의 보안 위험
프로젝트 메모리 파일이 지시 주입 경로로 악용될 수 있지만, 보안 영향은 에이전트별로 일관되지 않았다.

AI 인프라 코딩 벤치마크 InfraDev 공개
실제 AI 인프라 변경 과제에서 최전선 코딩 에이전트 6종의 최고 해결률은 38.9%에 그쳤다.

코딩 에이전트, 최적화 후에도 리팩터링 지속
반복 리팩터링 실험에서 코딩 에이전트들이 최적화된 코드를 인식하지 못하고 불필요한 수정을 이어갔다.
코딩 에이전트, 재시작보다 계속 실행이 효율적
초기 실패 예측은 시도별 성공을 가리지 못해 대부분 조건에서 재시작보다 계속 실행하는 편이 효과적이었다.

코딩 에이전트 환각 호출 탐지기 공개
StateMirror는 실행 전 잘못된 도구 호출을 탐지해 해결 수준을 유지하며 시간과 토큰 소비를 줄였다.

낡은 지침 우선한 코딩 에이전트
코딩 에이전트가 낡은 지침을 코드보다 우선했지만 기존 코드를 따르라는 문장으로 오류가 줄었다.

코딩 에이전트, 작업 성공해도 백업은 15%
RegretBench 연구에서 코딩 에이전트의 작업 성공률은 86.1%였지만 사전 백업률은 15.2%에 그쳤다.

코딩 에이전트 승인에 감사 공백 확인
바시 AI 개발 기록에서 에이전트 승인이 기술 책임자 계정의 일반 승인으로 남는 감사 공백이 확인됐다.

코딩 에이전트 테스트 결함 탐지력 60% 미만
TestSuiteBench에서 최신 코딩 에이전트는 테스트 통과율은 높았지만 변이 점수 60%를 넘지 못했다.

멀티에이전트에 전파되는 보상 해킹
한 에이전트의 보상 해킹이 코드·공유 메모리·자연어 계획을 통해 협업 시스템 전체로 퍼질 수 있다는 연구가 나왔다.