LLM 기억 삭제 오류가 정확도 낮춘다
최근 30일 조회수 —좋아요 —핵심 요약
LLM 에이전트가 질문에 필요한 기억을 잘못 삭제하면 필터링의 정확도 향상이 손실로 역전될 수 있다.
LLM 에이전트가 오래됐다고 판정한 기억을 삭제할 때, 판별 오류가 정확도 향상을 오히려 손실로 뒤집을 수 있다는 연구가 나왔다. 2026년 11월 16일 공개된 arXiv 프리프린트 arXiv:2611.17338는 질문에 꼭 필요한 사실을 잘못 삭제하는 ‘거짓 삭제(false-drop)’ 위험을 분석했다.1
연구진이 세 모델에 통제된 민감도 개입을 적용한 결과, 판별이 완벽할 때 하드 필터링은 정확도를 0.1860.230 높였지만, 시험한 신뢰도가 가장 낮을 때는 0.1760.181 낮췄다. 표적 개입에서도 거짓 삭제가 불필요한 기억을 남기는 ‘거짓 유지(false-keep)’보다 성능을 유의미하게 더 떨어뜨렸다. 다만 삭제하지 않아도 잘못된 라벨이 생성을 유도하면 실패할 수 있었다.
102개 보정·102개 시험 사례로 고정한 분할에서는 배포 조건에 맞춘 단순 게이트가 정확도 0.655를 기록해 항상 하드 필터링한 0.641보다 높았고, 시험 결과를 미리 활용한 오라클 선택의 0.662에는 못 미쳤다. 저자들은 정확도 역전 지점이 정답 라벨을 요구하고 모델·과제마다 달라 배포 기준으로 쓸 수 없다고 지적한다. 따라서 맞춤 데이터로 질문 핵심 정보의 거짓 삭제 비용을 검증하고, 검증할 수 없다면 라벨 없이 기억을 보존하라고 제안한다.
NOTE
이 연구는 동료 심사 여부가 확인되지 않은 프리프린트다.
Footnotes
-
arXiv cs.AI, “When Should LLM Agents Forget? Memory Filtering Under Query-Critical Resolver Errors” ↩
읽기 목록은 이 브라우저에 저장됩니다.
출처
- When Should LLM Agents Forget? Memory Filtering Under Query-Critical Resolver Errors — arXiv cs.AI · 자료: 2026. 11. 16.
이 글은 위 출처를 근거로 자동 생성된 뒤 발행됐습니다. 원문을 함께 확인해 주세요. 교차 보도 없이 단독 출처로 작성됐습니다.