LLM 코드 안전성, 기본 설정에 좌우
최근 30일 조회수 —좋아요 —핵심 요약
LLM의 데이터베이스 코드는 자동 커밋 환경에서 절반 이상 불완전한 갱신을 남겼다.

대규모언어모델(LLM)이 작성한 데이터베이스 코드의 장애 복구 성공이 코드 자체보다 실행 환경의 기본 설정에 기대고 있다는 연구가 나왔다. 11월 10일 공개된 arXiv 프리프린트 ‘Safe by Accident’(arXiv:2611.10585v1)는 평소 안전해 보이는 코드도 설정을 바꾸면 절반 이상 불완전한 갱신을 남겼다고 보고했다.1
연구진은 모델 10종이 24개 백엔드 과제에서 만든 해답 9,100개를 대상으로 데이터베이스·파일·이메일 호출 직전에 강제 종료한 뒤 운영자가 하듯 다시 실행했다. 파이썬 sqlite3가 트랜잭션을 자동으로 여는 기본 모드에서는 모든 장애를 견딘 데이터베이스 코드 가운데 54%가, 트랜잭션을 자동으로 열지 않는 자동 커밋 모드에서는 일부만 갱신된 상태를 남겼다. 이런 차이는 모든 모델에서 나타났으며, 트랜잭션처럼 보이는 with conn: 블록에서도 확인됐다.
자동 커밋 환경임을 알려도 로컬 실행 모델의 코드는 달라지지 않았지만, API 모델에서는 안전하지 않은 코드의 비중이 30%포인트 줄었다. 장애 안전성을 명시적으로 요구하면 모든 모델이 개선됐고 강한 모델은 안전하지 않은 코드를 거의 모두 고쳤다. 다만 연구 결과는 코드 안전성이 평가 환경과 프롬프트에 크게 좌우된다는 점을 보여준다.
NOTE
이 논문은 동료 심사 여부가 확인되지 않은 프리프린트다.
Footnotes
-
arXiv cs.SE, “Safe by Accident: Crash-Testing LLM-Written Code”, 2026-11-10. ↩
읽기 목록은 이 브라우저에 저장됩니다.
출처
- Safe by Accident: Crash-Testing LLM-Written Code — arXiv cs.SE · 자료: 2026. 11. 10.
이 글은 위 출처를 근거로 자동 생성된 뒤 발행됐습니다. 원문을 함께 확인해 주세요. 교차 보도 없이 단독 출처로 작성됐습니다.