LLM 동적 배치의 출력 불일치 확인
최근 30일 조회수 —좋아요 —핵심 요약
연구진은 커널 검증으로 배치 불변성 통과율을 67.6%에서 91.9%로 높였다고 보고했다.

대규모언어모델(LLM) 서비스의 동적 배치가 같은 요청에도 다른 수치 출력을 만들 수 있다는 연구 결과가 나왔다. 2026년 10월 29일 공개된 arXiv 프리프린트 2610.36623v1은 배치 적용이 가능한 공개 산출물 83개 가운데 19개에서 배치 불변성(BI) 위반을 확인했다고 보고했다. 배치 불변성이란 함께 처리되는 요청이 달라져도 동일한 입력에는 같은 출력이 나오는 성질이다.1
연구진은 기존 커널 생성 에이전트가 정확성과 효율은 최적화하지만 배치 불변성을 놓친다고 지적했다. 이를 보완하려고 계약 기반 정적 의존성 분석과 서로 다른 배치 환경에서 비트 단위 일관성을 검사하는 동적 검증을 결합했다. 이 검사를 최적화 과정의 연속 승인 단계로 넣어, 구조적으로 위험하거나 실제 출력이 달라지는 후보를 성능 측정 전에 거르고 에이전트에 피드백한다.
실제 LLM 서비스 작업과 세 에이전트 프레임워크에서 시험한 결과, 저자들은 배치 불변성 통과율이 67.6%에서 91.9%로 올랐으며 기존 기하평균 속도 향상의 91.8%를 유지했다고 밝혔다. 다만 이 수치는 저자들이 보고한 실험 결과이며, 논문은 arXiv 프리프린트다.
Footnotes
-
arXiv cs.AI, God Does Not Play Dice: Enforcing Batch Invariance in Agentic Kernel Generation ↩
읽기 목록은 이 브라우저에 저장됩니다.
출처
- God Does Not Play Dice: Enforcing Batch Invariance in Agentic Kernel Generation — arXiv cs.AI · 자료: 2026. 10. 29.
이 글은 위 출처를 근거로 자동 생성된 뒤 발행됐습니다. 원문을 함께 확인해 주세요. 교차 보도 없이 단독 출처로 작성됐습니다.