사고흐름 통제, 추론 첫 토큰이 좌우

최근 30일 조회수 —좋아요 —

핵심 요약

초기 토큰 조정이 모델의 사고흐름 통제와 지시 준수율을 크게 높인다는 연구 결과가 나왔다.

사고흐름 통제, 추론 첫 토큰이 좌우 — 기사 주제를 표현한 AI 생성 개념 삽화
AI 생성 개념 삽화 · 실제 사건을 촬영한 사진이 아닙니다.

사고흐름(CoT)을 통제하는 능력의 한계가 추론 시작 직후 첫 몇 토큰의 엔트로피 붕괴와 관련 있다는 연구가 나왔다. 2026년 11월 2일 공개된 arXiv:2610.40939v1은 사고흐름을 바꾸는 능력이 시작 토큰에 크게 좌우된다고 보고했다.1

연구진은 추론 시점에 초기 토큰을 조정하는 두 방법을 시험했다. 미리 토큰을 채우는 ‘프리필링(prefilling)’은 단 하나의 토큰만으로도 통제 가능성을 크게 높였다. 자주 등장하는 시작 토큰을 금지하고 문맥 내 예시를 함께 주는 방법은 여러 모델에서 지시 준수율을 평균 34~41%포인트 개선했다. 효과는 정보를 추가하거나 표현 방식을 바꾸는 통제에서 주로 나타났고, 정보를 숨기거나 제거하는 억제 통제는 반응이 일정하지 않았다.

모델별 성능도 추가·문체 통제끼리, 억제 통제끼리는 양의 상관관계를 보였지만 두 집단 사이는 대체로 음의 상관관계를 보였다. 감시 가능성과의 관계 역시 평가 유형에 따라 달랐다. 추가·문체 통제는 비교적 일관되게 양의 관계를, 억제 통제는 자주 음의 관계를 나타냈다. 연구진은 특정한 추론 시작이 어려운 문제와 추론 내용을 바꾸는 일반적 한계를 구분해 평가해야 한다고 제안했다.

Footnotes

  1. arXiv cs.AI, “The First Few Tokens Matter: Understanding Chain-of-Thought Controllability” ↩

읽기 목록은 이 브라우저에 저장됩니다.

출처

  1. The First Few Tokens Matter: Understanding Chain-of-Thought Controllability — arXiv cs.AI · 자료: 2026. 11. 2.

이 글은 위 출처를 근거로 자동 생성된 뒤 발행됐습니다. 원문을 함께 확인해 주세요. 교차 보도 없이 단독 출처로 작성됐습니다.