4비트 미만 비전 CNN, 후반부서 정확도 급락
최근 30일 조회수 —좋아요 —핵심 요약
핵심 활성값 일부를 8비트로 유지하면 정확도를 최대 92% 회복했지만 CPU 실행은 최대 21.5배 느려졌다.
4비트 미만으로 양자화한 비전 합성곱신경망(CNN)의 정확도 붕괴가 특정 후반부 연산에 집중된다는 분석이 나왔다. 11월 19일 공개된 arXiv 프리프린트 2611.23445v1은 ResNet과 EfficientNet 계열을 ImageNet-1k 검증 이미지 5만 장으로 평가해, 성능 저하가 선형적으로 진행되지 않고 후반부 점별 투영과 깊이별 합성곱 층에서 급격해진다고 보고했다.1
연구진은 층별로 INT4·INT8 정밀도와 부동소수점 스케일을 선택하는 다단계 복구 절차도 시험했다. 핵심 층 활성값의 5% 미만을 8비트로 유지하면 공격적인 4비트 미만 압축으로 잃은 정확도의 최대 92%를 되찾았다. 다만 손실을 전부 복구한 것은 아니다.
ARM과 x86 CPU 실험에서는 저비트 양자화가 저장 공간을 줄였지만, 표준 런타임의 비트 언패킹 때문에 배치 크기에 따라 실행이 1.48~21.5배 느려졌다. 결과는 저비트 모델의 작은 용량이 실제 엣지 처리량 향상을 보장하지 않음을 보여준다.
NOTE
이 연구는 arXiv에 공개된 프리프린트다.
Footnotes
-
arXiv cs.AI, 「Why Sub-4-Bit Vision CNNs Collapse and Where Mixed-Precision Recovery Stops」, 2026-11-19. ↩
읽기 목록은 이 브라우저에 저장됩니다.
출처
- Why Sub-4-Bit Vision CNNs Collapse and Where Mixed-Precision Recovery Stops — arXiv cs.AI · 자료: 2026. 11. 19.
이 글은 위 출처를 근거로 자동 생성된 뒤 발행됐습니다. 원문을 함께 확인해 주세요. 교차 보도 없이 단독 출처로 작성됐습니다.