양자화
3건
기사 통계를 확인하고 있습니다.
4비트 미만 비전 CNN, 후반부서 정확도 급락
핵심 활성값 일부를 8비트로 유지하면 정확도를 최대 92% 회복했지만 CPU 실행은 최대 21.5배 느려졌다.

ResServe, 잔여값 보정으로 FP4 추론 개선
ResServe는 칩 내 잔여값 보정으로 FP4 LLM 추론의 정확도를 높이면서 지연시간 증가를 억제했다.
DRQ, 저비트 LLM 양자화 성능 개선
재구성 손실 최소화의 한계를 보완한 DRQ가 추가 추론 부담 없이 다양한 양자화 LLM의 과제 성능을 높였다.