https://arxiv.org/abs/2012.00955
How Can We Know When Language Models Know? (Zhengbao Jiang, Jun Araki, Haibo Ding, Graham Neubig)
lm 기반 qa 모델에서 나오는 답을 신뢰할 수 있는가? 결국 캘리브레이션 문제가 됨. 논문에서 제안한 방법과 여러 기존 방법들을 사용해 캘리브레이션을 적용.
#language_model #qa #calibration