![](http://ac.namu.la/20240524sac/ce3e76455bccf8c3a53f38fb8940f97317643f3fa122ef5e7a4bea37203cb008.png?expires=1719795600&key=8IEaScSbTTbI6as8_PiICg)
1. Hellaswag - 상식수준 다음 단어 추론능력
2. Winogrande - 대명사가 가르키는 인물 맞추는 능력
이 벤치 높으면 rp나 스토리를 잘쓰는 경향이 있음.
Mmlu나 gsm8k같은건 딱히 스토리 진행에서 문제가 될게 아님.
1. Hellaswag - 상식수준 다음 단어 추론능력
2. Winogrande - 대명사가 가르키는 인물 맞추는 능력
이 벤치 높으면 rp나 스토리를 잘쓰는 경향이 있음.
Mmlu나 gsm8k같은건 딱히 스토리 진행에서 문제가 될게 아님.