https://huggingface.co/maywell/Synatra-V0.1-7B-Instruct
Instruction 모델이라서 모델 이름 수정했습니다 !
7b Instruct 랭킹
시나트라 v0.1 결과
전체 리더보드 중에서 7b Instruct 중에서는 1위입니다
이제 Instruct 아닌 모델들을 이기는걸 목표로 한번 달려보겠습니다.
결과
ARC | HellaSwag | MMLU | TruthfulQA | |
시나트라 v0.1 | 55.29 | 76.63 | 55.29 | 55.76 |