신청완료!

헉 네이버로부터 투자를 받으신건가요?!

각 분야별로 어떻게 측정하는지도 궁금하네요.

진짜 좋은것 같습니다. 마치 토익점수처럼 쉽게 점수 따는법만 연구하는건 좋지 않다고 생각합니다.

최고입니다.

GPT4가 빠져있는데 특별한이유가 있나요?

요즘 잘 나가는 Claude 3 Opus/sonnet/haiku의 결과가 궁금하기는 하네요.

안녕하세요. 좋은 리더보드 감사합니다.
1. GPT-4가 기존, Turbo, Vision등 여러 variant가 있는데 이들을 비교해주실 수 있을지 궁금합니다.
2. 보시다시피 GPT-4보다 Claude Opus가 더 좋은 성능을 보여준다는 것이 일반적인 평가인데 평가 모델을 GPT 대신 Opus로 하는 것은 어떨까요?

한국어를 완벽이 이해하고 답변도 완벽하게 했지만 영어로 답변한 경우에는 점수는 어떻게 되나요?

안녕하세요, 우선 좋은 벤치마크 제작 감사합니다
제가 자주 보는 뉴스모음 사이트가 있어서, 거기에 간략한 소개글로 LogicKor 리포를 소개해두었습니다
앞으로도 LogicKor 잘 활용해볼게요

open ko llm leaderboard에 비슷한 문제인식을 가지고 있었는데.. 새로운 장 마련해주셔서 감사드립니다!

레포에서 직접 구동해볼때 질문이 하나 있는데요,
실제 성능 뽑을때도 HF 레포에 올려주신 데이터셋만을 활용하나요, 아니면 보드에 올리시는 테스트셋이 별도로 있나요?
많은 유저들이 유입되면 오픈된 데이터셋에 오버피팅된 모델들이 또 다수 업로드되지는 않을까 싶어 문의드립니다!

업스테이지가 찔?려하는듯

혹시 해당 리더보드 운영 끝났나요?