|
뉴엔AI, K-AI 리더보드 1위 달성
이번에 1위에 오른 모델은 'QuettaLLMs-27B-Koreasoner-V3'다. K-AI 리더보드는 과학기술정보통신부와 한국지능정보사회진흥원(NIA)이 관리하는 AI 허브 기반 평가 체계다.
이 리더보드는 한국어 문화·언어 이해도를 평가하는 "CLIcK"과 전문직 자격시험 기반의 고난도 추론 능력을 평가하는 'KMMLU-Pro' 등을 통해 순위를 매긴다.
뉴엔AI는 이번 성과의 배경으로 학습 데이터 최적화 전략을 제시했다. 회사는 다년간 축적한 온라인 트렌드 기반 구어체 데이터셋을 학습에 활용해 한국어 문법과 맥락 이해 성능을 높였다고 설명했다.
평가 결과 QuettaLLMs는 'CLIcK'에서 0.794점, 'KMMLU-Pro'에서 0.676점을 기록했다.
김광수 뉴엔AI 부장은 "모델 규모보다 데이터에 대한 깊은 이해와 과제에 최적화된 학습이 한국어 특화 성능을 좌우한다는 점을 보여준 사례"라며 "한국어 맥락에 최적화된 고성능 언어모델을 지속적으로 고도화하겠다"고 말했다.
김평화 기자 peace@mt.co.kr
Copyright ⓒ 머니투데이 & mt.co.kr. 무단 전재 및 재배포, AI학습 이용 금지.
|
|