NIA와 업스테이지, 'Open Ko-LLM 리더보드' 업그레이드로 한국어 모델 성능 강화 > 과학

1. 한국지능정보사회진흥원(NIA)과 업스테이지가 'Open Ko-LLM 리더보드' 업그레이드 발표
2. 지난해 9월 개설된 'Open Ko-LLM 리더보드'에 1,500개 넘는 LLM 모델 참여
3. 임배딩 추론 능력과 산출 추론 능력 추가 지표 적용 예정
4. 업그레이드로 국제 평가 기준에 부합한 한국어 모델 성능 향상 기대

[설명]
한국지능정보사회진흥원(NIA)과 업스테이지가 공동 운영하는 'Open Ko-LLM 리더보드'가 업그레이드되어 임배딩 추론 능력과 산출 추론 능력 지표를 추가할 예정이다. 지난해 9월 개설된 이 리더보드는 1,500개 이상의 LLM 모델이 참여하며, 최고 점수는 70.7점을 기록했다. 추가된 평가 지표는 국제 평가 기준에 부합하여 한국어 모델의 성능 평가 체계를 향상시킬 것으로 기대된다. 업그레이드는 6월부터 적용되며 AI허브 사이트의 리더보드 메뉴에서 확인할 수 있다.

[용어 해설]

- LLM: 초거대언어모델 (Large Language Model)
- 임배딩(Embedding): 단어나 문장을 벡터로 변환하는 것
- 추론 능력(Inference Ability): 주어진 정보를 활용하여 새로운 결론을 이끌어내는 능력

[태그]
#NIA #업스테이지 #모델성능향상 #임배딩 #추론능력

추천0 비추천 0