본문 바로가기
bar_progress

글자크기 설정

닫기

플리토, 한국형 AI 성능평가 리더보드에 벤치마크 데이터셋 제공

시계아이콘00분 49초 소요
숏뉴스
숏 뉴스 AI 요약 기술은 핵심만 전달합니다. 전체 내용의 이해를 위해 기사 본문을 확인해주세요.

불러오는 중...

닫기
뉴스듣기 글자크기

인공지능(AI) 언어 데이터 전문 기업 플리토는 한국어 초거대언어모델의 성능을 비교·평가하는 'Open Ko-LLM 리더보드’에 벤치마크 데이터셋을 제공했다고 12일 밝혔다.


Open Ko-LLM 리더보드는 한국지능정보사회진흥원(NIA)과 업스테이지가 함께 구축하고 운영 중인 한국어 대규모 언어 모델(LLM) 성능 평가 플랫폼이다. 국내 기업과 연구기관이 LLM을 등록하고 성능 경쟁을 할 수 있는 환경을 제공한다. 한국형 인공지능 개발과 자연어 처리 기술의 발전에 기여하고 있다.


플리토는 Open Ko-LLM 리더보드를 운영 중인 업스테이지의 파트너사로 ▲상식 추론과 문맥 이해 능력 ▲수학적 추론과 계산능력 등을 평가할 수 있는 벤치마크 데이터셋을 한국어로 제공했다. 상식 추론과 수학적 추론 등 2가지 평가 항목의 추가로 국제적으로 인정받고 있는 허깅페이스의 ‘Open LLM 리더보드’와 평가 기준을 맞추게 되는 것으로 국내 AI 생태계 발전에 큰 의미가 있다.


플리토는 데이터셋 구축 참여를 계기로 한국어 대규모 언어 모델의 성능을 평가하고 향상시키기 위한 고품질 언어 데이터 구축에 박차를 가할 예정이다. 상용 분야에 적용된 한국어 언어모델을 평가할 수 있는 벤치마크 데이터 셋을 업스테이지와 협력하여 구축 중이며, 연내 ‘Open Ko-LLM’를 통해 추가로 공개한다.


플리토 이정수 대표는 "벤치마크 데이터셋 제공을 통해 한국어 대규모 언어 모델 리더보드가 국제적인 평가 기준을 갖춰 의미가 크다"며 "다년간 쌓아온 언어 데이터 구축 기술 능력을 바탕으로 한국형 인공지능 생태계 발전에 더욱 힘을 쏟겠다"고 말했다.



플리토는 지난달 9일 AI 기술업체 업스테이지와 AI 언어 데이터 구축을 위한 업무협약을 체결했다. 태국어, 일본어, 베트남어, 라오스어, 캄보디아어 등 상대적으로 언어 데이터가 부족한 아시아 권역에 대한 데이터셋 구축을 중심으로 협업하기로 했다.




박형수 기자 parkhs@asiae.co.kr
<ⓒ투자가를 위한 경제콘텐츠 플랫폼, 아시아경제(www.asiae.co.kr) 무단전재 배포금지>

AD
AD

당신이 궁금할 이슈 콘텐츠

AD

맞춤콘텐츠

AD

실시간 핫이슈

AD

다양한 채널에서 아시아경제를 만나보세요!

위로가기