뤼이드 자체개발 AI 모델, 허깅페이스 LLM 전세계 1위에

이새봄 기자(lee.saebom@mk.co.kr) 2023. 10. 5. 14:57
음성재생 설정
번역beta Translated by kaka i
글자크기 설정 파란원을 좌우로 움직이시면 글자크기가 변경 됩니다.

이 글자크기로 변경됩니다.

(예시) 가장 빠른 뉴스가 있고 다양한 정보, 쌍방향 소통이 숨쉬는 다음뉴스를 만나보세요. 다음뉴스는 국내외 주요이슈와 실시간 속보, 문화생활 및 다양한 분야의 뉴스를 입체적으로 전달하고 있습니다.

인공지능(AI) 기반 교육기술 기업 뤼이드는 자체 개발한 생성AI 모델이 4일 세계 최대 머신러닝 플랫폼 허깅페이스에서 운영하는 ‘오픈 LLM 리더보드’ 평가에서 74.07점을 기록하며 글로벌 1위에 올랐다고 5일 밝혔다.

오픈AI, 구글, 아마존 등 글로벌 빅테크들의 초거대 AI 언어모델들이 미래 시장을 두고 치열한 경쟁 중인 가운데, 전세계 500여 개의 오픈소스 생성 AI 모델들의 성능을 평가해 순위를 공개하는 허깅페이스의 오픈 LLM 리더보드는 하루에도 수십개 씩 새로운 모델이 나올 정도로 치열한 전세계 AI 기술 경쟁의 각축장이다. 평가 지표는 총 4가지로, 초등학교 수준의 과학 추론 능력, 인간에게는 쉽지만 AI 모델에게는 까다로운 상식 능력, 초등 수학, 미국 역사, 컴퓨터 과학, 법률 등을 포함한 종합적 언어 이해 능력, 환각현상(할루시네이션) 방지를 위한 진실성 검사 등 이들 지표의 평균 점수를 통해 종합 점수와 순위가 정해진다. 뤼이드는 4가지 지표 모두 고른 고득점을 얻어 종합 점수에서 최고점을 기록했다.

현재 상위권 주요 참가팀을 살펴보면, 2위는 대만 항공우주 회사, 3위는 중국 알리바바와 서북공업대(Northwestern polytechnical university) 연합 모델, 5위는 중국 연합통신으로 추정된다. 각 참가자들이 공식적인 정보를 공개하지 않아 모델명으로 추정할 수 밖에 없다는 게 회사 측의 설명이다. 이외에도 이미지 생성 AI인 ‘스테이블디퓨전’ 개발사 ‘스태빌리티 AI’의 LLM이 71.42로 47위를 기록중이며, 메타의 ‘라마-2’는 67.35점으로 106위에 랭크되어 있다.

이 리더보드는 상시 오픈 상태로, 참가기업이나 개인이 자체 LLM을 제출하면 평가 후 바로 리더 보드가 갱신된다. 국내에서는 지난 8월 AI 기술 기업 업스테이지가 챗GPT 3.5 모델을 누르고, 전세계 1위를 차지해 주목받았으며, 현재 14위를 기록중이다. 뤼이드는 지난 9월 처음으로 제출한 모델이 73.69점을 기록, 세계 2위에 랭크되었으며, 이번에 한 달 만에 새로 제출한 모델이 74.07점을 받아 1위에 올랐다.

장영준 뤼이드 대표는 “이번 1위를 통해 교육 분야에 국한되지 않은 AI 기술 기업으로서 LLM 학습 능력과 튜닝 기술이 세계 선두에 있음을 증명했다”며, “그간의 교육학습 AI 운영으로 축적된 프롬프트 엔지니어링이 파인튜닝 기술과 좋은 시너지를 발생시킬 것으로 기대된다”고 밝혔다.

Copyright © 매일경제 & mk.co.kr. 무단 전재, 재배포 및 AI학습 이용 금지

이 기사에 대해 어떻게 생각하시나요?