'두나무'가 개발한 AI, 글로벌 평가기관 BIRD-SQL서 1위

정확도·효율성에서 높은 점수
가상자산 시장에 활용할 AI도 개발

[서울=뉴시스] 국내 가상자산거래소 업비트 운영사인 두나무가 개발한 인공지능(AI) 모델이 글로벌 평가 지표인 BIRD-SQL에서 글로벌 리더보드 1위를 달성했다. (사진=두나무) 2024.01.25 *재판매 및 DB 금지

[서울=뉴시스]이지영 기자 = 국내 가상자산거래소 업비트 운영사 두나무는 자사가 연구·개발한 인공지능(AI) 모델이 글로벌 AI 모델 평가 지표인 BIRD-SQL에서 글로벌 리더보드 1위를 달성했다고 25일 밝혔다.

이번에 1위를 차지한 '텍스트-SQL 변환 모델'은 사람의 언어를 데이터 관리 프로그래밍 언어인 SQL로 변환하는 AI 모델이다. 생성형 AI 등장 이후 큰 관심을 받는 연구 분야다.

두나무 머신러닝팀이 개발한 텍스트-SQL 모델은 사용자가 자연어로 질문을 입력하면 SQL 변환이 필요한 데이터를 추출, 챗GPT 성능을 한층 강화하는 것이 특징이다.

특히 AI 모델 성능 측정 벤치마크인 BIRD-SQL(A Big Bench for Large-Scale Database Grounded Text-to-SQLs) 글로벌 리더보드에서 정확도 점수 65.4%, 효율성 점수 71.3%를 각각 받으며 1위에 올랐다. 이는 GPT-4의 정확도(54.8%)와 효율성(60.7%)을 각각 10% 이상 상회하는 수치다. 2위 모델과도 정확도 항목에서 4.7%, 효율성에서 3.6%의 격차를 각각 기록했다. 처음 1위에 오른 지난 14일 이후 현재까지도 계속 선두를 지키고 있다.

이동준 두나무 머신러닝팀장은 "두나무는 더 정교하게 자연어를 이해하고 누구나 쉽게 기술을 활용할 수 있도록 연구 중"이라며 "명령어에 따라 성능이 크게 달라지는 거대언어모델(LLM)의 한계점을 개선하는 데 초점을 맞춰 두나무 서비스 향상에 기여할 것"이라고 말했다.

한편 두나무 머신러닝팀은 주식과 가상자산 시장에서 활용되는 AI 모델을 연구·개발 중이다. 현재 AI 모델링과 튜닝, 모델 평가 매트릭 설정 등 다양한 데이터를 발굴해 두나무 서비스에 활용하고 있다.

☞공감언론 뉴시스 jee0@newsis.com