업스테이지-프렌들리AI, 솔라 번역모델 인프라 구축

김성태 기자 2024. 7. 10. 21:40
자동요약 기사 제목과 주요 문장을 기반으로 자동요약한 결과입니다.
전체 맥락을 이해하기 위해서는 본문 보기를 권장합니다.

인공지능(AI) 기업 업스테이지는 프렌들리AI와 자사 거대언어모델(LLM)인 '솔라' 기반 번역 모델의 인프라 구축 계약을 체결했다고 10일 밝혔다.

업스테이지는 일일 최대 10만여 건에 달하는 번역 트래픽을 효율적으로 처리하기 위해 프렌들리AI의 인프라 관리 솔루션 '프렌들리 전용 엔드포인트'도 도입했다.

김성훈 업스테이지 대표는 "생성형 AI 인프라의 수행 리더 기업인 프렌들리AI와 협력해서 솔라 번역 모델의 서비스 비용을 효율화하게 돼 기쁘다"고 밝혔다.

음성재생 설정
번역beta Translated by kaka i
글자크기 설정 파란원을 좌우로 움직이시면 글자크기가 변경 됩니다.

이 글자크기로 변경됩니다.

(예시) 가장 빠른 뉴스가 있고 다양한 정보, 쌍방향 소통이 숨쉬는 다음뉴스를 만나보세요. 다음뉴스는 국내외 주요이슈와 실시간 속보, 문화생활 및 다양한 분야의 뉴스를 입체적으로 전달하고 있습니다.

[서울경제]

인공지능(AI) 기업 업스테이지는 프렌들리AI와 자사 거대언어모델(LLM)인 '솔라' 기반 번역 모델의 인프라 구축 계약을 체결했다고 10일 밝혔다.

앞서 업스테이지는 솔라 LLM의 미세조정을 통해 한국어-영어 번역 특화 모델을 응용프로그램 인터페이스(API) 형태로 공개했다. 업스테이지는 일일 최대 10만여 건에 달하는 번역 트래픽을 효율적으로 처리하기 위해 프렌들리AI의 인프라 관리 솔루션 '프렌들리 전용 엔드포인트'도 도입했다.

업스테이지는 트래픽 부하에 따라 그래픽처리장치(GPU) 할당량을 조정하는 '자동 스케일링' 기능을 통해 GPU 비용을 크게 절감했다고 강조했다.

김성훈 업스테이지 대표는 "생성형 AI 인프라의 수행 리더 기업인 프렌들리AI와 협력해서 솔라 번역 모델의 서비스 비용을 효율화하게 돼 기쁘다"고 밝혔다.

전병곤 프렌들리AI 대표는 “업스테이지와 함께 기업들의 생성형 AI 혁신을 돕도록 매진하겠다“라고 전했다.

김성태 기자 kim@sedaily.com

Copyright © 서울경제. 무단전재 및 재배포 금지.

이 기사에 대해 어떻게 생각하시나요?