[이 기사에 나온 스타트업에 대한 보다 다양한 기업정보는 유니콘팩토리 빅데이터 플랫폼 '데이터랩'에서 볼 수 있습니다.]
생성 인공지능(AI) 서비스 아숙업(AskUp)을 운영하는 업스테이지가 개발한 AI 모델이 '허깅페이스 오픈 거대언어모델(LLM) 리더보드'에서 2위를 차지했다고 19일 밝혔다.
허깅페이스는 다양한 언어와 산업에 대한 LMM을 제공하는 글로벌 AI 플랫폼으로 오픈AI의 챗GPT, 구글의 바드 등 300여개가 넘는 글로벌 AI 모델들이 허깅페이스의 오픈 LLM 리더보드에서 경쟁하고 있다. 매일 수십개의 전세계 각국 대표 AI 모델들이 업데이트되며 치열한 경쟁이 이뤄지는 리더보드는 △모델의 추론 △상식능력 △언어이해 종합능력 △환각현상(할루시네이션) 방지 등 4가지 지표의 평균 점수로 최종 순위를 결정한다.
LLM은 많은 양의 텍스트 데이터를 학습해 자연어처리(NLP)의 다양한 과제를 수행할 수 있는 생성AI 대표 모델이다. 최근에는 오픈AI의 챗GPT, 구글의 바드, 메타의 라마 등 글로벌 빅테크 기업의 대표 모델들이 뜨거운 경쟁을 벌이고 있다. 1000억개 매개변수(100B) 이하의 오픈 LLM들의 경쟁도 허깅페이스의 리더보드를 통해 시간 단위로 치열하게 이뤄지고 있다.
업스테이지는 이달 초 자체 구축한 모델을 허깅페이스의 리더보드에 제출해 성능을 평가받았다. 그 결과 업스테이지의 모델은 메타가 이날 공개한 '라마2' 70B 모델에 이어 평균 64.7점으로 2위를 차지했다. 이는 30B(300억) 매개변수 모델 중 최고의 순위로 라마2의 절반도 안되는 사이즈로 경쟁력 있는 결과를 만든 것이다.
업스테이지의 모델은 비교적 작은 모델 사이즈에도 생성AI의 가장 큰 문제점 중 하나인 환각현상 방지 지표에서는 56.5점을 기록, 메타의 최신 '라마2' 모델(52.8점)을 앞질렀다. 이 모델은 라마2를 제외한 메타, MS 등 빅테크 기업이 만든 모델 대비 평균 10% 가량 높은 성적으로 2위를 기록했다.
특히 업스테이지는 자체 모델 구축에 나선지 약 두 달 만에 고성능의 AI 모델을 만든 것으로 알려졌다. 업스테이지는 최초의 한국어 자연어이해(NLU) 평가 데이터셋인 '클루(KLUE)'를 직접 구축한 것은 물론, 생성AI 서비스 AskUp을 직접 운영하며 쌓은 국내 최고의 프롬프트 엔지니어링 및 파인튜닝 노하우를 바탕으로 이번 오픈 LLM 모델을 개발했다.
업스테이지는 추가적으로 국내 다양한 산업의 기업들의 요구에 부응하고자 한국어 성능을 높이기 위해 한국어 데이터를 추가 학습시킬 예정이다.
김성훈 업스테이지 대표는 "업스테이지의 AI 기술력이 지금 가장 치열한 경쟁을 벌이고 있는 생성AI 글로벌 톱 플랫폼의 평가에서도 세계 최고의 성과를 거둬 무척 기쁘다"며 "이번에 입증된 업스테이지의 기술력을 바탕으로 국내 기업은 물론 전세계 모든 기업들이 AI를 편리하게 사용할 수 있도록 노력할 것"이라고 말했다.
