국대 AI 3파전…모티프 탈락·LG·SKT·업스테이지 진출

과학기술정보통신부, 독자AI파운데이션 모델 프로젝트 2차 단계평가 발표

[사진=과학기술정보통신부]

독자 인공지능(AI) 파운데이션 모델(독파모) 프로젝트의 최종 경쟁 구도가 업스테이지·SK텔레콤(SKT)·LG AI연구원 3파전으로 좁혀졌다. 추가 공모로 합류하며 경쟁에 뛰어들었던 모티프테크놀로지스(모티프)는 2차 단계평가 문턱을 넘지 못했다.

18일 과학기술정보통신부(과기정통부)와 정보통신산업진흥원(NIPA)은 독파모 2차 단계평가 결과를 공개했다. 평가 결과 추가 공모를 통해 합류했던 모티프가 탈락하고 업스테이지, SKT, LG AI연구원이 다음 단계에 진출했다.

과기정통부에 따르면 이번 2차 단계평가는 △벤치마크 평가(40점) △전문가 평가(35점) △사용자 평가(25점)를 합산해 진행됐다.

벤치마크 평가는 아티피셜 애널리시스(AA)의 '인텔리전스 인덱스(AAII)' 25점과 NIA 벤치마크 15점으로 구성됐다. AAII는 △에이전트 △코딩 △일반 △과학 분야 등을 포함한 고난도 벤치마크 9종을 활용해 평가했다. NIA 벤치마크 평가는 △수학 △지식 △장문이해 △지시이행 △한국어 △안정성 △신뢰성 분야를 중심으로 진행됐다.

벤치마크 평가에서 4개 정예팀의 평균 점수는 22.5점으로 나타났다. 1위와 4위 간 점수 차는 4.0점이었다.

전문가 평가는 외부 AI 전문가로 구성된 전문가위원회가 진행했다. 정예팀이 제출한 평가서류 등을 바탕으로 약 일주일 동안 △개발 전략 및 기술(10점) △개발 성과 및 계획(10점) △파급효과 및 기여계획(15점)을 심층 평가했다. 전문가위원회에는 AI 알고리즘·서비스·데이터 분야 전문성을 보유하고 이해충돌이 없는 전문가 10명이 참여했다.

전문가 평가에서 4개 정예팀의 평균 점수는 28.8점으로 집계됐다. 1위와 4위 간 점수 차는 2.4점이었다.

이번 단계평가에서 처음 도입된 사용자 평가는 AI 전문 사용자 평가(15점)와 일반 국민 평가(10점)로 구성됐다. AI 전문 사용자 평가에는 AI 스타트업 대표 등 49명이 참여했으며 일반 국민 평가는 국민 185명이 참여했다. 단순히 AI 모델의 성능을 평가하는 데 그치지 않고 실제 다양한 이용자가 모델을 직접 사용하면서 체감하는 사용성과 효용성을 종합적으로 평가하기 위해 마련됐다.

사용자 평가에서 4개 정예팀의 평균 점수는 17.6점으로 나타났다. 1위와 4위 간 점수 차는 5.0점으로, 벤치마크 평가와 전문가 평가보다 격차가 크게 나타났다.

한편 과기정통부는 독파모 프로젝트 다음 단계에 진출한 정예팀을 대상으로 고성능 그래픽처리장치(GPU) B200 지원을 확대할 예정이다.

과기정통부 측은 "최상위급 독자 AI 모델 필요성을 깊이 인식하고 기존 방식을 뛰어넘는 새로운 지원 체계를 관계부처와 논의 중에 있다"며 "추후 구체적인 내용을 발표할 계획"이라고 밝혔다.