부산외대가 과학기술정보통신부 주관 '2025년 LLM 성능 평가 데이터셋 구축 사업'에 최종 선정돼 2개 분야를 수주했다고 3일 밝혔다.

이번 사업은 '독자 AI 파운데이션 모델 프로젝트'와 함께 과학기술정보통신부가 추진하는 2025년 '월드 베스트 LLM 데이터 활용 지원 사업'의 하나다. 부산외대, 인사이트정보, 딥로딩, 에프아이솔루션이 컨소시엄을 이뤄 최종 선정됐다.

부산외대는 이번 사업에서 AI 파운데이션 모델의 성능 검증을 담당하며 한국어와 한국 문화 기반의 고도화된 문제 해결 능력을 평가하는 데 중점을 둘 계획이다. 정량적·정성적 평가가 가능한 고품질 성능 평가 데이터셋을 구축해 초거대 AI의 성능과 글로벌 경쟁력을 높이는 데 기여할 예정이다.

이번에 구축되는 데이터셋은 텍스트 기반의 LLM 성능 평가에 우선 활용되며 앞으로는 멀티모달(LMM) 및 에이전트형 AI(Agentic AI) 등 차세대 모델까지 포괄하는 복합적이고 정교한 성능 평가 체계의 기준이 될 것으로 기대된다.

박기양 AI언어학습연구소장은 "현재 국내에는 한국어와 한국 사회·문화적 맥락을 반영해 AI 모델을 객관적으로 평가할 수 있는 공신력 있는 벤치마크와 평가 체계가 부족하다"며 "국내외 AI 모델 및 성능 평가 데이터 동향을 분석하고, 국내 활용 환경에 적합한 성능 평가 데이터 구축 전략과 평가 방법론을 수립해 국내 AI 기술 발전에 이바지할 수 있도록 노력하겠다"고 말했다.