LG CNS는 생성형 인공지능(AI) 도입을 원하는 금융 기업을 위한 '금융 맞춤형 AI 평가 도구'를 개발했다고 24일 밝혔다.

이는 LG AI 연구원의 엑사원 3.5, 메타의 라마, 알리바바의 큐원 2.5를 포함한 수십개의 개방형 거대 언어 모델(LLM)을 평가해 뱅킹, 보험, 증권 등 각 금융 서비스에 가장 적합한 AI 모델을 찾아주는 도구로, 29가지 평가 지표와 약 1200개의 데이터셋으로 구성됐다.

주요 평가 항목은 ▲금융 지식을 기반으로 추론하는 능력 ▲수학적 추론 능력 ▲복잡한 질문 이해력 ▲문서 요약 능력 ▲금융 용어 이해도 ▲AI 에이전트 사용 능력 등이다.

LG CNS는 인공지능이 답변하기 어려워하는 금융 관련 추론 문제들을 29개 평가 지표에 적용해 성능 검증 정확도를 높였다고 설명했다.

LG CNS 관계자는 "금융 전문가들과 협업해 데이터셋의 평가 자료에 실제 금융 현장에서 사용하는 서비스 정보나 전문 지식이 정확히 반영됐는지 점검하며 완성도를 높였다"면서 "이를 통해 AI가 금융 산업 내 규제 요건이나 복잡한 서비스 구조 안에서도 정확한 답변을 하는지 판단할 수 있게 했다"고 강조했다.

LG CNS는 이 평가 도구를 통해 금융 기업들이 AI를 도입할 때 최적의 LLM 선정부터 커스터 마이징, 안정적 운영까지 금융권 특화 생성형 AI 적용 전 단계에서 차별화된 솔루션을 제공해 나간다는 계획이다.

현신균 LG CNS 대표는 "금융 서비스에 생성형 AI를 도입하고자 하는 기업의 가장 큰 고민은 어떤 AI 모델이 서비스에 가장 적합할지 파악하는 것"이라며 "LG CNS의 금융 특화 AI 평가 도구는 금융 기업들의 고민을 빠르게 해결할 수 있는 최적의 솔루션이 될 것"이라고 말했다.