IT >

과기정통부, AI 파운데이션 모델 성능 평가 데이터셋 구축 사업 추진

과기정통부, AI 파운데이션 모델 성능 평가 데이터셋 구축 사업 추진
연합뉴스

[파이낸셜뉴스] 과학기술정보통신부가 한국지능정보사회진흥원(NIA)과 함께 총 24억원을 투입해 '독자 인공지능(AI) 파운데이션 모델'의 성능을 평가하기 위한 데이터셋 구축 사업을 추진한다고 17일 밝혔다.

과기정통부는 오는 8월 7일까지 해당 사업의 수행기관을 공개 모집한다. 이번 사업은 기존의 영어 중심 AI 성능 평가 지표가 국내 언어, 문화, 사회적 가치를 충분히 반영하지 못하는 한계를 극복하고, 국내외 AI 모델의 성능을 객관적으로 진단하기 위해 기획됐다.

총 3개 과제로 진행되며, 과제별로 8억원의 예산이 책정된다. 올해 우선 구축될 데이터셋 분야는 △거대언어모델(LLM)의 수학적 문제 해결 능력을 평가하는 '수학 분야' △한국 특화 지식에 대한 질의응답 및 추론 능력을 검증하는 '지식 분야' △장문의 맥락 이해 및 과업 수행 능력을 평가하는 '장문이해 분야' 등 총 3개다.

과기정통부는 향후 멀티모달, 에이전트 AI 등 생성형 AI의 다양한 영역으로 평가 데이터셋 구축을 확대해 나갈 방침이다.

사업 참여를 희망하는 기업 및 기관은 초거대 AI 또는 자연어처리, 멀티모달 AI 등 대규모 데이터셋 기반의 인공지능 개발 역량을 갖춘 기관과 컨소시엄을 구성해야 한다.

김경만 과기정통부 인공지능기반정책관은 "국내 사회·문화 환경을 반영한 성능 평가 데이터셋 확보가 필수적"이라며, "구축된 데이터셋은 향후 국내 AI 개발 기관들이 활용할 수 있도록 공개하여 국내 AI 생태계 경쟁력 강화에 기여할 것"이라고 밝혔다.

wongood@fnnews.com 주원규 기자