 2차 평가 결과를...'))
글로벌 AI 성능 평가에서 모티프가 최고점을 기록했다.
18일 ICT업계에 따르면 과학기술정보통신부는 독자 AI 파운데이션 모델 프로젝트(독파모) 2차 평가 결과를 빠른 시일 내에 발표한다. 평가 대상은 모티프테크놀로지스의 모티프 3와 업스테이지의 솔라 오픈2, LG AI연구원의 K-엑사원 2.0, SK텔레콤의 A.X K2다.
최근 공개된 글로벌 AI 분석기관 아티피셜 애널리시스의 어려운 문제를 풀고 지식을 활용하거나 코드를 작성하는 능력 등 9개 시험으로 평가되는 종합성능지수에서 모티프 3는 47점으로 전 세계 AI 언어모델 중 10위를 기록했다. 10위는 미국과 중국의 AI를 제외하면 가장 높은 등수다. 독파모 경쟁팀인 솔라 오픈2는 35점, A.X K2는 35점, K-엑사원 2.0은 31점을 획득했다.
단순 대답을 넘어 AI가 외부 도구를 활용해 실제 업무를 수행하는 시험에서 모티프는 강점을 보였다. 모티프가 공개한 기술자료에 따르면 금융 업무에 필요한 도구를 적절하게 활용하는지를 평가한 시험에서 35.3점을 얻어 딥시크 V4 프로 등 비교 대상 모델을 앞섰다. 컴퓨터 환경에서 직접 코드를 작성하고 작업을 수행하는 시험에서도 세계권의 성능을 입증했다.
과기정통부가 선발한 국민평가단 200명은 지난 8일부터 11일까지 4개 모델을 직접 사용한 뒤 절대평가를 진행했다. 과기정통부는 국민평가단 평가와 전문가 평가, 글로벌 벤치마크 점수를 합산해 최종 결과를 발표할 예정이다. 2차 평가에서는 4개사 중 3개사가 선발되며 연말 3차 평가를 거쳐 최종 2개사가 국가대표 AI로 남는다.
[관련 기사]
- K팝의 힘...방시혁·박진영 ‘빌보드 파워 100’ 선정
2026-01-29
- JYP엔터테인먼트, 서울 고덕강일지구 토지 낙찰받아
2023-10-25
- 2PM 우영, 5·6월 日 4곳 대도시 단독공연 노래·춤 팡팡
2023-05-18
- K콘텐츠 주식부자 방시혁 2.5兆 ‘넘사벽 1위’
2023-02-15
- ‘대세 배우’된 2PM 준호, 이번엔 로코킹 도전
2022-08-04
- 박진영, SBS와 함께 합창단원 뽑는다… 국내 최초 ‘쇼콰이어’ 장르 선봬
2022-05-02
[관련 기사]
- 이찬진, 증권사 CEO에 “금융소비자 중심의 DNA 이식해야”
2026-02-10
- 삼성증권 영업이익 1조 눈앞… WM·연금 전략 통했다
2024-11-26
- 전영묵 신임 대표, 삼성생명 구원투수 등판
2020-01-22
[관련 기사]
- 금융권 ‘아름다운 나눔’ 성금 16억 원 구세군에 전달
2025-12-29
- 케이뱅크, 소상공인 보증부대출 출시
2025-11-20
- KB국민은행, 중기진흥공단과 중소기업 재직자 지원 협약 체결
2025-11-17
- NH농협은행‘조직개편’발표 내부 반발 확산… IT·본점 조직 흔들
2025-11-17
- “인적 쇄신” 농협… 혁신 TF팀장 ‘낙하산·기소’ 논란 불 붙었다
2025-11-16
- [우리동네 명사들] ‘디지털 전문가’ 강태영… 디지털 리딩뱅크 도약 박차
2025-07-27
[관련 기사]
- 카카오게임즈, 2025년 적자 전환
2026-02-11
- 카카오페이 순항·뱅크 건재… 카카오게임즈는 부진
2025-11-05
- 뱅크·페이는 잘 나가는데… 아픈 손가락 된 카카오게임즈
2025-08-06
- 카카오게임즈 1분기 영업손실 124억 원
2025-05-07
- 카카오게임즈 4분기 적자 전환
2025-02-11
[관련 기사]
- 신한은행, 항공정비기업 찾아 생산적 금융 지원 논의
2026-06-04
- 신한은행, 서울대와 장기 협력 업무협약 체결
2026-05-12
- 신한은행, 베트남 경제사절단서 금융 협력 기반 확대
2026-04-27
- 신한은행, 신용대출 자격확인 절차 개편
2026-04-23
- 신한은행·산업연구원, 생산적 금융 활성화 위해 손잡아
2026-04-15
- 신한은행 경영진, 유언대용·치매안심신탁 가입
2026-04-13
평가 배점은 1차와 마찬가지로 벤치마크 40점, 전문가 평가 35점, 사용자 평가 25점이다. 그런데 아티피셜 애널리시스의 평가가 전체 벤치마크 40점 중 25점을 차지한다. 아티피셜 애널리시스 점수만으로 당락이 결정되지는 않지만 1차 평가 모든 지표에서 1위를 차지한 K-엑사원 2.0이 이번 글로벌 평가에서는 가장 낮은 점수를 받은 점이 변수로 꼽힌다.
AI모델의 규모를 나타내는 대표적인 지표는 매개변수다. 매개변수는 AI가 학습 과정에서 익힌 정보를 담는 수많은 숫자로 일반적으로 많을수록 더 많은 정보를 학습할 여지가 있다고 본다. 하지만 그만큼 연산 부담도 커진다. 모델 규모는 750B(7500억개)의 매개변수를 가진 K-엑사원 2.0이 가장 크다. A.X K2는 688B, 모티프 3는 314B, 솔라 오픈2는 250B다.
K-엑사원 2.0은 전체 매개변수가 7500억 개로 모티프 3의 두 배가 넘지만 이번 글로벌 평가에서 모티프 3에 뒤지며 모델 규모와 성능이 비례하지 않음이 나타났다. 게다가 모티프 3가 답변을 생성할 때 한 번에 작동하는 매개변수는 132억 개로 K-엑사원 2.0이 답변을 만들 때 작동하는 매개변수도 370억 개보다 훨씬 적다.
후원하기
이 기사에 대해 어떻게 생각하시나요?
추천해요
좋아요
감동이에요
화나요
슬퍼요
추천해요0
좋아요0
감동이에요0
화나요0
슬퍼요0
기사제보 
