k-exaone-2.5 실측 — 5/12, 12문항에 23분, 한국어는 되지만 느립니다

OpenCode에 등록된 LG AI Research의 K-EXAONE 2.5(한국어 특화 모델)입니다. 12문항으로 직접 돌려본 결과 5/12를 맞혔습니다. 결론부터 말하면 지금은 권하지 않습니다.

OpenCode에 등록된 LG AI Research의 K-EXAONE 2.5(한국어 특화 모델)입니다. 12문항으로 직접 돌려본 결과 5/12를 맞혔습니다. 결론부터 말하면 지금은 권하지 않습니다.

답변 자체는 한국어로 자연스럽게 나옵니다. 문제는 속도입니다 — 12문항을 끝까지 돌리는 데 23분이 걸렸고, 그중 3문항은 60초를 넘겨 180초까지 기다렸다가 결국 답을 받지 못했습니다. 아래에 실제로 받은 답과 걸린 지점을 그대로 적었습니다.

k-exaone-2.5가 뭔가

  • 모델 ID — exaone/k-exaone-2.5 (API 모델명 k-exaone_v2.5)
  • 컨텍스트 — 524,288 토큰 (설정값) · 니들 프로브 실측 하한도 524,288
  • 최대 출력 — 524,288 토큰 (설정값)
  • 가격 — 입력·출력 0 — 무료 API 키로 접근
  • 지원 — 도구 호출 · 추론 강도 변형(#high) 선택

가중치 공개 여부·학습 데이터·파라미터 수는 이번에 확인하지 않았습니다. 제조사 공식 자료로 대조하지 않은 값은 쓰지 않았습니다.

스펙은 OpenCode 설정에 적힌 값입니다(2026-11-11). 제조사 공식 문서로 대조하지는 않았습니다.

5분 안에 써보기

터미널 두 줄이면 확인됩니다.

opencode models | grep k-exaone-2.5
opencode run -m exaone/k-exaone-2.5 "한 단어로 대답: PONG"

어떤 작업에 강한가

  • 한국어 지시 이해 (지시 이행 1/2) — 한국어로 조건을 주면 문장 자체는 자연스럽게 나옵니다. 다만 '마지막 줄에 정확히 이 문자열' 같은 형식 조건은 자주 어깁니다.
  • 긴 문서에서 정보 찾기 (맥락 유지 1/2) — 12,000자 문서 중간의 함수명을 찾아냈습니다. 이름만 답하라는 조건에 부연을 붙여 감점된 것이지, 못 찾은 것은 아닙니다.
  • 코드 실행 검증 통과 (코딩 실무 1/4) — 4문항 중 1문항은 제출 코드를 실제로 실행해 통과했습니다. 나머지는 시간 초과 2문항, 단언 실패 1문항입니다.

어디서 걸리는가

12문항 중 7문항은 점수를 받지 못했습니다 (그중 3문항은 응답 시간 초과).

  • Q1 · 지시 이행 — 형식 실패입니다. 마지막 줄에 ---끝---를 그대로 쓰라는 조건을 따옴표로 감싸 어겼습니다('---끝---').
  • Q3 · 코딩 실무 — 실제 실패입니다. 버그 원인 설명은 정확했지만 제출한 코드가 검증 단언에서 실패했습니다(AssertionError).
  • Q4 · 코딩 실무 — 응답 시간 초과입니다(60초 → 180초 재시도 후에도 응답 없음). 능력 실패가 아니라 측정 실패입니다.
  • Q5 · 코딩 실무 — 응답 시간 초과입니다(60초 → 180초 재시도 후에도 응답 없음). 능력 실패가 아니라 측정 실패입니다.
  • Q7 · 맥락 유지 — 형식 실패입니다. 함수명은 맞혔지만 뒤에 부연 설명을 붙여 '정확히 그 이름'이라는 조건을 어겼습니다.
  • Q11 · 에이전트(계획·도구·복구·판단) — 형식 실패입니다. 4단계 계획은 만들었지만 JSON 최상위를 배열이 아니라 객체로 감쌌고, 단계 수도 4개가 아니었습니다.
  • Q12 · 에이전트(계획·도구·복구·판단) — 응답 시간 초과입니다(60초 → 180초 재시도 후에도 응답 없음). 능력 실패가 아니라 측정 실패입니다.

무료 키라고 해서 호출 한도가 없는 것은 아닙니다. 이번에는 한도에 걸리지 않았지만, 실질적인 제약은 속도였습니다 — 12문항에 23분, 그중 3문항은 180초를 넘겨 응답을 받지 못했습니다.

다른 무료 모델과 비교

같은 12문항, 같은 채점 기준으로 AIKOREA24가 실측한 값입니다. 모델마다 최신 측정 1건만 씁니다.

모델

결과

측정일

cat-jam-free

10/12

10-16

iceman-free

10/12

11-08

beam-free

9/12

10-28

kilo/stealth/glyph-cluster

9/12

10-28

inkling-2-small-free

9/12

11-09

big-pickle

8/12

10-20

mimo-v2.6-flash-free

8/12

11-11

glm-5.3-flash-free

6/12

10-18

ll-alpha-free

5/12

10-16

k-exaone-2.5

5/12

11-11

k-exaone-2.5는 3문항이 응답 시간 초과로 빠져 9문항 기준입니다. 같은 표의 다른 모델은 12문항 기준이므로 점수를 1:1로 비교하면 안 됩니다.

한도와 비용 확인하는 법

무료라고 적혀 있어도 한도가 붙습니다. 실제로 확인하는 순서는 이렇습니다.

  1. 설정에서 이 모델의 가격이 0인지 확인합니다 — 무료 표시가 없으면 유료 경로입니다.
  2. opencode run -m exaone/k-exaone-2.5 "한 단어로 대답: PONG"로 한 번 호출해 봅니다. 첫 호출이 1초 안에 오면 연결은 정상입니다.
  3. 실제 작업에 쓰기 전에 같은 프롬프트를 두 번 던져 응답 시간을 재봅니다. 이 모델은 문항에 따라 3초와 180초가 갈렸습니다.

AIK24 실측 결과 (2026-11-11)

항목

값

모델 ID

k-exaone-2.5

결과

5/12 (미응답 3문항 제외)

축별

지시 이행 1/2 · 코딩 실무 1/4 · 맥락 유지 1/2 · 에이전트(계획·도구·복구·판단) 2/4

검증 방법

OpenCode CLI로 12문항 호출 · 문항별 결정적 채점 · 코드 문항은 실제 실행

니들 컨텍스트 실측 하한

524,288 토큰

토큰 사용량

CLI 경유로 측정되지 않음 (미측정)

12문항은 지시 이행 2 · 코딩 실무 4 · 맥락 유지 2 · 에이전트(계획·도구·복구·판단) 4로 구성됩니다. LLM 심사자에게 점수를 묻지 않고 문항마다 규칙 기반으로 채점했고, 코드 문항은 제출 코드를 실제로 실행했습니다. 긴 문서 요약 품질, 다국어 정확도, 이미지 입력은 이 평가에 포함되지 않습니다.

참고 자료

마무리 — 이럴 때 쓴다 / 이럴 때 쓰지 않는다

쓴다

  • 한국어 문서를 읽고 요약·정리할 때 (응답이 올 때까지 기다릴 수 있는 작업)
  • 정답이 하나로 정해지지 않은 설명형 답변이 필요할 때

쓰지 않는다

  • 응답 시간이 중요한 대화형 작업 — 문항에 따라 180초를 넘겼습니다
  • 형식이 정확히 정해진 산출물(마지막 줄 고정 문자열, JSON 최상위 구조)
  • 여러 문항을 연속으로 돌리는 자동 평가·배치 작업

같은 모델을 두 번 측정했을 때 점수가 7/12와 5/12로 갈렸습니다(두 실행 모두 3문항은 시간 초과). 이 글은 저장소 컨텍스트를 배제한 조건의 5/12를 기준으로 씁니다.