OpenCode Zen 무료 목록의 nemotron-3.5-lightning-free입니다. 먼저 사실 정정부터 — 이 모델은 신규가 아닙니다. 무료 목록에는 8월 공개 이후 계속 있었고, 우리 카탈로그에도 10월부터 기록돼 있습니다. 12문항으로 직접 돌려본 결과 8/12를 맞혔습니다. 결론부터 말하면 조건부로 쓸 만합니다.
원문기사는 아래의 링크를 통해 확인할 수 있습니다. 기사원문보기
12문항 모두 응답이 돌아왔고 8/12입니다. 문항당 중간값 12초, 최대 97초로 이번에 비교한 모델 중 가장 빨랐습니다. 0점 4문항 중 3문항은 우리 채점기·측정 방식 문제였고, 실제 실패는 없었습니다.
nemotron-3.5-lightning-free가 뭔가
- 모델 ID —
opencode/nemotron-3.5-lightning-free - 공개일 — 2026-08-11 (models.dev)
- 공칭 컨텍스트 / 출력 — 262,144 / 262,144 토큰 · 실측 하한 131,072
- 가격 — 입력·출력 0 (무료)
- 지원 — 추론 · 도구 호출 · 구조화 출력 · 가중치 공개
학습 데이터 규모와 파라미터 수는 확인하지 않았습니다. models.dev 에 없는 값은 쓰지 않았습니다.
스펙은 models.dev 공개값(2026-11-12 조회)과 이번 니들 프로브 실측을 구분해 적었습니다.
5분 안에 써보기
터미널 두 줄이면 확인됩니다.
opencode models | grep nemotron-3.5-lightning-free
opencode run -m opencode/nemotron-3.5-lightning-free "한 단어로 대답: PONG"우리가 실제로 던진 것은 코드 수정 요청이었습니다. 만료 토큰을 찾는 함수에서 조건이 틀린 코드를 주고 고치라고 했더니, 아래처럼 고친 코드를 냈습니다.
from datetime import datetime, timedelta
def get_expired_tokens(tokens, now):
return [t for t in tokens
if datetime.fromisoformat(t['expires_at']) < now]이 문항은 제출한 코드를 실제로 실행해 판정했습니다 — 눈으로 읽고 점수를 준 것이 아닙니다.
어떤 작업에 강한가
- 코드 수정·리팩터링 (코딩 실무 3/4) — 중복 로직 리팩터링과 로그 파서 작성은 제출 코드를 실제로 실행해 통과했습니다.
- 긴 대화 맥락 유지 (맥락 유지 2/2) — 12,000자 문서 중간의 함수명을 정확히 되받았고, 대화의 요청 3가지도 복원했습니다.
- 속도 — 문항당 중간값 12초, 12문항 합계 6분 26초. 앞서 측정한 K-EXAONE 2.5(17분)보다 훨씬 빠릅니다.
어디서 걸리는가
12문항 중 4문항은 점수를 받지 못했습니다.
- Q1 · 지시 이행 — 채점기 오탐입니다. 답변은 한국어로 쓰고 마지막 줄에
---끝---도 넣었는데, 본문에 코드 식별자(add)가 있어 '영문 3자 이상' 규칙에 걸렸습니다. - Q4 · 코딩 실무 — 측정 오염입니다. pytest 테스트를 새로 쓰라는 요청에 이 저장소의 기존 테스트 파일을 찾아 읽고 "이미 14개 테스트가 있다"고 답했습니다. 모델이 도구로 저장소를 읽을 수 있어 생긴 오염이라 능력 점수로 볼 수 없습니다.
- Q11 · 에이전트(계획·도구·복구·판단) — 채점기 불일치입니다. 4단계 계획은 만들었지만 키 이름을
dom_screen·core_state_model로 썼습니다. 질문은 키 이름을 지정하지 않았는데 채점기는screen·state_model·verify만 인정합니다. - Q12 · 에이전트(계획·도구·복구·판단) — 채점기 불일치입니다. '쿼리 > 메일 > 버튼' 순서로 우선순위와 근거를 냈지만, 채점기는 '지금/미룸' 두 그룹으로 나뉜 형식을 요구합니다.
한도에 걸리지 않았습니다. 응답도 빨랐습니다 — 문항당 중간값 12초, 최대 97초, 12문항 합계 6분 26초입니다.
가장 느렸던 문항입니다.
- 문항 6 — 97초
- 문항 4 — 88초
- 문항 12 — 33초
다른 무료 모델과 비교
같은 12문항, 같은 채점 기준으로 AIKOREA24가 실측한 값입니다. 모델마다 최신 측정 1건만 씁니다.
모델 | 결과 | 측정일 |
|---|---|---|
cat-jam-free | 10/12 | 10-16 |
iceman-free | 10/12 | 11-08 |
beam-free | 9/12 | 10-28 |
kilo/stealth/glyph-cluster | 9/12 | 10-28 |
inkling-2-small-free | 9/12 | 11-09 |
big-pickle | 8/12 | 10-20 |
mimo-v2.6-flash-free | 8/12 | 11-11 |
nemotron-3.5-lightning-free | 8/12 | 11-12 |
k-exaone-2.5 | 7/12 | 11-11 |
glm-5.3-flash-free | 6/12 | 10-18 |
ll-alpha-free | 5/12 | 10-16 |
nemotron-3.5-lightning-free는 응답 실패 0문항으로 측정된 8/12입니다. 단 0점 4문항 중 3문항이 채점기·측정 문제여서, 실제 능력은 이 점수보다 높게 봐야 합니다.
한도와 비용 확인하는 법
무료라고 적혀 있어도 한도가 붙습니다. 실제로 확인하는 순서는 이렇습니다.
- 무료 여부는
opencode models | grep nemotron-3.5-lightning-free로 확인합니다. opencode run -m opencode/nemotron-3.5-lightning-free "한 단어로 대답: PONG"로 연결을 확인합니다(3~5초).- 긴 문서를 넣을 때는 13만 토큰을 기준으로 잡으십시오 — 공칭 26만 토큰은 이번 실측에서 13만에서 끊겼습니다.
AIK24 실측 결과 (2026-11-12)
항목 | 값 |
|---|---|
모델 ID |
|
결과 | 8/12 |
축별 | 지시 이행 1/2 · 코딩 실무 3/4 · 맥락 유지 2/2 · 에이전트(계획·도구·복구·판단) 2/4 |
검증 방법 | OpenCode CLI로 12문항 호출 · 문항별 결정적 채점 · 코드 문항은 실제 실행 |
니들 컨텍스트 실측 하한 | 131,072 토큰 |
토큰 사용량 | CLI 경유로 측정되지 않음 (미측정) |
12문항은 지시 이행 2 · 코딩 실무 4 · 맥락 유지 2 · 에이전트(계획·도구·복구·판단) 4로 구성됩니다. LLM 심사자에게 점수를 묻지 않고 문항마다 규칙 기반으로 채점했고, 코드 문항은 제출 코드를 실제로 실행했습니다. 긴 문서 요약 품질, 다국어 정확도, 이미지 입력은 이 평가에 포함되지 않습니다.
참고 자료
마무리 — 이럴 때 쓴다 / 이럴 때 쓰지 않는다
쓴다
- 코드 수정·리팩터링 요청 (코딩 실무 3/4, 실행 검증 포함)
- 앞선 대화 맥락을 유지해야 하는 작업 — 맥락 유지 2/2
- 응답이 빨라야 하는 반복 작업 — 문항당 중간값 12초
쓰지 않는다
- JSON 키 이름까지 정확히 맞춰야 하는 산출물 — 이번엔 키 이름 때문에 2문항이 0점이 됐습니다
- 13만 토큰을 넘는 문서 한 번에 넣기 — 실측 하한이 131,072 토큰입니다
브리핑에는 '신규 무료'로 올라갔지만 10월부터 있던 모델입니다. 원인은 11월 9일 수집 실패로 다음 날 27건이 전부 '신규'로 오판된 것이고, 같은 오판이 반복되지 않도록 파이프에 가드를 넣었습니다.