nemotron-3.5-lightning-free 실측 — 8/12, 빠르고 코딩이 되는 무료 모델

OpenCode Zen 무료 목록의 nemotron-3.5-lightning-free입니다. 먼저 사실 정정부터 — 이 모델은 신규가 아닙니다. 무료 목록에는 8월 공개 이후 계속 있었고, 우리 카탈로그에도 10월부터 기록돼 있습니다. 12문항으로 직접 돌려본 결과 8

OpenCode Zen 무료 목록의 nemotron-3.5-lightning-free입니다. 먼저 사실 정정부터 — 이 모델은 신규가 아닙니다. 무료 목록에는 8월 공개 이후 계속 있었고, 우리 카탈로그에도 10월부터 기록돼 있습니다. 12문항으로 직접 돌려본 결과 8/12를 맞혔습니다. 결론부터 말하면 조건부로 쓸 만합니다.

원문기사는 아래의 링크를 통해 확인할 수 있습니다. 기사원문보기

12문항 모두 응답이 돌아왔고 8/12입니다. 문항당 중간값 12초, 최대 97초로 이번에 비교한 모델 중 가장 빨랐습니다. 0점 4문항 중 3문항은 우리 채점기·측정 방식 문제였고, 실제 실패는 없었습니다.

nemotron-3.5-lightning-free가 뭔가

  • 모델 ID — opencode/nemotron-3.5-lightning-free
  • 공개일 — 2026-08-11 (models.dev)
  • 공칭 컨텍스트 / 출력 — 262,144 / 262,144 토큰 · 실측 하한 131,072
  • 가격 — 입력·출력 0 (무료)
  • 지원 — 추론 · 도구 호출 · 구조화 출력 · 가중치 공개

학습 데이터 규모와 파라미터 수는 확인하지 않았습니다. models.dev 에 없는 값은 쓰지 않았습니다.

스펙은 models.dev 공개값(2026-11-12 조회)과 이번 니들 프로브 실측을 구분해 적었습니다.

5분 안에 써보기

터미널 두 줄이면 확인됩니다.

opencode models | grep nemotron-3.5-lightning-free
opencode run -m opencode/nemotron-3.5-lightning-free "한 단어로 대답: PONG"

우리가 실제로 던진 것은 코드 수정 요청이었습니다. 만료 토큰을 찾는 함수에서 조건이 틀린 코드를 주고 고치라고 했더니, 아래처럼 고친 코드를 냈습니다.

from datetime import datetime, timedelta

def get_expired_tokens(tokens, now):
    return [t for t in tokens
            if datetime.fromisoformat(t['expires_at']) < now]

이 문항은 제출한 코드를 실제로 실행해 판정했습니다 — 눈으로 읽고 점수를 준 것이 아닙니다.

어떤 작업에 강한가

  • 코드 수정·리팩터링 (코딩 실무 3/4) — 중복 로직 리팩터링과 로그 파서 작성은 제출 코드를 실제로 실행해 통과했습니다.
  • 긴 대화 맥락 유지 (맥락 유지 2/2) — 12,000자 문서 중간의 함수명을 정확히 되받았고, 대화의 요청 3가지도 복원했습니다.
  • 속도 — 문항당 중간값 12초, 12문항 합계 6분 26초. 앞서 측정한 K-EXAONE 2.5(17분)보다 훨씬 빠릅니다.

어디서 걸리는가

12문항 중 4문항은 점수를 받지 못했습니다.

  • Q1 · 지시 이행 — 채점기 오탐입니다. 답변은 한국어로 쓰고 마지막 줄에 ---끝---도 넣었는데, 본문에 코드 식별자(add)가 있어 '영문 3자 이상' 규칙에 걸렸습니다.
  • Q4 · 코딩 실무 — 측정 오염입니다. pytest 테스트를 새로 쓰라는 요청에 이 저장소의 기존 테스트 파일을 찾아 읽고 "이미 14개 테스트가 있다"고 답했습니다. 모델이 도구로 저장소를 읽을 수 있어 생긴 오염이라 능력 점수로 볼 수 없습니다.
  • Q11 · 에이전트(계획·도구·복구·판단) — 채점기 불일치입니다. 4단계 계획은 만들었지만 키 이름을 dom_screen·core_state_model 로 썼습니다. 질문은 키 이름을 지정하지 않았는데 채점기는 screen·state_model·verify 만 인정합니다.
  • Q12 · 에이전트(계획·도구·복구·판단) — 채점기 불일치입니다. '쿼리 > 메일 > 버튼' 순서로 우선순위와 근거를 냈지만, 채점기는 '지금/미룸' 두 그룹으로 나뉜 형식을 요구합니다.

한도에 걸리지 않았습니다. 응답도 빨랐습니다 — 문항당 중간값 12초, 최대 97초, 12문항 합계 6분 26초입니다.

가장 느렸던 문항입니다.

  • 문항 6 — 97초
  • 문항 4 — 88초
  • 문항 12 — 33초

다른 무료 모델과 비교

같은 12문항, 같은 채점 기준으로 AIKOREA24가 실측한 값입니다. 모델마다 최신 측정 1건만 씁니다.

모델

결과

측정일

cat-jam-free

10/12

10-16

iceman-free

10/12

11-08

beam-free

9/12

10-28

kilo/stealth/glyph-cluster

9/12

10-28

inkling-2-small-free

9/12

11-09

big-pickle

8/12

10-20

mimo-v2.6-flash-free

8/12

11-11

nemotron-3.5-lightning-free

8/12

11-12

k-exaone-2.5

7/12

11-11

glm-5.3-flash-free

6/12

10-18

ll-alpha-free

5/12

10-16

nemotron-3.5-lightning-free는 응답 실패 0문항으로 측정된 8/12입니다. 단 0점 4문항 중 3문항이 채점기·측정 문제여서, 실제 능력은 이 점수보다 높게 봐야 합니다.

한도와 비용 확인하는 법

무료라고 적혀 있어도 한도가 붙습니다. 실제로 확인하는 순서는 이렇습니다.

  1. 무료 여부는 opencode models | grep nemotron-3.5-lightning-free 로 확인합니다.
  2. opencode run -m opencode/nemotron-3.5-lightning-free "한 단어로 대답: PONG" 로 연결을 확인합니다(3~5초).
  3. 긴 문서를 넣을 때는 13만 토큰을 기준으로 잡으십시오 — 공칭 26만 토큰은 이번 실측에서 13만에서 끊겼습니다.

AIK24 실측 결과 (2026-11-12)

항목

값

모델 ID

nemotron-3.5-lightning-free

결과

8/12

축별

지시 이행 1/2 · 코딩 실무 3/4 · 맥락 유지 2/2 · 에이전트(계획·도구·복구·판단) 2/4

검증 방법

OpenCode CLI로 12문항 호출 · 문항별 결정적 채점 · 코드 문항은 실제 실행

니들 컨텍스트 실측 하한

131,072 토큰

토큰 사용량

CLI 경유로 측정되지 않음 (미측정)

12문항은 지시 이행 2 · 코딩 실무 4 · 맥락 유지 2 · 에이전트(계획·도구·복구·판단) 4로 구성됩니다. LLM 심사자에게 점수를 묻지 않고 문항마다 규칙 기반으로 채점했고, 코드 문항은 제출 코드를 실제로 실행했습니다. 긴 문서 요약 품질, 다국어 정확도, 이미지 입력은 이 평가에 포함되지 않습니다.

참고 자료

마무리 — 이럴 때 쓴다 / 이럴 때 쓰지 않는다

쓴다

  • 코드 수정·리팩터링 요청 (코딩 실무 3/4, 실행 검증 포함)
  • 앞선 대화 맥락을 유지해야 하는 작업 — 맥락 유지 2/2
  • 응답이 빨라야 하는 반복 작업 — 문항당 중간값 12초

쓰지 않는다

  • JSON 키 이름까지 정확히 맞춰야 하는 산출물 — 이번엔 키 이름 때문에 2문항이 0점이 됐습니다
  • 13만 토큰을 넘는 문서 한 번에 넣기 — 실측 하한이 131,072 토큰입니다

브리핑에는 '신규 무료'로 올라갔지만 10월부터 있던 모델입니다. 원인은 11월 9일 수집 실패로 다음 날 27건이 전부 '신규'로 오판된 것이고, 같은 오판이 반복되지 않도록 파이프에 가드를 넣었습니다.