새로 나온 모델 · 2026.10.23

최종 업데이트

크래프톤 Raon-1 mini 로컬 LLM: 한국어 30B MoE를 RTX 5090 32GB로

국산 한국어 모델을 RTX 5090 32GB 한 장에서 돌려볼 수 있어요

Raon-1 mini는 크래프톤 AI가 한국어와 에이전트 작업을 겨냥해 처음부터 학습한 30B-A4B MoE1 모델이에요. 전체 30B 가운데 토큰2당 활성 파라미터가 4B이고, 문맥은 26만 2,144토큰까지 지원해요. 한국어·영어·일본어·중국어·스페인어·프랑스어·태국어로 학습했어요. 모델 카드는 NVFP43 양자화4로 RTX 5090 32GB 한 장에서 추론할 수 있다고 안내해요. 다만 최종판이 아닌 미리보기 배포이고, Hugging Face에서 접근 승인을 받아야 파일을 내려받을 수 있어요.

실행 조건과 핵심 내용
  • 총 30B·활성 4B, 26만 2,144토큰 문맥이에요.
  • NVFP4 양자화로 RTX 5090 32GB 한 장에서 돌린다고 안내해요.
  • Hugging Face 접근 승인이 필요하고, 최종판이 아닌 미리보기예요.

한국어를 겨냥해 처음부터 학습했어요

Raon-1 mini는 크래프톤 AI가 설계하고 처음부터 학습한 30B-A4B MoE 언어 모델이에요. 이름의 30B는 전체 파라미터 수, A4B는 토큰당 활성 파라미터 약 4B를 뜻해요. 모델 카드는 한국어 대화와 에이전트 작업에서 강한 성능을 보인다고 설명해요. 다른 오픈 모델을 다시 학습한 것이 아니라 자체적으로 학습한 모델이라는 점이 특징이에요.

학습 언어는 한국어, 영어, 일본어, 중국어, 스페인어, 프랑스어, 태국어예요. 모델 카드는 한국어 성능이 강하고 영어도 탄탄하다고 적어요. 국내 사용자에게는 한국어가 학습 언어에 들어 있다는 사실 자체가 의미가 있어요. 다만 어느 언어에 학습 비중을 두었는지는 공개되지 않았으니, 한국어 품질은 직접 확인하는 편이 정확해요.

이 모델이 국내 사용자에게 중요한 이유는 한국어를 학습에 포함한 국산 모델이라서예요. 한국어 로컬 LLM5을 찾는 사람이라면 RTX 5090 32GB 한 장에서 먼저 시험해 볼 수 있어요.

회색 블록 전체가 기계를 지나는 밀집 구조와, 격자 수납장에서 색이 있는 세 블록만 기계로 들어가는 MoE 구조를 위아래로 비교한 그림
전체 30B 가운데 활성 4B만 계산하는 구조라, 같은 메모리에서 더 많은 토큰을 기대할 수 있어요.

어텐션 구조를 바꿔 긴 문맥 비용을 줄였어요

이 모델은 25개 층 가운데 18개에 Raon Delta Attention6을, 7개에 MLA를 써요. 선형 어텐션 계열인 RDA 층은 고정 크기 상태를 유지해서 입력이 길어져도 KV 캐시7가 계속 늘지 않아요. KV 캐시를 남기는 MLA 층은 7개뿐이고, 모델 카드는 BF168 기준 토큰당 약 8KiB라고 적어요.

긴 문맥이 필요한 작업에서 이 구조는 메모리 사용을 예측하기 쉽게 만들어요. 다만 실행기가 이 어텐션 구성을 지원해야 의미가 있어요. llama.cpp나 Ollama, vLLM이 각각 어느 시점에 지원을 추가했는지 확인한 뒤 파일을 고르세요.

접근 승인을 받은 뒤 파일을 골라요

이 모델은 Hugging Face 저장소에서 바로 다운로드되지 않아요. 접근 요청 화면에서 이름, 소속, 직함, 국가, 사용 목적을 입력하고 라이선스에 동의해야 해요. 승인 후에 모델 파일과 GGUF9·MLX10 변환본을 받을 수 있어요. 승인이 자동이 아니므로 처음 시도할 때는 시간 여유를 두세요.

접근 권한이 생기면 용도에 맞는 형식을 골라요. RTX 5090 한 장을 목표로 한다면 NVFP4 파일을, 저장 공간과 호환성을 우선한다면 GGUF를 골라요. MXFP8도 제공돼요. 형식마다 필요한 메모리와 지원 실행기가 달라서, 같은 모델이라도 실행 조건이 같지 않아요.

미리보기라는 점을 결과 해석에 반영해요

모델 카드는 이 배포가 최종판이 아니며 사양과 결과가 최종 버전에서 바뀔 수 있다고 명시해요. 벤치마크 표도 미리보기 기준이에요. 몇 주 뒤 같은 이름의 정식판이 나오면 점수와 권장 사양이 달라질 수 있으니, 업무에 넣기 전에 버전과 측정일을 함께 기록해 두세요.

모델 카드의 비교표는 Qwen3.6-35B-A3B, Gemma 4 26B-A4B, Qwen3.8-27B, Muse Glimmer 30B를 함께 놓아요. 같은 표에 있어도 각 모델의 측정 환경이 같은지는 별도로 확인해야 해요. 특히 지식 벤치마크에서 Raon-1 mini가 다른 모델보다 낮은 항목도 있으니, 강점으로 내세운 추론·지시 따르기·에이전트 항목과 함께 봐야 해요.

창가 나무 책상 위에 놓인 듀얼 팬 그래픽카드와 메모리 두 개, NVMe 저장장치
NVFP4로 줄인 가중치를 RTX 5090 32GB 한 장에 올리는 것이 이 모델의 목표 구성이에요.

한국어 문서 작업이라면 먼저 비교해 볼 이유가 있어요

국내 사용자에게 이 모델이 매력적인 지점은 한국어가 학습 언어에 포함된 모델을 RTX 5090급 장비에서 시도할 수 있다는 데 있어요. 회의록 요약, 사내 문서 분류, 한국어 고객 문의 응답 초안처럼 한국어 입력이 핵심인 작업이라면 기존 Qwen·Gemma 계열과 같은 문장으로 비교해 볼 만해요.

반대로 영어 코드 작성이나 긴 영어 문서 처리만 한다면 이 모델을 먼저 고를 이유가 약해요. 같은 메모리에서 이미 검증된 다른 모델과 비교해 우위가 보일 때만 바꾸는 편이 안전해요. 미리보기 모델을 업무의 기준으로 삼지 말고, 검증용 후보로 두세요.

Apache 2.0 조건을 확인해요

Raon-1 mini는 아파치 2.0 라이선스로 배포돼요. 상업적 사용과 수정, 재배포가 허용되고 매출 기준은 따로 없어요. 접근 승인은 파일 배포 방식일 뿐 라이선스 조건을 좁히는 것은 아니에요. 다만 아파치 2.0은 저작권 표시와 변경 사항 명시를 요구하니, 제품에 넣을 때 라이선스와 NOTICE를 함께 보관하세요.

모니터의 파형과 문서가 자물쇠가 달린 본체로 들어가고, 구름으로 향하는 점선에는 X 표시가 있는 그림
한국어 녹음이나 문서를 넣고 결과를 받는 흐름까지, 로컬에서 끝낼 수 있는지가 판단 기준이에요.

용어 각주

  1. MoE — 여러 전문가 하위망 중 일부를 입력에 따라 선택해 사용하는 모델 구조입니다. 총 파라미터 수와 한 토큰 처리에 활성화되는 파라미터 수는 다를 수 있습니다.

    본문으로 돌아가기
  2. 토큰 — 모델이 입력이나 출력을 나누어 처리하는 단위입니다.

    본문으로 돌아가기
  3. NVFP4 — NVIDIA가 정의한 4비트 부동소수점 데이터 형식입니다. 지원 여부는 GPU 세대, 모델과 소프트웨어 구현에 따라 다릅니다.

    본문으로 돌아가기
  4. 양자화 — 모델의 가중치나 계산값을 더 적은 비트로 표현해 저장 공간과 메모리 사용량을 줄이는 방법입니다. 표현 단계가 거칠어져 정확도에도 영향을 줄 수 있습니다.

    본문으로 돌아가기
  5. 대규모 언어 모델 — 대규모 텍스트 데이터에서 언어 패턴을 학습해 문맥에 맞는 텍스트를 처리하고 생성하는 모델입니다.

    본문으로 돌아가기
  6. 어텐션 — 입력 토큰 사이의 관련도를 계산해 각 위치의 정보를 현재 표현에 반영하는 신경망 연산입니다.

    본문으로 돌아가기
  7. KV 캐시 — 어텐션에서 이전 토큰의 키·값을 저장해 다음 토큰 생성 때 재사용하는 메모리입니다. 문맥 길이와 배치 크기에 따라 용량이 달라집니다.

    본문으로 돌아가기
  8. BF16 — 모델 수치를 저장하고 계산하는 16비트 부동소수점 형식입니다. FP32와 같은 폭의 지수부를 써 넓은 값 범위를 표현합니다.

    본문으로 돌아가기
  9. GGUF — 모델 정보를 담는 파일 형식으로 llama.cpp 계열 도구에서 널리 사용됩니다.

    본문으로 돌아가기
  10. MLX — Apple이 개발하는 머신러닝 프레임워크로, Apple Silicon의 CPU와 GPU가 공유하는 메모리를 활용해 모델을 실행합니다.

    본문으로 돌아가기

자주 묻는 질문

이 글에서 가장 먼저 확인할 것은 무엇인가요?
Raon-1 mini는 크래프톤 AI가 한국어와 에이전트 작업을 겨냥해 처음부터 학습한 30B-A4B MoE 모델이에요. 전체 30B 가운데 토큰당 활성 파라미터가 4B이고, 문맥은 26만 2,144토큰까지 지원해요. 한국어·영어·일본어·중국어·스페인어·프랑스어·태국어로 학습했어요. 모델 카드는 NVFP4 양자화로 RTX 5090 32GB 한 장에서 추론할 수 있다고 안내해요. 다만 최종판이 아닌 미리보기 배포이고, Hugging Face에서 접근 승인을 받아야 파일을 내려받을 수 있어요.
필요한 메모리는 어느 정도인가요?
긴 문맥이 필요한 작업에서 이 구조는 메모리 사용을 예측하기 쉽게 만들어요. 다만 실행기가 이 어텐션 구성을 지원해야 의미가 있어요. llama.cpp나 Ollama, vLLM이 각각 어느 시점에 지원을 추가했는지 확인한 뒤 파일을 고르세요.
조건과 출처는 어디서 확인하나요?
학습 언어는 한국어, 영어, 일본어, 중국어, 스페인어, 프랑스어, 태국어예요. 모델 카드는 한국어 성능이 강하고 영어도 탄탄하다고 적어요. 국내 사용자에게는 한국어가 학습 언어에 들어 있다는 사실 자체가 의미가 있어요. 다만 어느 언어에 학습 비중을 두었는지는 공개되지 않았으니, 한국어 품질은 직접 확인하는 편이 정확해요.