이미지·영상 생성

로컬 이미지·영상 생성 VRAM 선택 가이드

모델 파일이 들어가는 용량과 원하는 해상도로 반복 작업할 용량은 다릅니다.

쉽게 말하면

이미지·영상 생성은 모델 본체 외에도 프롬프트를 읽는 인코더, 이미지를 압축하고 복원하는 VAE, 생성 중간 결과를 VRAM에 둡니다. 표시된 모델 파일 크기보다 여유 있는 메모리가 필요한 이유입니다.

장비를 고를 때

VRAM을 딱 맞추면 첫 실행은 가능해도 해상도와 생성 장수를 높이기 어렵습니다. 자주 쓸 설정에서 10~20% 정도 여유가 남는 구성을 우선 보세요.

이 글에서 확인할 내용

  • 가중치 외에 텍스트 인코더·VAE·중간 결과가 메모리를 사용합니다.
  • CPU 오프로딩은 실행 가능 여부를 바꾸지만 생성 시간을 늘릴 수 있습니다.
  • 16·24·48GB는 단순 속도 등급이 아니라 편하게 다룰 모델 범위의 차이입니다.

VRAM 안에 무엇이 들어가나

가장 큰 부분은 이미지나 영상을 만드는 모델 가중치이지만 그것만 있는 것은 아닙니다. 프롬프트를 읽는 텍스트 인코더, 픽셀과 잠재 표현을 오가는 VAE, 샘플러와 생성 중간 결과도 공간을 사용합니다. 영상은 여러 프레임의 상태를 유지하므로 같은 해상도의 이미지보다 작업 공간이 훨씬 커질 수 있습니다.

실행 프로그램은 일부 구성요소를 필요할 때만 GPU에 올리거나 메모리를 재사용하기도 합니다. 그래서 같은 모델도 런타임과 정밀도, 어텐션 구현에 따라 피크 VRAM이 다릅니다. 모델 카드에 적힌 최소치와 내 워크플로의 실제 사용량을 같은 숫자로 보면 안 됩니다.

모델 가중치, 텍스트 인코더, VAE와 작업 공간을 그래픽 메모리 수납장에 차례로 넣는 그림
이미지·영상 모델은 본체 가중치 외에도 텍스트 인코더, VAE와 중간 결과가 필요하므로 파일 크기만 보고 VRAM을 맞추면 부족할 수 있습니다.

오프로딩은 공간과 시간을 바꿉니다

VRAM이 부족하면 텍스트 인코더나 모델 일부를 시스템 RAM으로 내렸다가 필요한 단계에 다시 GPU로 가져올 수 있습니다. 이 방법은 작은 카드에서 큰 모델을 실행하게 해 주지만 PCIe 전송과 재적재가 반복되면 한 장이나 한 클립을 만드는 시간이 길어집니다.

시스템 RAM이 충분하지 않으면 저장장치까지 밀려나 속도가 더 크게 떨어질 수 있습니다. 가끔 큰 모델을 시험하는 용도에는 유용하지만 매일 여러 번 반복하는 작업이라면 오프로딩 시간을 장비 비용과 함께 봐야 합니다. 실행 가능 표시만으로 작업성이 좋다고 판단하기 어렵습니다.

그래픽카드 메모리와 시스템 메모리 사이의 좁은 전송 통로 때문에 생성 과정이 대기하는 오프로딩 병목 그림
오프로딩은 적은 VRAM에서도 실행하게 해 주지만 단계마다 데이터를 옮기면 생성 시간이 크게 늘어날 수 있습니다.

16GB와 24GB에서 가능한 범위

16GB급은 작은 이미지 모델, 일반적인 1K 안팎 이미지와 경량 영상 모델을 시작하기 좋은 구간입니다. 양자화와 구성요소 오프로딩을 사용하면 더 큰 모델도 열 수 있지만 해상도와 배치 수를 낮춰야 할 수 있습니다. 시안 위주 작업이라면 메모리를 아끼고 생성 횟수를 늘리는 방식이 잘 맞습니다.

24GB급은 큰 이미지 모델의 양자화 경로, 여러 장 배치와 일부 720p 영상 모델의 선택 폭을 넓혀 줍니다. 영상 모델에 따라 오프로딩 기준 최소 14GB 또는 24GB 안팎의 실행 경로가 있지만, 원활한 반복 작업에는 시스템 RAM과 빠른 저장장치가 함께 필요합니다.

크기가 다른 여섯 개의 메모리 수납장이 이미지 시안, 고품질 이미지, 짧은 영상과 오디오 영상 작업으로 이어지는 그림
메모리 용량이 커질수록 단순히 빨라지는 것이 아니라 오프로딩 없이 실행할 수 있는 모델과 출력 범위가 넓어집니다.

32·48·64GB와 멀티 GPU

32GB 이상에서는 큰 이미지 모델을 덜 쪼개고 올리거나 더 많은 참고 이미지와 배치를 다루기 쉬워집니다. 48GB와 64GB는 대형 영상 모델의 양자화, 긴 클립과 더 큰 작업 공간을 검토할 수 있는 구간이지만 모델마다 실제 요구가 크게 다릅니다.

여러 GPU의 VRAM은 프로그램이 모델을 나누도록 지원할 때만 한 작업에 함께 쓸 수 있습니다. 두 장의 24GB 카드가 모든 상황에서 하나의 48GB 카드처럼 동작하지는 않습니다. 영상 모델은 분산 실행 중 통신량도 커서 슬롯 구성과 카드 사이 연결이 전체 시간에 영향을 줍니다.

용량보다 작업 시간을 함께 고릅니다

메모리가 많으면 오프로딩을 줄이고 더 큰 모델과 출력을 선택할 수 있지만 같은 모델의 속도가 용량만큼 늘어나는 것은 아닙니다. GPU 연산 성능, 메모리 대역폭, 정밀도 지원과 실행 프로그램의 최적화가 생성 시간을 결정합니다. 통합 메모리 장비도 큰 모델 적재와 실제 생성 속도를 따로 확인해야 합니다.

구매 전에는 주력 모델 하나, 목표 해상도, 생성 장수나 영상 길이를 고정해 피크 메모리와 시간을 비교하세요. 여유가 남는 후보 가운데 전력, 소음과 가격을 살펴보면 단순히 가장 큰 VRAM을 사는 것보다 오래 쓰기 좋은 구성을 찾을 수 있습니다.