RTX 5070 Ti vs 5080 — 로컬 LLM에서는 같은 카드입니다

상급으로 올라가면 5070 Ti와 5080 사이에서 고민하게 됩니다. 가격 차이는 꽤 나는데, 로컬 LLM에서 뭐가 달라지는지는 잘 안 나옵니다.

결론부터 말하면 거의 안 달라집니다.

결론부터

RTX 5070 TiRTX 5080
VRAM16GB16GB — 같습니다
메모리 대역폭896 GB/s960 GB/s (+7%)
TDP300W360W (+60W)

로컬 LLM에서 중요한 두 지표 중 하나가 완전히 같고, 나머지가 7% 차이입니다.

돌아가는 모델이 완전히 같습니다

VRAM이 같으니 당연한 결과입니다.

모델 크기필요 메모리5070 Ti5080
7~8B약 6.1GB여유여유
12~14B약 10.0GB여유여유
20~22B약 15.1GB빠듯빠듯
32B약 21.5GB느림느림

네 줄이 전부 같습니다. 판정이 갈리는 조합이 하나도 없습니다.

두 카드를 번갈아 골라보셔도 결과가 바뀌지 않습니다.

7% 차이가 어느 정도인가

대역폭 896에서 960이면 7% 높습니다.

지금까지 이 사이트에서 다룬 차이들과 나란히 놓으면 이렇습니다.

카드별 메모리 대역폭 비교 메모리 대역폭 — 모델이 다 올라간 뒤 속도를 정하는 값 RTX 5090 1792 GB/s RTX 5070 672 GB/s M5 Max (상위) 614 GB/s RTX 5060 Ti 448 GB/s M5 Pro 307 GB/s M5 153 GB/s 용량이 "되느냐" 를 정하고, 대역폭이 "얼마나 빠르냐" 를 정합니다.
같은 모델이 둘 다 VRAM 에 올라간다면, 그다음은 이 값이 체감을 가릅니다.

비교대역폭 차이
5060 → 5070+50%
4060 Ti 16GB → 5060 Ti 16GB+56%
시스템 램 → 5060+400%
5070 Ti → 5080+7%

7%는 체감하기 어려운 폭입니다. 답변이 10초 걸리던 게 9.3초가 되는 정도입니다.

그마저도 대역폭 차이가 그대로 속도 차이로 나오지는 않습니다. 실행 프로그램과 모델 구조가 함께 작용하기 때문입니다.

그럼 5080은 왜 있나

게이밍과 영상 작업에서는 의미가 있습니다. 연산 성능이 더 높습니다.

로컬 LLM이 연산보다 메모리에 묶여 있어서 그 차이가 안 드러날 뿐입니다. 3090 vs 4070에서 세대가 낮은 카드가 이겼던 것과 같은 이유입니다.

용도가 로컬 LLM 하나라면 5080의 값어치는 거의 없습니다. 게이밍을 겸한다면 이야기가 달라집니다.

16GB라는 천장이 같습니다

더 중요한 건 이쪽입니다.

둘 다 32B에서 막힙니다. 32B는 약 21.5GB가 필요한데 16GB로는 안 됩니다. "느림" 판정이라 돌아가긴 하지만 일부가 CPU로 넘어갑니다.

32B 를 여유 있게 쓰려면  →  24GB 이상
개인용 신품 상한          →  RTX 5090 (32GB)

5080에 돈을 더 쓰는 대신, 32GB로 한 번에 올라가는 편이 로컬 LLM에서는 낫습니다. 그 사이에는 아무것도 없습니다.

그럼 무엇을 사야 하나

16GB면 충분하다면 → 5070 Ti 같은 결과에 60W 덜 먹고 더 쌉니다.

16GB로 모자란다면 → 5090 (32GB) 5080은 그 중간을 메워주지 못합니다. VRAM이 5070 Ti와 같기 때문입니다.

예산이 애매하다면 → 5060 Ti 16GB 같은 16GB에 대역폭만 낮습니다(448). 그래도 돌아가는 모델은 같습니다.

카드VRAM대역폭돌아가는 모델
RTX 5060 Ti 16GB16GB448 GB/s14B 여유
RTX 5070 Ti16GB896 GB/s14B 여유
RTX 508016GB960 GB/s14B 여유
RTX 509032GB1792 GB/s32B 여유

16GB 칸 세 줄은 돌아가는 모델이 전부 같습니다. 속도만 다릅니다. 줄이 바뀌는 건 5090 하나뿐입니다.

자주 묻는 질문

5080이 5070 Ti보다 아예 안 나은가요

로컬 LLM에서는 대역폭 7%가 전부입니다. 게이밍이나 영상 작업에서는 차이가 더 납니다. 용도를 먼저 정하시면 답이 나옵니다.

그럼 5070 Ti와 5060 Ti 16GB는요

대역폭이 896 vs 448로 두 배 차이입니다. 이건 체감됩니다. 7%와는 다른 이야기입니다. 다만 돌아가는 모델 크기는 역시 같습니다.

32B를 쓰려면 5090밖에 없나요

신품 기준으로는 그렇습니다. 중고까지 보면 3090·4090(24GB)이 있습니다. 중고 3090 글을 참고하세요.

5080 두 장은 어떤가요

VRAM 총량은 32GB가 되지만 카드 간 통신 오버헤드가 있어 같은 용량 단일 카드보다 느립니다. 전력도 720W입니다. 5090 한 장이 낫습니다.

게이밍도 하는데요

그러면 5080이 의미 있습니다. 이 글은 로컬 LLM만 놓고 본 결론입니다.

정리

  1. VRAM이 둘 다 16GB입니다. 돌아가는 모델이 완전히 같습니다
  2. 대역폭 차이는 7%입니다. 체감하기 어려운 폭입니다
  3. 5080은 60W를 더 먹습니다
  4. 16GB로 모자라면 32GB로 가야 합니다. 5080은 그 중간을 못 메웁니다
  5. 로컬 LLM만 쓴다면 5070 Ti, 겸용이면 5080입니다

VRAM 용량별 전체 표는 Ollama 최소 사양 정리에 있습니다.

스펙이나 판정이 실제와 다르면 알려주세요. 확인 후 갱신합니다.

RTX5070Ti RTX5080 로컬LLM VRAM 메모리대역폭