← СИГНАЛ СОЦСЕТИ
СОЦСЕТИ

RTX 3090 FE перегревает VRAM при запуске LLM

Пользователи сообщают о перегреве видеопамяти на RTX 3090 Founders Edition при длительном инференсе больших языковых моделей. Это важно для владельцев карт, использующих их для локального запуска ИИ.

Пользователь Reddit под ником, опубликовавший пост в сообществе LocalLLaMA, предупредил владельцев видеокарт GeForce RTX 3090 Founders Edition о перегреве видеопамяти при длительной работе с большими языковыми моделями. По его словам, нагрузка на VRAM в таких сценариях существенно выше, чем в играх, что приводит к росту температур выше безопасных значений. Пост сопровождается скриншотом, который, судя по всему, фиксирует показатели датчиков.

RTX 3090 FE известна своей компоновкой: чипы памяти GDDR6X расположены на обратной стороне платы, где охлаждение заметно хуже, чем у лицевой стороны. Именно эти модули, по наблюдениям энтузиастов, сильнее всего нагреваются при inference — постоянной загрузке памяти весами модели и вычислениями. В играх нагрузка на VRAM обычно менее продолжительная и распределена иначе.

Для локального запуска LLM характерна именно длительная непрерывная работа: модель загружается в память целиком и остаётся там, а генерация токенов идёт часами. Это создаёт устойчивый тепловой режим, при котором температура памяти может приближаться к предельным 100–110 °C. В таких условиях возможны троттлинг, артефакты и ускоренная деградация чипов.

Автор поста позиционирует его как PSA — публичное предупреждение для других владельцев 3090 FE. Практические советы в подобных обсуждениях обычно сводятся к улучшению продува корпуса, замене термопрокладок, установке водоблока или ограничению мощности карты. Точные замеры и методика тестирования в доступном фрагменте не приводятся.

Тема важна для сообщества LocalLLaMA, где RTX 3090 с 24 ГБ памяти остаётся популярным и относительно доступным вариантом для запуска моделей локально. Рост интереса к локальному inference повышает риск того, что пользователи будут эксплуатировать карты в непривычном для них тепловом режиме. Это делает вопросы охлаждения VRAM практически значимыми, а не только теоретическими.

nvidiaжелезолокальные моделиохлаждениеreddit
Первоисточник Читать в Reddit LocalLLaMA ↗

Материал подготовлен ИИ-редакцией «Сигнала» как пересказ публикации первоисточника. Фактическую точность и подробности проверяйте по оригиналу.

По этой теме СОЦСЕТИ На рынке появились поддельные RTX 4090 Reddit LocalLLaMA · 11 окт, 08:21 ЖЕЛЕЗО Домашний сервер на Tesla V100 32 ГБ для локальных моделей Хабр · 13 окт, 03:02 СОЦСЕТИ Цены на RTX 5060 Ti в Японии выросли на 144% Reddit LocalLLaMA · 13:45 СОЦСЕТИ JetBrains выпустила Mellum 2.1 12B MoE Reddit LocalLLaMA · 20:47 СОЦСЕТИ RTX 5090 попала в списки контрабанды Reddit LocalLLaMA · 14 окт, 12:01