AMD и Stability AI перенесли Stable Diffusion 3 Medium на NPU Ryzen AI — генерация изображений без видеокарты
AMD и Stability AI сообщили о выпуске первой версии Stable Diffusion 3 Medium, оптимизированной для нейропроцессора AMD Ryzen AI XDNA 2. Благодаря новой сборке блок FP16 модель запускается локально на ноутбуках и настольных ПК с Ryzen AI, обходясь без дискретного GPU и сохраняя при этом качество картинок уровня FP16.
Модель использует всего 9 ГБ оперативной памяти и требует минимум 24 ГБ ОЗУ во всей системе. Двухэтапный конвейер XDNA 2 NPU сначала рендерит изображение в разрешении 1024×1024 пикселей, а затем повышает чёткость до 2048×2048. Такой подход обеспечивает 4-мегапиксельный результат при умеренной нагрузке на оборудование и низком энергопотреблении.
Попробовать новинку можно в бета-версии Amuse 3.1 от Tensorstack. Достаточно установить свежий драйвер AMD Adrenalin, запустить приложение в режиме EZ Mode, перевести ползунок в положение HQ и активировать пункт XDNA 2 Stable Diffusion Offload. При желании пользователь может переключаться между NPU и классическим рендерингом на GPU — это полезно, если нужна максимальная скорость или уже установлена мощная видеокарта.
Для AMD выпуск SD 3 Medium под NPU — логичное продолжение июньского анонса на Computex 2024, где компания вместе со Stability AI демонстрировала SDXL Turbo в том же формате block FP16. Новый релиз расширяет экосистему Ryzen AI и повышает конкурентоспособность ноутбуков на фоне решений Intel Meteor Lake и Qualcomm Snapdragon X Elite, где собственные NPU также используют для локальных ИИ-задач.
Stable Diffusion 3 Medium — компактная модель на 2 млрд параметров с архитектурой Multimodal Diffusion Transformer. Она обучена на миллиардной базе изображений и дополнительно доработана на 30 млн высококачественных образцов, что улучшает понимание сложных текстовых запросов, прорисовку рук, лиц и мелкого текста. Теперь все эти возможности доступны прямо «из коробки» на портативных компьютерах без необходимости подключаться к облаку или оснащать систему дорогим графическим ускорителем.