MIT розробив AI, що створює зображення у 9 разів швидше без втрати якості

Дослідники з MIT та NVIDIA створили новий інструмент генерації зображень, який поєднує два підходи штучного інтелекту: автогресивну модель і дифузійну модель.

Такий гібрид дозволяє швидко створювати високоякісні зображення, використовуючи переваги обох методів.

Джерело: techxplore.com

Новий інструмент, який отримав назву HART (Hybrid Autoregressive Transformer), спочатку швидко створює базове зображення за допомогою автогресивної моделі, а потім уточнює деталі за допомогою компактної дифузійної моделі.

HART генерує зображення, що не поступаються сучасним дифузійним моделям, але робить це приблизно в дев’ять разів швидше. Крім того, він споживає менше ресурсів і може працювати навіть на звичайному ноутбуці чи смартфоні. Користувачу достатньо ввести текстовий запит, щоб отримати зображення.

Технологія може застосовуватися у тренуванні роботів, створенні ігрових сцен, симуляціях для автопілотів та інших сферах.

У дослідженні також брали участь Єчен Ву з Цінхуа, професор Сонг Хан з MIT та вчені з NVIDIA. Робота опублікована на платформі препринтів arXiv.