MobileDiffusion – это революционная модель преобразования текста в изображение, разработанная Google, которая позволяет создавать высококачественные изображения размером 512×512 пикселей менее чем за полсекунды на мобильных устройствах.

Это достижение стало возможным за счет оптимизации архитектуры модели и техник семплирования, что позволило уменьшить количество параметров до 520 миллионов, что является существенным шагом вперед в сравнении с другими популярными моделями text-to-image, такими как Stable Diffusion, DALL-E и Imagen.

Основные особенности MobileDiffusion

• Быстрота. MobileDiffusion может генерировать изображения в реальном времени на мобильных устройствах, включая iPhone 15 Pro, что является значительным шагом вперед в сравнении с другими моделями, которые требуют значительной вычислительной мощности и часто ограничены настольными средами.
• Качество. Модель способна создавать высококачественные изображения, которые ранее были доступны только на компьютерах высокого класса. Это достигается за счет сложных алгоритмов искусственного интеллекта, адаптированных для эффективной работы на менее мощных устройствах.
• Мобильность. MobileDiffusion оптимизирован для мобильных платформ, что позволяет художникам и энтузиастам раскрыть свой творческий потенциал в любое время и в любом месте без дорогостоящего оборудования.

Преимущества MobileDiffusion

Сокращение времени генерации

MobileDiffusion может генерировать изображения в реальном времени, что является существенным шагом вперед в сравнении с другими моделями, которые требуют значительной вычислительной мощности и часто ограничены настольными средами.

Уменьшение вычислительной сложности

Модель имеет сравнительно небольшой размер – 520 миллионов параметров, что позволяет использовать ее на мобильных устройствах, что является существенным шагом вперед в сравнении с другими моделями, которые имеют миллиарды параметров.

Демократизация создания искусства

MobileDiffusion позволяет создавать высококачественные изображения прямо на мобильных устройствах, что демократизирует доступ к созданию цифрового искусства и делает его более доступным для более широкой аудитории.

Минусы MobileDiffusion

• Большой размер загрузки (4,5 ГБ).
• Высокое использование батареи.
• Требуется 5 ГБ свободного места в памяти смартфона.
• Сбои при высоком использовании ресурсов.
• Может выключаться при многозадачности.
• Выделяет тепло, что приводит к замедлению.
• Создание изображения может превышать 1 минуту.
• Поддерживается только некоторые модели iPhone и iPad.
• Требуется iOS 16.2 или новее.
• Приложение закрывается при переключении.