Стабильная диффузия — это базовая модель искусственного интеллекта, которая «кодирует огромное количество (1 миллиард параметров или более) знаний о речи и визуальных элементах», чтобы создать фотореалистичное изображение на основе любого заданного текстового описания примерно за 100 секунд или меньше. Соответственно, это облачный ресурс. Группа Qualcomm AI Research утверждает, что она работает на мобильном устройстве на базе нового флагманского процессора Snapdragon 8 Gen 2.
Вице-президент компании по инженерным вопросам, доктор Джилей Хоу, утверждает, что это стало возможным благодаря таким достижениям, как Qualcomm AI Stack, AI Model Efficiency Toolkit (AIMET) и AI Engine, которые позволили группе использовать обычную версию Stable. Распространение в формате данных FP32 и преобразование его «посредством квантования, компиляции и аппаратного ускорения» в «компактную» версию на основе INT8 для процессора Hexagon 8 Gen 2.
Сообщается, что это позволило эталонному смартфону использовать свою новую модель для представления входных данных «Супер милый пушистый кот-воин в доспехах, фотореалистичный, 4K, сверхдетальный, рендеринг vray, нереальный движок» в (субъективно) точной форме изображения за 20 шагов вывода в 14,42 секунды — самый быстрый показатель среди смартфонов на сегодняшний день и «сопоставимый с задержкой в облаке» (по крайней мере, по данным Qualcomm).
Кроме того, предполагается, что этот процесс будет выполняться полностью на устройстве, что доктор Хоу рекламирует как выгодное с точки зрения независимости от подключения, надежности, скорости и, что, возможно, наиболее важно, конфиденциальности. Вице-президент также рекламирует другие потенциальные приложения этого искусственного интеллекта на устройстве, включая редактирование изображений, повышение разрешения, изменение стиля и многое другое.
С другой стороны, доктор Лу также указывает, что они действительно должны вступить в силу «с Snapdragon следующего поколения»; поэтому, возможно, придется подождать как минимум до 2024 года, чтобы устройство Android могло действовать как машина для создания произведений искусства без необходимости в Интернете.