Qualcomm fait la démonstration d'une IA génératrice d'art pour les smartphones grâce à la diffusion intelligente sur l'appareil

Diffusion stable est un élément fondateur de l IA qui "encode une énorme quantité (1 milliard de paramètres ou plus) de connaissances sur la parole et les images" afin de "générer" des modèles d'intelligence artificielle générer une image photoréaliste à partir d'une description textuelle donnée en 100 secondes ou moins. Il s'agit donc d'un nuage-en général. Le groupe de recherche en intelligence artificielle de Qualcomm affirme avoir fait fonctionner https://www.qualcomm.com/news/onq/2023/02/worlds-first-on-device-demonstration-of-stable-diffusion-on-android sur un appareil mobile basé sur le nouveau produit phare Snapdragon 8 Gen 2 snapdragon 8 Gen 2.

Le vice-président de l'ingénierie de l'entreprise, le Dr Jilei Hou, affirme que cela est possible grâce à des avancées telles que la Qualcomm AI Stackl'AI Model Efficiency Toolkit (AIMET) et le AI Enginequi ont permis au groupe de prendre une version conventionnelle de la diffusion stable dans le cadre du programme FP32 et de la convertir "par quantification, compilation et accélération matérielle Imagination introduces IMG DXT mobile GPU with ray tracing scalable for all smartphone price points" en un format de données " compact " de type INT8-pour les processeurs 8 Gen 2 Processeur Hexagon.

Cela aurait permis à la référence d'utiliser son nouveau modèle pour représenter l'entrée "Guerrier chat super mignon en armure, photoréaliste, Hisense 90L5H 4K Smart Laser TV has just arrived 4K,ultra détaillé, rendu vray, unreal engine" sous forme d'image (subjectivement) précise sur 20 étapes d'inférence en 14,42 secondes - le plus rapide sur un smartphone à ce jour, et "comparable à la latence du nuage" (selon la société Qualcommdu moins).

En outre, le processus est prévu pour être entièrement intégré à l'appareil, ce qui, selon le Dr Hou, présente des avantages en termes d'indépendance vis-à-vis de la connectivité, de fiabilité, de vitesse et, peut-être surtout, de respect de la vie privée, confidentialité. Le vice-président vante également d'autres applications potentielles de cette IA sur appareil, notamment l'édition d'images, la retouche d'images, le traitement des données et la gestion des données l'édition d'imagesle changement d'échelle de résolution, le re-styling et bien d'autres choses encore.

D'autre part, le Dr Lou indique également qu'elles devraient réellement prendre effet "avec le Snapdragon next-gen " ; par conséquent, il faudra peut-être attendre au moins jusqu'en 2024 pour un Android appareil qui puisse faire office de machine à générer de l'art par lui-même, sans avoir besoin d'internet.

Achetez un Samsung Galaxy S23 Ultra sur Amazon