Qualcomm dimostra l'intelligenza artificiale generata dall'arte per gli smartphone con Smart Diffusion on-device

Diffusione stabile è un fondamento AI che "codifica un'enorme quantità (1 miliardo di parametri o più) di conoscenze sul parlato e sulle immagini" al fine di generare un'immagine fotorealistica basata su qualsiasi descrizione testuale in circa 100 secondi o meno. Di conseguenza, si tratta di un nuvola-cloud - beh, di solito è così. Il gruppo di ricerca AI di Qualcomm sostiene di averla fatta funzionare https://www.qualcomm.com/news/onq/2023/02/worlds-first-on-device-demonstration-of-stable-diffusion-on-android su un dispositivo mobile basato sulla nuova ammiraglia Snapdragon 8 Gen 2 di punta Snapdragon 8 Gen 2.

Il vicepresidente dell'azienda, Dr. Jilei Hou, afferma che ciò è possibile grazie a progressi come il Qualcomm AI Stack AI Stack, AI Model Efficiency Toolkit (AIMET) e AI Engineche hanno permesso al gruppo di adottare una versione convenzionale di Stable Diffusion nell'FP32 FP32 e di convertirla "attraverso la quantizzazione, la compilazione e l'accelerazione hardware Imagination introduces IMG DXT mobile GPU with ray tracing scalable for all smartphone price points" in un formato 'compatto' INT8 INT8-per il processore 8 Gen 2 Processore Hexagon.

Secondo quanto riferito, questo ha permesso al riferimento smartphone di riferimento di utilizzare il suo nuovo modello per rappresentare l'input "Super cute fluffy cat warrior in armatura, fotorealistico, Hisense 90L5H 4K Smart Laser TV has just arrived 4K,ultra dettagliato, vray rendering, unreal engine" in forma di immagine (soggettivamente) accurata su 20 passaggi di inferenza in 14,42 secondi - il più veloce su uno smartphone fino ad oggi e "paragonabile alla latenza del cloud" (secondo Qualcommalmeno).

Inoltre, il processo è stato progettato per essere completamente on-device, cosa che il Dr. Hou definisce vantaggiosa in termini di indipendenza dalla connettività, affidabilità, velocità e, forse, soprattutto, di privacy, privacy. Il vicepresidente parla anche di altre potenziali applicazioni di questa IA su dispositivo, tra cui l'editing delle immagini modifica delle immagini, l'upscaling della risoluzione, il re-styling e molto altro ancora.

D'altra parte, il Dr. Lou indica anche che queste applicazioni dovrebbero entrare in vigore "con lo Snapdragon di nuova generazione Qualcomm Snapdragon 8 Gen 3 tipped to arrive earlier than usual "; quindi, si potrebbe dover aspettare almeno fino al 2024 per avere un'idea di cosa si tratti Android dispositivo in grado di agire da solo come macchina per generare arte senza bisogno di internet.

Acquistate un Samsung Galaxy S23 Ultra su Amazon