Qu'est-ce que l'IA sur appareil et comment fonctionne-t-elle ?

Points clés à retenir

• L'IA sur appareil fait référence aux capacités d'intelligence artificielle qui s'exécutent localement sur un appareil sans connexion à Internet, garantissant ainsi la confidentialité et un traitement plus rapide.
• Grâce à l'IA intégrée aux appareils, les smartphones peuvent effectuer des tâches impressionnantes, telles que générer rapidement des images, fournir des assistants d'IA personnalisés et améliorer les graphismes et la qualité audio des jeux.
• Des entreprises comme Qualcomm intègrent du matériel spécialisé dans leurs appareils pour optimiser l'IA sur les appareils performances, offrant des fonctionnalités avancées telles que des assistants intelligents, la traduction en temps réel et l'automatisation retouche photo.

Des chatbots aux voitures autonomes, l’IA transforme le paysage technologique. L’un des domaines dans lesquels l’adoption de l’IA s’accélère rapidement est celui des appareils grand public comme les smartphones. Les géants de la technologie s’efforcent d’intégrer les capacités d’IA intégrées aux appareils dans leurs derniers matériels et logiciels.

Mais qu’est-ce que l’IA sur appareil exactement et comment fonctionne-t-elle ?

Qu'est-ce que l'IA sur appareil et comment elle fonctionne

Aujourd’hui, la plupart des IA grand public s’appuient sur d’énormes ensembles de données stockés dans le cloud. Cependant, télécharger des données personnelles sur des serveurs IA n'est pas bon pour la confidentialité. C'est là qu'intervient l'IA intégrée aux appareils.

L'IA sur appareil fait référence aux capacités d'intelligence artificielle qui s'exécutent localement sur un appareil plutôt que dans le cloud. Cela signifie que le traitement de l'IA s'effectue directement sur votre téléphone, votre tablette ou d'autres appareils sans connexion à Internet.

Voici comment cela fonctionne sous le capot: des modèles d'IA comme Diffusion stable, DALLE-E, Midjourney, etc., sont formés dans le cloud en utilisant beaucoup de données et de puissance de calcul. Ces modèles sont ensuite optimisés pour fonctionner efficacement sur les appareils cibles. Les modèles d'IA optimisés sont intégrés dans des applications et téléchargés sur l'appareil de chaque utilisateur. Les données de l'application restent isolées dans une enclave sécurisée.

Lorsque l'application doit effectuer une tâche telle que reconnaître un son ou identifier un objet sur une photo, elle exécute le modèle d'IA localement à l'aide du processeur ou du GPU intégré de l'appareil. Le modèle d'IA traite les données d'entrée et génère une prédiction ou un résultat de sortie sans envoyer de données à l'extérieur.

Tout cela se passe entièrement sur votre appareil, gardant vos interactions privées.

Comment l'IA sur appareil peut vous être bénéfique

L'IA sur l'appareil permet des capacités impressionnantes sur votre appareil. Cela inclut la génération rapide d’images à l’aide de modèles tels que Stable Diffusion, où les images peuvent être créées en quelques secondes, ce qui est extrêmement rapide. Cela pourrait être génial si vous souhaitez créer rapidement des images et des arrière-plans pour vos publications sur les réseaux sociaux. Et comme elles sont traitées localement, vos invites d’image restent privées.

Un assistant IA peut également être alimenté localement, offrant une expérience personnalisée basée sur vos données et préférences, comme vos activités préférées et votre niveau de forme physique. Il peut comprendre le langage naturel pour des tâches telles que le montage photo et vidéo. Par exemple, vous pourrez peut-être dire « supprimer la personne à gauche » pour modifier une image instantanément.

Pour la photographie, l'IA intégrée à l'appareil peut activer des fonctionnalités telles que l'extension des bordures de l'image (similaire à Fonction de remplissage de Photoshop), en utilisant simultanément des caméras avant et arrière pour les effets vidéo et en éditant différentes couches indépendamment.

Les graphiques de jeu peuvent également bénéficier de l’IA intégrée à l’appareil grâce à une résolution allant jusqu’à 8K, à une accélération du lancer de rayons pour un éclairage réaliste et à un doublement efficace des fréquences d’images. En ce qui concerne l'audio, l'IA intégrée à l'appareil peut activer la synchronisation audio en temps réel afin que le son de vos vidéos et de vos jeux ne soit jamais désynchronisé. Il permet également des appels et de la musique d’une clarté cristalline même si vous entrez dans une autre pièce.

Dans l’ensemble, l’IA sur appareil correspond à ce que souhaitent de nombreux utilisateurs: des résultats rapides et la confidentialité, car elle permet de traiter davantage de données localement plutôt que dans le cloud.

L'IA sur appareil offre des expériences d'IA plus rapides et plus privées

L'IA sur l'appareil est plutôt intéressante. Il permet à nos téléphones et autres gadgets d’exécuter localement des algorithmes d’IA avancés sans avoir besoin de se connecter au cloud et sans décalage.

Des entreprises comme Qualcomm équipent déjà leurs dernières puces de matériel spécialisé pour exécuter efficacement les réseaux neuronaux sur nos appareils. Par exemple, le Snapdragon 8 Gen 3 de Qualcomm prend en charge jusqu'à 24 Go (sur un smartphone !), intègre la prise en charge de Stable Diffusion et Llama 2, et utilise la pile AI de Qualcomm pour offrir certaines des meilleures performances d'IA sur appareil actuellement temps.

Ainsi, avec chaque nouvelle génération de smartphones, attendez-vous à voir des capacités d'IA encore plus puissantes sur l'appareil pour des choses comme assistants intelligents, traduction en temps réel, retouche photo automatisée et image IA générative ultra-rapide génération.