la caméra peut guider les aveugles ou partager l’addition dans un restaurant

La présentation du nouveau processeur Snapdragon 8 Elite apporte, au-delà d’une puissance jamais vue auparavant dans un téléphone intelligentune série d’outils et des applications spécialement conçues pour faciliter la vie de milliers de personnes en Espagne et dans le reste du monde. Ils utilisent l’intelligence artificielle pour exécuter des tâches quotidiennes qui étaient auparavant très complexes, voire impossibles à réaliser sur un téléphone, en quelques secondes seulement ; comme supprimer un élément dans une vidéo.

Tous s’inspirent directement de la deuxième génération de processeurs CPU Oryon, que la société a présentée pour la première fois il y a tout juste un an, et qui atteint désormais le téléphones intelligents après avoir a connu quelques améliorations dans des aspects clés tels que les performances ou la batterie. Le Snapdragon 8 Elite intègre également d’importantes améliorations dans le traitement de l’image dont s’inspirent directement les caméras intégrées aux appareils.

Les deux parties, le visuel capturé par les caméras et la puissance de traitement de ses nouveaux cœurssont combinés avec l’unité de traitement neuronal (NPU) Hexagon pour exécuter tout ce qui a une dose d’intelligence artificielle. L’une des nouveautés les plus importantes à cet égard est la compatibilité avec une IA multimodale capable de reconnaître davantage de types de contenus – comme les images – ce qui élargit les possibilités et accélère considérablement tout type de tâche.

Faire le calcul

La nouvelle intelligence artificielle multimodale que Qualcomm intègre dans sa nouvelle gamme de processeurs lui permet d’incorporer certaines fonctions de reconnaissance d’objets et de les implanter dans un contexte. L’un des exemples pratiques auxquels EL ESPAÑOL – El Androide Libre a pu se référer lors de l’événement de présentation sur l’île de Maui (Hawaï, États-Unis) a eu en tant que protagoniste, le ticket d’un restaurant.

L’intelligence artificielle intégrée est capable de reconnaître qu’il s’agit en réalité d’un reçu d’achat répertoriant une série de plats et de boissons. Prenez simplement une photo pour démarrer un processus de reconnaissance automatique cela ne prend pas plus d’une seconde et ouvre la porte à un très large éventail de possibilités.

L’utilisateur de téléphone intelligent Vous pouvez ordonner à l’IA d’ajouter un certain pourcentage pour le pourboire au total du billet et divisez le résultat par le nombre de convives. En quelques secondes, le résultat est exécuté et donne le résultat directement sur l’écran. De plus, il détaille par défaut tous les calculs effectués et comment on arrive au chiffre final.

Cette capacité de reconnaissance et de contextualisation – sachant qu’il s’agit d’une liste de plats et d’autres éléments et qu’elle s’inscrit dans un ticket de restaurant – n’est que une première approximation pour quels seront les téléphones mobiles les plus imminents. Certains modèles de Samsung, Xiaomi, Honor ou Realme ont déjà annoncé qu’ils intégreraient ce processeur dans leurs lancements les plus immédiats et il ne reste plus qu’à savoir comment ils mettront en œuvre cette série de capacités.

Revenant sur le champ des applications, cette IA de reconnaissance pourrait être particulièrement utile pour les personnes ayant des difficultés visuelles. Dans un autre test pratique réalisé par Qualcomm, l’appareil n’a besoin que d’une seule photo pour analyser l’image prise.

Décrire des aspects objectifs tels que l’apparence de la personne (les vêtements qu’elle porte, les détails sur les accessoires tels que les bracelets…) et le contextualise en fonction de la scène où il se trouve. De cette manière, l’IA a pu reconnaître que le sujet de l’image se trouvait lors d’un événement ou d’une présentation étant donné qu’une accréditation lui était accrochée au cou.

Comme l’a expliqué Qualcomm lors de la présentation, le nouveau moteur d’IA intégré au Hexagon NPU fournit 45 % de performances en plus pour chaque watt consommé par rapport aux versions précédentes.

Dans les processeurs précédents, les commandes, commandes et invite que l’utilisateur donnait à voix haute devait être converti en texte pour que l’IA puisse comprendre. UN travail supplémentaire qui gênait l’expérience utilisateur en retardant la réponse dans le temps et, parfois, en perdant des informations lors de la transcription.

Désormais, vous pouvez obtenir des données directement à partir d’autres types de sources telles que l’audio, les sons, les photos, les vidéos, les images capturées en temps réel par l’appareil photo du téléphone ou le texte. Tout ce contenu est processus directement sur l’appareil sans avoir besoin d’une connexion Internet.

La meilleure photo de votre animal de compagnie

Un autre domaine d’application de l’IA consiste à obtenir le meilleur instantané des animaux de compagnie. Comme l’explique Qualcomm, le logiciel aide l’utilisateur à choisir entre 40, 50 ou 60 photos prises à chaque rafale. Ceci est réalisé en analysant un par un à l’aide d’algorithmes d’intelligence artificielle pour identifier lequel de tous les animaux est dans la bonne position et est correctement mis au point par l’objectif.

Dans le cas montré lors de la présentation de cette technologie, un chien sautait pour tenter d’attraper une balle en l’air. Une fois que toutes les photos ont été examinées indépendamment et que vous en avez sélectionné une parmi toutes, l’étape suivante est la amélioration des poils d’animaux.

Dans cette étape, l’intelligence artificielle générative incorporée dans le processeur lui-même peut être utilisée pour mettre en évidence les détails de la fourrure, ce qui est complexe car l’instantané a été pris en mouvement et une partie importante des détails peut être perdue.

Supprimer les intrus

Supprimer certains éléments d’une photographie est une fonctionnalité présente sur certains appareils depuis plusieurs générations, principalement supportée par le cloud comme l’outil qui intègre Google Photos. Avec cet outil, l’utilisateur peut supprimer des objets et même des personnes qui ne souhaitent pas qu’ils apparaissent sur la photographie finale de manière simple et intuitive.

Cependant, le suppression de ces éléments indésirables dans les vidéos C’était devenu un travail ardu, complexe et très exigeant. Fondamentalement, l’utilisateur devait supprimer cet élément présent dans chacune des images capturées et attendre que le temps investi ait été vraiment efficace.

Qualcomm, dans ses nouveaux processeurs Snapdragon 8 Elite, a intégré une fonction qui fait tout cela en quelques secondes seulement (pour les vidéos courtes) et automatiquement. Avec un outil de sélection, l’utilisateur n’a plus qu’à Choisissez l’élément que vous souhaitez supprimer de votre métrage et appuyez sur un bouton.

Après un certain temps de traitement, le résultat s’affiche sous la forme d’une nouvelle vidéo avec l’intrus parti et, à sa place, une reconstitution de l’arrière-plan. Compte tenu du fait qu’il s’agit d’un outil en développement, les résultats obtenus lors des tests peuvent être considérés comme corrects.

La fonction est efficace lorsque l’objet sélectionné n’a pas un rôle très important dans la vidéo, comme un réverbère sur un des côtés et tant que le fond est uniforme.

Dans les images ci-jointes, vous pouvez voir comment l’IA intégrée à l’appareil – et indépendante de toute connexion Internet – a supprimé les deux torches de droite. Le fond, dans ce cas, est un ciel complètement bleu, qui qui joue en faveur de la technologie ce qui, dans d’autres scénarios, a donné des résultats plus médiocres.