Intelligence visuelle d’Apple : comment fonctionne cette nouvelle IA ?

L’Intelligence visuelle d’Apple permet d’utiliser l’intelligence artificielle pour obtenir rapidement des informations sur ce qui vous entoure ou sur ce qui est affiché sur l’écran de votre iPhone. Grâce à la caméra, elle peut notamment rechercher des images similaires, identifier des plantes et des animaux, fournir des informations sur un restaurant ou un commerce, ou encore interagir avec du texte.

Avec iOS 27, l’Intelligence visuelle peut également analyser le contenu affiché à l’écran. Elle permet par exemple de rechercher un élément, résumer un texte, poser une question sur un document ou créer un événement dans Calendrier.

La fonctionnalité fait partie d’Apple Intelligence et sa disponibilité dépend notamment du modèle d’iPhone, de la langue et de la région.

Qu’est-ce que l’Intelligence visuelle d’Apple ?

L’Intelligence visuelle est une fonctionnalité d’Apple Intelligence qui permet à l’iPhone d’analyser ce qui se trouve devant sa caméra ou ce qui est affiché à l’écran. Elle peut ensuite fournir des informations, effectuer des recherches ou proposer certaines actions selon le contenu analysé.

Avec la caméra, l’iPhone peut notamment identifier des plantes et des animaux, rechercher des images visuellement similaires, fournir des informations sur un restaurant ou un commerce, traduire ou résumer un texte.

L’Intelligence visuelle peut également analyser le contenu affiché sur l’écran de l’iPhone. Elle permet alors de rechercher un élément, poser une question, résumer un texte ou encore transformer certaines informations, comme une invitation, en événement dans Calendrier.

Une fonctionnalité intégrée à Apple Intelligence

L’Intelligence visuelle ne constitue pas une application indépendante. Elle fait partie des fonctionnalités d’Apple Intelligence et s’utilise directement depuis l’iPhone, notamment avec la commande de la caméra, le bouton Action, l’écran verrouillé ou le Centre de contrôle.

Deux façons d’utiliser l’Intelligence visuelle

L’Intelligence visuelle peut être utilisée de deux manières principales : à partir de la caméra pour analyser l’environnement physique ou à partir du contenu affiché sur l’écran de l’iPhone.

Intelligence visuelle : analyser, comprendre et agir depuis l’iPhone

Caméra

Analysez ce qui se trouve devant l’iPhone : plantes, animaux, commerces et textes.

Écran

Analysez ce qui est affiché sur l’iPhone : images, documents et textes.

Actions

Recherchez des informations, posez une question, résumez un contenu ou créez certaines actions comme un événement dans Calendrier.

Comment utiliser Intelligence visuelle sur l’iPhone ?

L’Intelligence visuelle peut être activée de plusieurs façons sur un iPhone compatible avec Apple Intelligence. Apple propose notamment la commande de la caméra, le bouton Action, l’écran verrouillé et le Centre de contrôle.

Avec la commande de la caméra

Sur les modèles compatibles, maintenez le doigt appuyé sur la commande de la caméra pour activer l’Intelligence visuelle.

Avec le bouton Action

Vous pouvez également personnaliser le bouton Action situé sur le côté de l’iPhone afin de lancer directement l’Intelligence visuelle.

Depuis l’écran verrouillé

Une commande dédiée peut être ajoutée en bas de l’écran verrouillé pour accéder rapidement à la fonctionnalité.

Depuis le Centre de contrôle

L’Intelligence visuelle peut aussi être lancée depuis le Centre de contrôle. Il suffit d’y ajouter le bouton correspondant, puis de le sélectionner pour utiliser la fonctionnalité.

Que peut faire l’Intelligence visuelle avec la caméra ?

Lorsque vous activez l’Intelligence visuelle, l’iPhone utilise sa caméra pour analyser ce qui se trouve devant vous. Selon ce que vous filmez, différentes informations et actions peuvent être proposées.

Identifier des plantes et des animaux

L’Intelligence visuelle peut reconnaître certains plantes et animaux présents dans le champ de la caméra. Il suffit de sélectionner le résultat affiché en bas de l’écran pour obtenir davantage d’informations.

Intelligence visuelle sur iPhone identifiant une plante
Image © Apple Inc. — L’Intelligence visuelle sur iPhone permet d’identifier une plante et d’obtenir des informations à son sujet.

Obtenir des informations sur un restaurant ou un commerce

En dirigeant l’iPhone vers un restaurant ou un commerce, l’Intelligence visuelle peut afficher des informations sur l’établissement. Selon les options disponibles, vous pouvez notamment consulter ses horaires d’ouverture, son menu ou les services proposés, ou encore effectuer une commande pour une livraison.

Rechercher des images similaires

L’Intelligence visuelle permet également de rechercher sur Internet des images visuellement similaires à un objet placé devant la caméra. Cette fonction peut être utile pour retrouver un objet ressemblant à celui observé ou obtenir davantage de résultats sur un élément.

Interagir avec du texte

Lorsqu’un texte est détecté par la caméra, différentes actions peuvent être proposées selon le contenu analysé. L’Intelligence visuelle peut notamment permettre de traduire ou de résumer un texte.

Ce que l’Intelligence visuelle peut analyser avec la caméra

Plantes et animaux

Identifiez certaines plantes et certains animaux en utilisant la caméra de l’iPhone.

Restaurants et commerces

Obtenez des informations sur un restaurant ou un commerce, comme les horaires, le menu ou les services proposés.

Images similaires

Recherchez en ligne des images visuellement similaires à ce que vous voyez avec la caméra.

Texte

Interagissez avec le texte détecté et, selon le contenu, utilisez notamment des fonctions de traduction ou de résumé.

Intelligence visuelle peut aussi analyser l’écran de l’iPhone

L’Intelligence visuelle ne se limite pas à l’utilisation de la caméra. Sur les iPhone compatibles, elle peut également analyser ce qui est affiché à l’écran à partir d’une capture d’écran.

En prenant une capture, les outils proposés s’adaptent au contenu détecté. Il est alors possible de rechercher un élément, poser une question sur ce qui est affiché, résumer un texte ou encore effectuer certaines actions.

Rechercher des informations à partir d’une capture d’écran

L’Intelligence visuelle permet de rechercher des éléments présents sur l’écran. Vous pouvez sélectionner un élément précis dans la capture afin d’effectuer une recherche sur celui-ci.

Résumer un document ou un texte

Lorsqu’un texte est présent à l’écran, l’Intelligence visuelle peut proposer de résumer son contenu. Une fonction « Lire à voix haute » permet également d’écouter une transcription audio du texte.

Créer un événement dans Calendrier

Certaines informations détectées à l’écran peuvent être transformées en action. Par exemple, une invitation ou un prospectus contenant une date peut permettre de créer directement un événement dans Calendrier.

Poser une question sur ce qui est affiché

Vous pouvez également utiliser l’option « Demander » pour poser une question concernant le contenu visible à l’écran.

Intelligence visuelle analysant le contenu de l’écran d’un iPhone
Visuel illustratif — L’Intelligence visuelle analyse le contenu affiché sur l’écran de l’iPhone et propose différentes actions.

Comment utiliser ChatGPT avec l’Intelligence visuelle ?

L’Intelligence visuelle peut être utilisée avec ChatGPT pour obtenir des informations sur ce que vous montrez avec la caméra de l’iPhone. Cette possibilité nécessite d’avoir activé l’extension ChatGPT.

Pour utiliser cette fonction, activez d’abord l’Intelligence visuelle, puis dirigez la caméra vers l’objet ou l’élément qui vous intéresse. Touchez ensuite « Demander » pour envoyer votre demande à ChatGPT.

Vous pouvez alors poser une question supplémentaire en la saisissant ou en la dictant dans le champ de texte situé en bas de l’écran.

Une intégration qui reste facultative

L’utilisation de ChatGPT avec l’Intelligence visuelle n’est pas automatique. Apple précise qu’il faut activer l’extension ChatGPT pour utiliser cette fonction. Il s’agit donc d’un service complémentaire à Apple Intelligence.

L’Intelligence visuelle est-elle disponible en français ?

Oui. L’Intelligence visuelle est disponible en français sur les iPhone compatibles avec Apple Intelligence, lorsque la langue de Siri et celle de l’appareil sont configurées en français.

Apple précise toutefois que certaines fonctionnalités peuvent ne pas être disponibles dans toutes les régions ou dans toutes les langues. La disponibilité dépend également du modèle d’iPhone utilisé.

Quelles langues sont prises en charge ?

Apple Intelligence prend notamment en charge le français, ainsi que l’allemand, l’anglais, l’espagnol, l’italien, le japonais, le néerlandais, le portugais, le suédois et plusieurs autres langues.

Pour utiliser l’Intelligence visuelle, il faut donc disposer d’un iPhone compatible avec Apple Intelligence et utiliser une configuration de langue prise en charge.

À ne pas confondre avec Siri AI : Apple indique actuellement que Siri AI est disponible en anglais dans un premier temps. Elle n’est pas disponible initialement dans l’Union européenne sur iOS, iPadOS et watchOS.

Quels iPhone sont compatibles avec l’Intelligence visuelle ?

L’Intelligence visuelle fait partie d’Apple Intelligence et nécessite donc un iPhone compatible avec cette technologie. Avec iOS 27 ou version ultérieure, Apple indique que l’Intelligence visuelle est disponible sur les iPhone 15 Pro, iPhone 15 Pro Max et les iPhone 16 ou modèles ultérieurs compatibles avec Apple Intelligence.

Cela comprend donc les générations suivantes compatibles avec Apple Intelligence, notamment les iPhone 17, iPhone 17 Pro, iPhone 17 Pro Max, iPhone Air, iPhone 17e, iPhone 18 Pro, iPhone 18 Pro Max et iPhone Duo.

La disponibilité de certaines fonctionnalités peut toutefois varier selon le modèle, la langue et la région.

L’Intelligence visuelle protège-t-elle vos données ?

L’Intelligence visuelle fait partie d’Apple Intelligence, qui privilégie le traitement directement sur l’appareil lorsque cela est possible. Apple indique ainsi que les modèles d’Apple Intelligence peuvent être exécutés sur l’iPhone sans transférer de données depuis celui-ci.

Un traitement directement sur l’iPhone

Lorsque la demande peut être traitée localement, les modèles d’Apple Intelligence s’exécutent directement sur l’appareil. Apple présente cette approche comme un moyen de prendre en compte le contexte personnel sans collecter ces informations.

Private Cloud Compute pour les demandes plus complexes

Certaines demandes nécessitent davantage de puissance de calcul. Dans ce cas, Apple Intelligence peut utiliser Private Cloud Compute, l’infrastructure cloud d’Apple dédiée aux traitements plus complexes.

Apple indique que les données traitées par Private Cloud Compute ne sont pas conservées et ne sont pas accessibles à Apple. Elles sont utilisées uniquement pour répondre à la requête, puis supprimées une fois le traitement terminé. Apple précise également que des experts indépendants peuvent vérifier le fonctionnement du système.

L’utilisation de ChatGPT reste distincte

Lorsque vous utilisez ChatGPT avec l’Intelligence visuelle, il s’agit d’une intégration distincte proposée par Apple. Dans ta source Apple, cette fonction nécessite d’avoir activé l’extension ChatGPT.

Comment Apple protège vos données

Sur l’iPhone

Lorsque cela est possible, les traitements d’Apple Intelligence sont effectués directement sur l’appareil.

Private Cloud Compute

Pour les demandes qui nécessitent davantage de puissance, Apple Intelligence peut utiliser Private Cloud Compute. Apple indique que les données traitées ne sont pas conservées.

ChatGPT

L’utilisation de ChatGPT avec l’Intelligence visuelle reste une option distincte qui nécessite l’activation de l’extension ChatGPT.

Intelligence visuelle : ce qu’il faut retenir

L’Intelligence visuelle permet à l’iPhone d’utiliser Apple Intelligence pour comprendre ce qui se trouve devant la caméra ou ce qui est affiché à l’écran. Elle peut notamment identifier des plantes et des animaux, rechercher des images similaires, fournir des informations sur des commerces, analyser du texte, résumer un contenu ou créer certaines actions.

La fonctionnalité peut également être associée à ChatGPT pour obtenir des informations supplémentaires sur un élément observé avec la caméra. Cette intégration nécessite toutefois d’activer l’extension ChatGPT.

L’Intelligence visuelle est disponible sur les iPhone compatibles avec Apple Intelligence, avec une disponibilité qui peut varier selon le modèle, la langue et la région.

FAQ sur l’Intelligence visuelle d’Apple

Qu’est-ce que l’Intelligence visuelle sur iPhone ?

L’Intelligence visuelle est une fonctionnalité d’Apple Intelligence qui permet à l’iPhone d’analyser ce qui se trouve devant sa caméra ou ce qui est affiché à l’écran afin de fournir des informations ou de proposer certaines actions.

Quels iPhone sont compatibles avec l’Intelligence visuelle ?

L’Intelligence visuelle est disponible sur les iPhone 15 Pro, iPhone 15 Pro Max et les iPhone 16 ou modèles ultérieurs compatibles avec Apple Intelligence. La disponibilité peut également dépendre de la langue et de la région.

Que peut reconnaître l’Intelligence visuelle ?

Avec la caméra de l’iPhone, l’Intelligence visuelle peut notamment identifier des plantes et des animaux, fournir des informations sur certains restaurants ou commerces et analyser du texte.

Peut-on utiliser l’Intelligence visuelle pour analyser un texte ?

Oui. L’Intelligence visuelle peut analyser du texte capté avec la caméra ou affiché à l’écran. Selon le contenu, elle peut notamment proposer des fonctions de traduction, de résumé ou d’interaction avec le texte.

Peut-on rechercher une image similaire avec l’Intelligence visuelle ?

Oui. En utilisant la caméra, vous pouvez rechercher en ligne des images visuellement similaires à un élément placé devant l’iPhone.

Peut-on utiliser ChatGPT avec l’Intelligence visuelle ?

Oui. Après avoir activé l’extension ChatGPT, vous pouvez utiliser l’option « Demander » pour obtenir des informations sur un objet ou un élément observé avec la caméra.

L’Intelligence visuelle est-elle disponible en français ?

Oui. Apple Intelligence prend en charge le français sur les appareils compatibles. Certaines fonctionnalités peuvent toutefois ne pas être disponibles dans toutes les langues ou toutes les régions.

Comment activer l’Intelligence visuelle sur iPhone ?

Sur les modèles compatibles, l’Intelligence visuelle peut être activée avec la commande de la caméra, le bouton Action, une commande ajoutée à l’écran verrouillé ou depuis le Centre de contrôle.

L’Intelligence visuelle peut-elle analyser ce qui est affiché à l’écran ?

Oui. Sur iPhone, elle peut analyser le contenu d’une capture d’écran et proposer différentes actions, comme rechercher un élément, poser une question, résumer un texte ou ajouter certaines informations à Calendrier.

Laisser un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *

0
Mon panier