La nouvelle fonctionnalité « Pixel Screenshots » de Google permet de rechercher dans votre bibliothèque de captures d'écran, et c'est la fonctionnalité d'IA la plus utile de 2024

Utilisez l'IA pour rechercher dans votre immense bibliothèque de captures d'écran.

Vous, comme moi, disposez probablement d’une énorme bibliothèque de captures d’écran qui comprend tout, des publications amusantes sur les réseaux sociaux aux confirmations de commande enregistrées.

Cependant, parcourir une gigantesque collection de captures d'écran pour retrouver cette image enregistrée est une véritable galère. C'est pourquoi Google a lancé la nouvelle application Pixel Screenshots, qui est disponible sur tous les nouveaux appareils de la série Pixel 9, notamment le Pixel 9, le Pixel 9 Pro, le Pixel 9 Pro XL et le Pixel 9 Pro Fold.

Google m'a expliqué comment fonctionne l'application Capture d'écran — et c'est peut-être l'un des outils d'IA les plus utiles que j'ai vu cette année.

Le nouveau « Pixel Screenshots » de Google utilise la recherche IA pour vous aider à trouver des captures d'écran

Lors de l'événement Made by Google, le moteur de recherche a dévoilé les appareils Pixel 9 et, avec eux, Google a dévoilé la nouvelle application Pixel Screenshots. Grâce à l'IA embarquée sur l'appareil que Google appelle « Gemini Nano », l'application génère un titre et un résumé pour chaque capture d'écran.

Par exemple, lors d'une récente conférence de presse, un représentant de Google m'a montré une capture d'écran d'un article qui expliquait comment on peut « teindre » ses cheveux pour leur donner une touche de couleur. L'application Pixel Screenshots, comme je l'ai mentionné, a fourni un titre et un résumé du guide capillaire.

(Le représentant de Google ne l'a pas souligné, mais j'ai remarqué une option « Ajouter une note », donc je suppose que les utilisateurs pourront ajouter leurs propres annotations en plus des résumés générés par l'IA.)

Ensuite, le représentant de Google a démontré que si les utilisateurs souhaitent retrouver une capture d’écran enregistrée, ils peuvent utiliser la barre de recherche en bas de l’application pour la trouver.

Par exemple, le mot « bottes » a été tapé dans la barre de recherche, ce qui a incité l'application à afficher des captures d'écran contenant des images de bottes prises lors du parcours d'achat d'un utilisateur.

À ma grande surprise, non seulement vous pouvez saisir une requête, mais vous pouvez également appuyer sur le microphone pour prononcer votre requête dans la barre de recherche. Par exemple, le représentant de Google a demandé : « Quel est le code Wi-Fi chez Jared ? »

Et comme ça, après avoir parcouru les captures d'écran de l'utilisateur, la recherche a pu faire apparaître les bonnes captures d'écran et révéler les informations d'identification Wi-Fi de Jerrod au premier plan. — sans nécessiter beaucoup de creusement.

Alors que je pensais que la capture d'écran ne pouvait pas être meilleure, Google a indiqué qu'il y avait des suggestions d'actions pour certaines captures d'écran. Par exemple, si vous enregistrez une capture d'écran contenant une adresse, un bouton indiquant « Rechercher dans Maps » peut apparaître, vous permettant d'afficher des directions via Google Maps.

Cerise sur le gâteau, l'application Captures d'écran vous permet de définir des rappels pour vous-même. Imaginons que vous avez enregistré une capture d'écran d'un article, mais que vous êtes trop occupé pour le lire. Vous pouvez appuyer sur le bouton d'alarme pour vous rappeler de lire ladite capture d'écran. Vous ne pouvez pas me dire que ce n'est pas génial !

Ce n'est pas la seule fonctionnalité basée sur l'IA qui nous a laissé bouche bée. Découvrez toutes les autres nouvelles fonctionnalités de Google, notamment Made You Look, Add Me, Reimagine, Gemini Live et bien d'autres.