Le modeste pointeur de souris n'a pratiquement pas évolué depuis des décennies. Il se déplace, clique, sélectionne, fait glisser et se transforme parfois en une roue tournante synonyme de frustration. Google souhaite désormais transformer cette petite flèche en l'un des outils d'IA les plus puissants de votre ordinateur portable, ce qui peut paraître ridicule jusqu'à ce que l'on réfléchisse à la fréquence à laquelle on l'utilise.
La société a annoncé Magic Pointer pour Googlebook, sa nouvelle gamme d'ordinateurs portables équipés de Gemini. Cette fonctionnalité dote le curseur de capacités d'IA, lui permettant de comprendre ce que vous pointez et de vous aider à agir en conséquence sans avoir besoin d'une longue invite ou d'une fenêtre de chatbot séparée.
Le curseur peut-il devenir le nouveau bouton IA ?
Dans un nouvel article publié sur DeepMind, l'entreprise explique comment elle repense le pointeur à l'ère de l'IA. L'idée est de permettre à Gemini de comprendre la partie exacte d'une page web, d'une image, d'un tableau, d'un document ou d'une image vidéo à laquelle l'utilisateur fait référence. Cela transforme le curseur, qui passe d'un simple outil de navigation à une sorte de télécommande IA pour l'ensemble de l'écran.
C'est là que tout cela commence à paraître merveilleusement absurde. Un pointeur pourrait transformer un tableau en graphique, comparer les produits que vous sélectionnez sur une page web, résumer un PDF en puces pour un e-mail, ou identifier un bâtiment sur une photo et afficher l'itinéraire. Le curseur, autrefois utilisé principalement pour cliquer sur de minuscules boutons, est soudainement appelé à comprendre le contexte, l'intention et l'action.
En quoi cela est-il important pour Google Books ?
Google s’est inspiré de la façon dont les gens communiquent déjà hors ligne. En général, on ne décrit pas chaque objet d’une pièce avant de demander à quelqu’un de le déplacer. Vous pointez du doigt et dites « déplace ça » ou « répare ça ». Magic Pointer transpose cette même idée à l’écran. Le curseur indique à Gemini ce à quoi vous faites référence, tandis que des commandes courtes telles que « ajoute ça », « fusionne ceux-là » ou « qu’est-ce que ça signifie ? » lui indiquent l’action à effectuer.
Cette nouvelle fonctionnalité sera profondément intégrée aux ordinateurs portables Googlebook, puisque Magic Pointer est annoncé comme faisant partie de cette plateforme. Cela signifie que les utilisateurs de Googlebook devraient pouvoir l'utiliser plus librement dans l'ensemble de leur expérience sur ordinateur portable, au lieu d'être limités à une seule application ou fenêtre de navigateur.
Pour tous les autres, ce pointeur IA sera pour l’instant limité à Gemini dans Chrome. Google indique que les utilisateurs peuvent pointer des parties spécifiques d’une page web et poser des questions, par exemple pour comparer plusieurs produits sélectionnés, résumer les spécifications techniques d’une fiche produit ou convertir instantanément les prix dans une autre devise.
Si Magic Pointer fonctionne bien, les tâches quotidiennes liées à l'IA pourraient ne plus nécessiter de boîte de dialogue.
