Que sont les PC Copilot+, et que peut faire l’IA sur votre propre ordinateur?

Hier, le lundi 20 mai 2024, Microsoft a présenté les PC Copilot+, qu’elle décrit comme une nouvelle catégorie d’ordinateurs Windows conçus pour l’IA. Satya Nadella, PDG de Microsoft, les a qualifiés de nouvelle classe de PC Windows. L’annonce a eu lieu lors d’un événement spécial sur le nouveau campus de Microsoft, la veille de Build, sa conférence annuelle pour les développeurs.

L’idée centrale est simple. Jusqu’ici, la plupart des fonctions d’IA que vous avez utilisées, de ChatGPT à l’assistant Copilot de Microsoft, tournent dans le nuage : votre demande voyage par Internet jusqu’à de gros ordinateurs dans un centre de données, et la réponse vous revient. Les PC Copilot+ sont conçus pour faire une plus grande part de ce travail sur le portable lui-même.

Ce que Microsoft a annoncé

La première vague comprend les nouveaux Surface Pro et Surface Laptop de Microsoft, ainsi que des modèles d’Acer, d’ASUS, de Dell, de HP, de Lenovo et de Samsung. Les précommandes ont ouvert hier. Les appareils arriveront en magasin le 18 juin, à partir de 999 $ US.

Voici ce qu’il faut à un PC pour porter l’étiquette Copilot+, selon le compte rendu de l’événement par Engadget :

À titre de comparaison, Engadget note que les autres « PC IA » sur le marché atteignent environ 10 TOPS. Les premiers PC Copilot+ utilisent les puces Snapdragon X Elite et X Plus de Qualcomm, dont le NPU atteint 45 TOPS. Microsoft affirme que des appareils équipés de puces d’Intel et d’AMD suivront.

Comment ça fonctionne : le NPU

Depuis longtemps, un ordinateur a deux processeurs principaux. Le CPU (processeur central) s’occupe des tâches générales, une étape après l’autre. Le GPU (processeur graphique) effectue beaucoup de petits calculs en même temps, ce qui explique pourquoi il est bon en graphisme et en IA. Les PC Copilot+ en ajoutent un troisième : le NPU (processeur neuronal), une puce conçue précisément pour les calculs mathématiques des modèles d’IA, et faite pour les effectuer en consommant peu d’énergie.

Une analogie aide. Le CPU est un travailleur polyvalent et compétent, le GPU est une grande équipe rapide mais gourmande en électricité, et le NPU est un spécialiste qui fait un seul type de travail de façon très efficace. Confier les tâches d’IA au spécialiste libère les autres et économise la batterie.

Microsoft indique que les PC Copilot+ associent les grands modèles qui tournent dans son nuage Azure à des petits modèles de langage, des modèles d’IA compacts qui tiennent et tournent sur l’appareil. Engadget rapporte que Windows comprendra une nouvelle couche, le Windows Copilot Runtime, avec plus de 40 modèles d’IA intégrés.

Faire tourner l’IA localement apporte trois avantages, selon Microsoft : les réponses arrivent plus vite parce que rien ne voyage par Internet, il n’y a aucun coût infonuagique pour chaque demande, et les données personnelles peuvent rester sur l’appareil.

Les nouvelles fonctions d’IA

Recall est la fonction vedette. Windows prend régulièrement des captures de ce qui s’affiche à votre écran et en construit un index consultable sur votre ordinateur. Plus tard, vous pouvez décrire ce dont vous vous souvenez (« le graphique bleu dans une présentation la semaine dernière ») et faire défiler une ligne du temps pour le retrouver. Microsoft affirme que les captures et l’index sont stockés uniquement sur l’appareil, que vous pouvez supprimer des captures, mettre Recall en pause ou exclure des applications et des sites Web, et Engadget rapporte que Microsoft n’utilisera pas les données de Recall pour entraîner ses modèles d’IA.

Cocreator, dans Paint, transforme un croquis approximatif accompagné d’une courte description textuelle en image finie presque en temps réel, avec un curseur qui va du plus littéral au plus expressif. L’application Photos gagne des façons de changer le style de vos photos et de générer de nouvelles images sur l’appareil.

Live Captions (sous-titres en direct) peut maintenant traduire l’audio de plus de 40 langues en sous-titres anglais, en temps réel, dans n’importe quelle application, même hors ligne.

L’assistant Copilot devient aussi une application complète, qu’on ouvre avec une touche Copilot dédiée, et Microsoft affirme qu’il aura accès à GPT-4o d’OpenAI au cours des prochaines semaines, pour des conversations vocales plus naturelles.

Pourquoi c’est important

Cette annonce oriente Windows vers une IA qui vit sur votre ordinateur plutôt que seulement dans un onglet de navigateur. C’est aussi un pari sur les puces Arm, l’architecture écoénergétique utilisée dans les téléphones, que Windows a déjà prise en charge avec un succès mitigé. Microsoft affirme avoir reconstruit Windows 11 pour Arm et avoir créé Prism, une couche de traduction qui permet de faire tourner les anciens programmes écrits pour les puces de type Intel. Elle annonce jusqu’à 22 heures de lecture vidéo sur une charge et une performance soutenue supérieure à celle du MacBook Air 15 pouces d’Apple; des tests indépendants le diront.

Engadget souligne que cela suit une tendance déjà observée sur les téléphones haut de gamme, qui effectuent bien des tâches d’IA sur l’appareil, et qu’on s’attend généralement à ce qu’Apple fasse ses propres annonces en IA à sa conférence des développeurs le mois prochain.

Recall soulèvera le plus de questions. Une fonction qui enregistre une bonne partie de ce que vous faites à l’écran offre une vraie commodité et demande une vraie confiance, même quand les données restent sur l’appareil.

Devriez-vous acheter un PC Copilot+, ou attendre?

Si votre portable actuel fonctionne bien, rien ne presse. Les appareils arrivent le 18 juin, et les critiques montreront bientôt si les promesses sur la batterie et la vitesse tiennent la route, et si vos programmes de tous les jours tournent bien sur les nouvelles puces Arm. Vérifiez que les logiciels spécialisés dont vous dépendez, comme des outils de comptabilité, de design ou scolaires, fonctionnent sous Windows pour Arm ou tournent bien grâce à Prism.

Si vous remplacez de toute façon un vieil ordinateur, un PC Copilot+ vaut la peine d’être envisagé, puisqu’il respecte les nouvelles exigences minimales des fonctions d’IA sur l’appareil de Microsoft, et des modèles avec des puces d’Intel et d’AMD s’en viennent aussi. Quel que soit votre choix, examinez les paramètres de Recall dès le premier jour : décidez quelles applications et quels sites Web il ne doit jamais capter, et rappelez-vous que vous pouvez le mettre en pause ou le supprimer en tout temps.