Copilot rattrape enfin d'autres chatbots
Résumé
-
Copilot améliore les produits Microsoft avec une nouvelle fonctionnalité d'actions pour les tâches en ligne.
-
La vision s'étend aux applications Windows et Mobile pour une analyse visuelle en temps réel.
-
La recherche de copilote transforme les résultats de recherche Bing avec des résumés et sources générés par l'AI.
Copilot a été initialement conçu comme un composant d'IA de Bing, mais il a depuis évolué en une IA complète présente dans à peu près tous les produits Microsoft en ce moment. Et cela obtient maintenant un tas d'améliorations qui le rapporteront un peu plus avec le chat de chatte et les Gémeaux de Google – et aligneront également Bing avec Google à ce sujet.
Microsoft a annoncé une grande expansion des capacités de Copilot. La plus grande fonctionnalité ici est peut-être l'introduction d'une nouvelle fonctionnalité appelée Actions. Cette fonctionnalité permet à l'assistant AI d'effectuer des tâches en ligne spécifiques en fonction des instructions utilisateur fournies via des invites de chat. Selon Microsoft, ces tâches peuvent inclure la réservation de réservations de restaurants, l'achat de billets d'événements ou la commande d'articles pour la livraison. Le système est conçu pour gérer ces opérations en arrière-plan tandis que les utilisateurs s'occupent d'autres questions.
C'est un peu comme l'opérateur de Chatgpt disponible sur le niveau de 200 $ le plus cher du chatbot, sauf qu'il ne fonctionne qu'avec une liste limitée de sites Web organisés. C'est probablement la meilleure approche pour des fonctionnalités comme celle-ci en ce moment – l'opérateur agentique annoncé par Amazon aujourd'hui pour « acheter des trucs pour vous » fonctionne également avec une liste organisée de magasins. Il est plus facile de former une IA pour connaître son chemin autour d'une liste spécifique de sites Web que de lui faire confiance pour tout faire hors de la boîte.
Les premiers partenaires pour les actions de Copilot incluent des services de voyage et de réservation comme Booking.com, Expedia, Kayak, TripAdvisor, Skyscanner, victoire, VRBO et Priceline. Les réservations à manger via une table ouverte et des commandes florales via 1-800-flowers.com sont également prises en charge au lancement. Microsoft indique que la fonctionnalité est destinée à fonctionner éventuellement avec une large gamme de sites Web et a suggéré qu'il pourrait gérer les réservations de transport, potentiellement s'intégrer aux services de covoiturage. Mais pour l'instant, ce n'est que pour une liste spécifique de partenaires organisés. Bien que Copilot soit probablement bien testé pour travailler sur ces sites Web spécifiques, vous devez toujours regarder car il entre vos informations là-bas au cas où cela ferait une erreur. C'est toujours possible – vous seriez surpris de la fréquence à laquelle l'IA gâche, même avec la façon dont les modèles avancés sont devenus.
Microsoft élargit également la portée de «Copilot Vision», sa fonction d'analyse visuelle. Il n'était auparavant disponible que dans le navigateur Edge, mais la vision est désormais intégrée dans le système d'exploitation Windows et les applications mobiles Copilot (iOS et Android). Sur mobile, Copilot Vision peut analyser la vidéo en temps réel à partir de la caméra de l'appareil, ce qui lui permet d'offrir une aide contextuelle, telles que des conseils de soins des plantes ou des conseils de décoration intérieure. Pour les utilisateurs de Windows, vous pouvez simplement partager votre écran avec Vision et faire analyser l'IA ce qui est à l'écran. Cela permet des scénarios comme vous permettre d'obtenir de l'aide sur des applications spécifiques ou de vous aider à analyser les photos et les pages Web visualisées. L'implémentation Windows de Vision atterrira d'abord pour les initiés Windows, suivis d'un déploiement plus large.
Microsoft ajoute également sa propre vision du mode AI de Google en lançant « Copilot Search » dans Bing. Cela remplacerait essentiellement les résultats de recherche pour un résultat AI-UNLY, tout comme le mode AI de Google pour la recherche. Lorsqu'un utilisateur effectue une recherche, la recherche de copilote peut générer des résumés d'informations clés, fournir des réponses directes ou présenter des informations dans des dispositions structurées, selon la requête. Microsoft souligne que ces réponses générées par l'IA-citeront bien leurs sources, y compris les liens en ligne dans le texte et les listes d'URL utilisées, permettant aux utilisateurs de vérifier les informations et de naviguer facilement vers les propriétaires de contenu originaux.
Toutes ces fonctionnalités devraient se dérouler pour tout le monde bientôt, à l'exception de la vision de Windows, ce qui pourrait prendre, mais beaucoup de fonctionnalités ont tendance à prendre pour publier pour les utilisateurs de Windows.