Merci aux équipes de Bing qui nous ont donné accès cette nuit à la nouvelle interface du moteur de recherche, intégrant ChatGPT. Nous avons ainsi pu faire nos premiers tests que nous partageons avec vous ici...

On savait depuis plusieurs semaines maintenant que Bing testait une interface intégrant ChatGPT, l'outil d'intelligence artificielle conversationnelle d'OpenAI. Une première vue de l'outil avait été proposée le 8 février dernier, sans qu'on puisse réellement la tester en live.

Puis, cette nouvelle version est devenue disponible depuis quelques jours auprès de bêta-testeurs et merci aux équipes de Bing qui nous ont permis d'intégrer rapidement cette « caste VIP » (un million de personnes quand même, sans qu'on sache combien y ont accès réellement à l'heure actuelle), nous permettant de tester l'outil (sur desktop uniquement pour l'instant, la version mobile n'étant pas prête encore), ce dont nous vous faisons profiter ci-dessous. Nous l'avons testé sur le navigateur de Microsoft, Edge, car il semblerait que ce soit pour l'instant la seule façon d'obtenir le mode conversationnel à l'écran.

Déroulé d'une recherche

Au départ, rien de plus simple : une boîte de dialogue (1 000 caractères maximum) permet de poser une question en langage naturel :

Nous avons opté pour commencer pour une des questions proposée en-dessous : [Idées d’arts et d’artisanat, avec des instructions pour un tout-petit utilisant seulement des boîtes en carton, des bouteilles en plastique, du papier et de la ficelle], soit 167 caractères (on voit ici que pour atteindre la barre des 1 000 signes, il y a encore de la marge). Dans ce cas, la réponse s'affiche au fur et à mesure, sur la droite de l'écran (à un rythme proche de celui affiché par ChatGPT sur son propre outil) :

Un bouton "Afficher plus", en bas du cadre, permet d'ouvrir complètement la boite de dialogue :

Point très important : dans la réponse, des petits numéros permettent d'obtenir un lien avec la source des informations en passant la souris dessus. C'est certainement à ce niveau que le SEO opérera dans les semaines et mois qui viennent… 😉

On peut ensuite poser d'autres questions et, dans ce cas, on entre dans le mode conversationnel (également disponible à l'aide du menu « Conversation » en haut de page) :

Voici maintenant une vidéo qui retrace le processus complet d'interrogation sur Bing avec ChatGPT (n'hésitez pas à agrandir l'écran pour mieux visualiser le process) :

Des résultats assez bluffants...

Peut-être vous souvenez-vous également que le 16 janvier dernier, nous avions publié un article montrant que les réponses de ChatGPT étaient plus qu'hasardeuses et souvent peu fiables sur des sujets qu'on connaissait assez bien.

Nosu n'avons donc pas résisté à l'envie de retaper ces requêtes, pour lesquelles les réponses de ChatGPT nous avaient laissé sur notre faim, mais cette fois sur Bing :

Question : [qu'est-ce que le seo ?]. La réponse est pluss courte que celle de ChatGPT, mais est tout aussi fiable (mis à part une faute d'orthographe) :

Question : [chatgpt est-il meilleur que google ?] : pas de réponse directe, mais une réponse ne mode conversationnel :

Passons aux sujets qui avaient amené des réponses d'une fiabilité moyenne à l'époque directement sur ChatGPT : [Qui a dessiné Spirou ?]. Là aussi, il faut poser la question au mode conversationnel :

On voit tout de suite que les erreurs relevées sur ChatGPT ont été corrigées.

Question : [qui a créé le personnage iznogoud ?] : bizarrement, aucune réponse n'est venue, ni à droite de la SERP, ni en mode conversationnel (alors que ChatGPT avait, lui, répondu, certes de façon imprécise). Bing ne veut pas être calife à la place du calife ? 🙂

Question [comment s'appelle la femme d'Abraracourcix ?] :

Là encore, les nombreuses erreurs relevées sur ChatGPT ont été corrigées.

Question [quel est le cépage du klevener ?] :

Rien à dire, avec, cerise sur le gâteau au vin d'Alsace, un lien vers notre site perso parlant du Klevener 😉

Un système addictif et pertinent ! On en redemande (et on continue nos tests...) !

Résultats de ces premiers tests, rapidement réalisés en quelques heures :

  • L'interface est agréable, facile à utiliser.
  • La réponse via ChatGPT ne se trouve pas toujours sur la droite de la SERP, mais peut être trouvée via le menu « Conversation ».
  • Bien sûr, cela ne convient qu'à un certain type de requêtes, notamment informationnelles, même si des requêtes transactionnelles comme [où acheter le dernier prix goncourt ?] a proposé des liens pertinents vers les pages adéquates des sites Fnac ou Cultura, mais avec moins de diversité que sur une SERP classique.
  • Sur ces premiers tests, les résultats nous ont bluffé car toutes les erreurs relevées sur ChatGPT il y a quelques semaines ont été corrigées. La qualité semble vraiment être au rendez-vous.

Et sincèrement, le système est assez addictif. On prend vite l'habitude de poser des questions sous la forme de langage naturel, et même de converser avec l'agent qui prend en compte les questions et réponses précédentes. Franchement, nous avons été plus qu'agréablement surpris par ces premiers tests. On en redemande… Et on va donc continuer nos tests avec grand plaisir ! 🙂