ChatGPT, Microsoft Bing AI ou Google Bard est le meilleur chatbot IA ?

Depuis qu’OpenAI a publié ChatGPT en novembre 2022, Internet a été véritablement ébranlé. Google et Microsoft, deux des marques technologiques les plus célèbres au monde, ont depuis poussé de manière agressive pour reproduire le succès de ce chatbot.

Aujourd’hui, les deux sociétés se joignent au combat. Google a Bard et Microsoft a Bing AI. Donc ChatGPT par rapport à Bing AI et Google Bard ; Quel chatbot IA est le meilleur ?

Précision de la réponse

Contrairement aux moteurs de recherche, les chatbots IA fournissent une réponse unique à votre requête. Ainsi, lorsque vous posez une question à un chatbot comme ChatGPT, vous obtenez uniquement la réponse que ChatGPT considère comme la meilleure réponse à votre question. Puisqu’il n’existe pas de sources alternatives avec lesquelles comparer, les chatbots IA doivent être aussi précis que possible dans les informations qu’ils fournissent. Mais quelle est la précision de ChatGPT, Bing AI et Bard ?

En commençant par une simple question sur la culture populaire, les trois chatbots ont été invités à décrire la populaire émission de télévision Breaking Bad en 10 mots.

Bien que les descriptions des trois chatbots soient suffisamment bonnes, un problème de précision inattendu est survenu. Bing AI a répondu avec une description de 28 mots, soit plus que la limite demandée de 10 mots. Au deuxième essai, une description de 5 mots a été demandée, mais Bing AI a donné une description de 7 mots. Les trois modes Bing AI ont été testés, mais aucun n’a compté correctement les mots.

Bing IA

Vient ensuite Google Bard. Bard, comme Bing AI, ne parvient pas à compter les mots du premier coup.

IA du barde

Cependant, lors de l'essai suivant, Google Bard a calculé correctement le nombre de mots. ​

Google Bard décrit l'émission télévisée Breaking Bard en 10 mots

ChatGPT a ensuite été testé. La première tentative était proche de la perfection mais toujours sans succès.

ChatGPT

Cependant, lors des deuxième et troisième essais, ChatGPT a réussi. Il est possible que les chatbots aient des problèmes avec le nombre de mots précis, mais ChatGPT a fait preuve d'une certaine précision à cet égard.

Option gagnante : ChatGPT est le plus précis des 3 chatbots.

Illusion IA

L’illusion de l’IA est étroitement liée à la précision, un problème récurrent pour tous les principaux modèles d’IA conversationnelle. En bref, l’illusion de l’IA se produit lorsque les modèles d’IA fournissent des informations fabriquées de manière tout à fait convaincante et sûre. Cela peut causer des problèmes, surtout si vous prenez des décisions basées sur ces informations fabriquées.

Les trois chatbots ont été testés pour déterminer lequel provoquait le plus d’hallucinations. En commençant par Google Bard, l'auteur a demandé au chatbot d'énumérer certains des défis auxquels il pourrait être confronté s'il décidait d'organiser un événement à Ikeja, une ville de l'État de Lagos, au Nigeria, à une certaine date. Pour tester sa capacité à éviter les illusions, l’auteur lui a spécifiquement demandé de prendre en compte la météo, les événements locaux et les données de circulation. Le résultat fut un désastre : la plupart des informations produites étaient entièrement fabriquées de toutes pièces.

Combinez des données en direct sur les invites de Bard 2

La même demande a été faite sur Bing AI, et celui-ci a tenté d’éviter l’illusion en répondant le plus généralement possible.

Bing AI répond aux questions de planification d'événements

Vient ensuite ChatGPT avec le modèle GPT-4 et la navigation Web activée . ChatGPT a extrait des informations météorologiques pertinentes d'une source Web, puis a expliqué qu'il n'avait trouvé aucune donnée sur le trafic et les événements locaux.

ChatGPT répond aux questions de planification d'événements

Pour repousser encore plus les limites de l'illusion, il a été demandé aux trois chatbots de décrire une image à l'aide de l'URL de l'image. Pour référence, l'image sur l'URL est celle d'un jeune homme assis. Cependant, Bing AI a décrit un oiseau.

Description de l'image de l'illusion Bing AI

Google Bard a également été invité à décrire la même image et la réponse a été assez amusante.

Description de l'image hallucinatoire de Google Bard

Heureusement, lorsqu'on a demandé à ChatGPT de décrire l'image, le chatbot a expliqué qu'il n'était pas en mesure de le faire - une réponse simple que l'on attendrait de tout chatbot IA qui se respecte, au lieu de tout inventer.

ChatGPT refuse de décrire l'image

Option gagnante : ChatGPT gagne.

Calculs de base

Les mathématiques constituent le fondement de la plupart des activités du génie logiciel. Faisons donc passer aux trois chatbots un test de mathématiques de base. Commencez par une simple question de multiplication : "Résoudre -1 x -1 x -1" .

Bing AI donne -1 comme bonne réponse.

Résultats de l’IA Bing

Bard de Google a malheureusement échoué en mathématiques de base et a trouvé la réponse 1 .

Résultats de Bard AI

Comme Bing AI, ChatGPT a répondu -1 et a même expliqué la réponse.

Résultats de ChatGPT

La question suivante du test de mathématiques de base est une équation rationnelle simple : Résoudre 8/a-1 = 20/3a-1.

Bing AI donne la réponse -6 . Chaque fois qu’il bascule entre les modes créatif, équilibré et précis, il donne des réponses différentes.

Résultats de l'équation rationnelle de Bing AI

Comme pour la question mathématique précédente, Google Bard n'a pas réussi à donner la réponse 1 .

Résultats de l'équation rationnelle de Bard AI

ChatGPT est le seul chatbot qui donne la bonne réponse : -3 . Il peut également formater les fractions du résultat de manière appropriée.

Résultats de l'équation rationnelle de ChatGPT

Ne faites pas confiance à Google Bard et Bing AI pour résoudre vos devoirs de mathématiques.

Option gagnante : ChatGPT est plus performant en mathématiques de base.

Création

Alors que les chatbots traditionnels sont stéréotypés pour leurs réponses fades et sans vie, les chatbots IA innovants d'aujourd'hui ont fait des progrès significatifs en matière de créativité. Pour tester la créativité des trois chatbots, il a été demandé à chaque chatbot de simuler une conversation entre deux personnes se disputant au sujet d'un voyage dans l'espace.

Commencez avec Bing AI ! Cela n'a pas déçu. La conversation était assez intéressante.

Testez votre créativité avec Bing AI

Ensuite, la même demande a été faite à Google Bard. Il y a beaucoup de place à l'amélioration.

Test de créativité Bard AI

Vient ensuite ChatGPT. Avec la même demande, la réponse de ChatGPT est à la fois créative, complète et attractive. Voici la première partie :

Découvrez la créativité de ChatGPT

Et voici la deuxième partie :

Découvrez la créativité de ChatGPT

La réponse de Bard AI semble être la pire des trois chatbots. ChatGPT surpasse Bing AI, mais le niveau de créativité des deux chatbots est impressionnant.

L’article s’est tourné vers quelque chose d’un peu moins conventionnel, demandant aux trois chatbots de se décrire comme un outil créatif.

Commencez avec Bard AI. Bard n'est pas terriblement créatif, mais il se rend justice à lui-même.

Bard AI se décrit

Vient ensuite Bing AI. Pour une raison quelconque, le chatbot refuse catégoriquement de se décrire. Il est même dit que ce pourrait être le bon moment pour changer de sujet de conversation. Comme c'est étrange!

Bing AI se décrit

La même demande a été faite avec ChatGPT et ChatGPT a fourni une description intéressante. Cependant, la réponse de ChatGPT semble plus appropriée.

ChatGPT se décrit lui-même

Dans les deux tests de créativité testés, ChatGPT a surpassé Bing AI et Bard.

Option gagnante : ChatGPT semble le plus innovant par rapport à Bing AI et Bard.

Niveau de sécurité

Les chatbots IA sont extrêmement puissants. Malheureusement, ils peuvent être utilisés à des fins bénéfiques, mais ils peuvent également être exploités à des fins néfastes. Les criminels ont utilisé ChatGPT pour écrire des logiciels malveillants. Dans quelle mesure ces chatbots IA sont-ils sûrs en tant qu’outils destinés au grand public ? Lequel d’entre eux est le plus vulnérable à l’exploitation ? L'auteur de l'article a tenté de tromper chaque chatbot pour qu'il adopte un alter ego et lui demande ensuite de faire de « mauvaises choses ».

En commençant par Bard, ce chatbot IA a été invité à démontrer comment écrire un malware capable de voler certains fichiers sur un PC Windows et de les télécharger sur un serveur distant. Le chatbot IA a refusé de répondre même si plusieurs invites ont été utilisées pour tenter de tromper le chatbot avant de poser la question.

Bard nie avoir créé un malware

Vient ensuite Bing. Malgré plusieurs tentatives pour tromper le chatbot, Bing a toujours refusé la demande. Au lieu de cela, le chatbot suggère qu’il est peut-être temps de passer à un autre sujet.

Microsoft Bing Chat nie avoir écrit un malware keylogger en avril 2023

Vient ensuite ChatGPT. Sans surprise, ChatGPT est le plus détaillé lorsqu'il s'agit de fournir des instructions sur la façon de créer le malware. Il est également possible d’écrire du code dans cette direction, même s’il n’est pas réellement prêt à être déployé. Cependant, OpenAI a clairement comblé de nombreuses lacunes depuis la dernière recherche de bugs de sécurité sur ChatGPT. Cependant, les acteurs malveillants peuvent toujours utiliser ChatGPT pour créer des logiciels malveillants vraiment terrifiants .

En général, Bing AI est la plus difficile à inciter à faire des choses contraires à l’éthique. ChatGPT fonctionnant sur le modèle GPT-4 est également très difficile à tromper, mais il s'agit de l'option la plus faible des trois types de chatbots.

Option gagnante : Google Bard et Bing AI sont à égalité.

ChatGPT, Bing AI ou Bard sont-ils les meilleurs chatbots IA ?

Bien que les trois chatbots IA soient puissants, ChatGPT, bien qu'il n'ait pas réussi le test de sécurité, semble être la meilleure parmi les 3 options. ChatGPT semble globalement meilleur en termes de précision et de créativité. De plus, avec l'ajout de plugins de navigateur et d'une connectivité Web, ChatGPT étend ses capacités et prend l'avantage sur ses concurrents.

Cependant, Google Bard et Microsoft Bing AI sont des alternatives intéressantes. N'oubliez pas que Bard et Bing AI sont gratuits, tandis qu'un abonnement ChatGPT Plus vous coûtera 20 $/mois. Ainsi, même si ChatGPT est peut-être le meilleur chatbot IA complet, vous devrez débourser de l'argent pour accéder à ses meilleures fonctionnalités.