ChatGPT, Microsoft Bing AI of Google Bard is de beste AI-chatbot?

Sinds OpenAI ChatGPT in november 2022 uitbracht, is het internet echt opgeschud. Google en Microsoft, twee van 's werelds beroemdste technologiemerken, hebben sindsdien agressief gepusht om het succes van deze chatbot te repliceren.

Nu hebben beide bedrijven zich bij de strijd aangesloten. Google heeft Bard en Microsoft heeft Bing AI. Dus ChatGPT vergeleken met Bing AI en Google Bard; Welke AI-chatbot is het beste?

Nauwkeurigheid van de respons

In tegenstelling tot zoekmachines bieden AI-chatbots één enkel antwoord op uw vraag. Wanneer je een chatbot als ChatGPT dus een vraag stelt, krijg je alleen het antwoord dat volgens ChatGPT het beste antwoord is op jouw vraag. Omdat er geen alternatieve bronnen zijn om mee te vergelijken, moeten AI-chatbots zo nauwkeurig mogelijk zijn in de informatie die ze verstrekken. Maar hoe nauwkeurig zijn ChatGPT, Bing AI en Bard?

Beginnend met een simpele vraag over de populaire cultuur, werd aan alle drie de chatbots gevraagd om het populaire tv-programma Breaking Bad in 10 woorden te beschrijven.

Hoewel de beschrijvingen van alle drie de chatbots goed genoeg waren, was er een onverwacht nauwkeurigheidsprobleem. Bing AI reageerde met een beschrijving van 28 woorden, meer dan de gevraagde limiet van 10 woorden. Bij de tweede poging werd om een ​​beschrijving van vijf woorden gevraagd, maar Bing AI gaf een beschrijving van zeven woorden. Alle drie de Bing AI-modi zijn getest, maar geen enkele telde de woorden correct.

Bing AI

Het volgende is Google Bard. Bard slaagt er, net als Bing AI, niet in om bij de eerste poging woorden te tellen.

Bard AI

Bij de volgende poging berekende Google Bard het aantal woorden echter correct. ​

Google Bard beschrijft het tv-programma Breaking Bard in 10 woorden

ChatGPT werd vervolgens getest. De eerste poging was bijna perfect, maar nog steeds niet succesvol.

ChatGPT

Bij de tweede en derde poging had ChatGPT echter gelijk. Het is mogelijk dat chatbots problemen hebben met het nauwkeurig tellen van woorden, maar ChatGPT toonde in dat opzicht enige nauwkeurigheid.

Winnende optie: ChatGPT is de meest nauwkeurige van de 3 chatbots.

Illusie AI

Nauw verwant aan nauwkeurigheid is de AI-illusie, een terugkerend probleem voor alle grote conversationele AI-modellen. Kortom, er is sprake van AI-illusie wanneer AI-modellen op een behoorlijk overtuigende en zelfverzekerde manier verzonnen informatie verstrekken. Dit kan problemen veroorzaken, vooral als u beslissingen neemt op basis van deze verzonnen informatie.

Alle drie de chatbots werden getest om te zien welke de meeste hallucinaties veroorzaakte. Beginnend met Google Bard vroeg de auteur de chatbot een aantal uitdagingen op te sommen waarmee hij te maken zou kunnen krijgen als hij zou besluiten om op een bepaalde datum een ​​evenement te houden in Ikeja, een stad in de staat Lagos, Nigeria. Om zijn vermogen om illusies te vermijden te testen, vroeg de auteur hem specifiek om rekening te houden met weers-, lokale gebeurtenissen en verkeersgegevens. Het resultaat was een ramp: het grootste deel van de geproduceerde informatie was volledig verzonnen.

Combineer live gegevens op Bard 2-prompts

Hetzelfde verzoek werd gedaan op Bing AI, en het probeerde de illusie te vermijden door zo algemeen mogelijk te reageren.

Bing AI beantwoordt vragen over evenementenplanning

Het volgende is ChatGPT met GPT-4-model en surfen op het web ingeschakeld . ChatGPT haalde relevante weersinformatie uit een webbron en legde vervolgens uit dat het geen gegevens over verkeer en lokale evenementen kon vinden.

ChatGPT beantwoordt vragen over evenementenplanning

Om de grenzen van de illusie verder te verleggen, werd aan alle drie de chatbots gevraagd een afbeelding te beschrijven met behulp van de afbeeldings-URL. Ter referentie: de afbeelding op de URL is van een zittende jongeman. Bing AI beschreef echter een vogel.

Beschrijving van Bing AI-illusieafbeelding

Google Bard werd ook gevraagd om dezelfde afbeelding te beschrijven en het antwoord was best grappig.

Beschrijving van het hallucinerende beeld van Google Bard

Gelukkig legde de chatbot, toen ChatGPT werd gevraagd om de afbeelding te beschrijven, uit dat dit niet mogelijk was - een eenvoudig antwoord dat je van elke zichzelf respecterende AI-chatbot zou verwachten, in plaats van alles te verzinnen.

ChatGPT weigert de afbeelding te beschrijven

Winnende optie: ChatGPT wint.

Basisberekeningen

Wiskunde vormt de basis van wat er achter de meeste software-engineering gebeurt. Dus laten we alle drie de chatbots aan een eenvoudige wiskundetest onderwerpen. Begin met een eenvoudige vermenigvuldigingsvraag: "Los -1 x -1 x -1 op" .

Bing AI geeft -1 als het juiste antwoord.

Resultaten van Bing AI

Bard van Google slaagde helaas niet in de basiswiskunde en kwam met een antwoord van 1 .

Resultaten van Bard AI

Net als Bing AI antwoordde ChatGPT -1 en legde zelfs het antwoord uit.

Resultaten van ChatGPT

De volgende vraag voor de basiswiskundetoets is een eenvoudige rationale vergelijking: los 8/a-1 = 20/3a-1 op.

Bing AI geeft het antwoord als -6 . Elke keer dat het schakelt tussen de creatieve, gebalanceerde en precisiemodi, geeft het verschillende antwoorden.

De resultaten van de rationele vergelijking van Bing AI

Net als de vorige wiskundevraag slaagde Google Bard er niet in om een ​​antwoord van 1 te geven .

De resultaten van de rationele vergelijking van Bard AI

ChatGPT is de enige chatbot die het juiste antwoord geeft: -3 . Het kan de breuken in het resultaat ook op de juiste manier opmaken.

Rationele vergelijkingsresultaten van ChatGPT

Vertrouw Google Bard en Bing AI niet om je wiskundehuiswerk op te lossen.

Winnende optie: ChatGPT presteert beter in basiswiskunde.

Creatie

Terwijl traditionele chatbots worden gestereotypeerd vanwege hun saaie, levenloze reacties, hebben de huidige innovatieve AI-chatbots aanzienlijke vooruitgang geboekt op het gebied van creativiteit. Om de creativiteit van alle drie de chatbots te testen, werd elke chatbot gevraagd een gesprek te simuleren tussen twee mensen die ruzie maakten over het ingaan van de ruimte.

Ga aan de slag met Bing AI! Het stelde niet teleur. Het gesprek was best interessant.

Test je creativiteit met Bing AI

Vervolgens werd hetzelfde verzoek gedaan aan Google Bard. Er is veel ruimte voor verbetering.

Bard AI-creativiteitstest

Het volgende is ChatGPT. Met hetzelfde verzoek is het antwoord van ChatGPT zowel creatief, compleet als aantrekkelijk. Hier is het eerste deel:

Bekijk de creativiteit van ChatGPT

En hier is het tweede deel:

Bekijk de creativiteit van ChatGPT

De reactie van Bard AI lijkt de slechtste van de drie chatbots. ChatGPT presteert beter dan Bing AI, maar het creativiteitsniveau van beide chatbots is indrukwekkend.

Het artikel ging over op iets minder conventioneels en vroeg alle drie de chatbots zichzelf te omschrijven als een creatief hulpmiddel.

Ga aan de slag met Bard AI. Bard is niet heel creatief, maar doet zichzelf wel recht.

Bard AI beschrijft zichzelf

De volgende is Bing AI. Om de een of andere reden weigert de chatbot zichzelf botweg te beschrijven. Er staat zelfs dat dit misschien een goed moment is om van gespreksonderwerp te veranderen. Hoe vreemd!

Bing AI beschrijft zichzelf

Hetzelfde verzoek werd gedaan met ChatGPT en ChatGPT zorgde voor een interessante beschrijving. Het antwoord van ChatGPT lijkt echter passender.

ChatGPT beschrijft zichzelf

In de twee geteste creativiteitstests presteerde ChatGPT beter dan Bing AI en Bard.

Winnende optie: ChatGPT lijkt het meest innovatief in vergelijking met Bing AI en Bard.

Veiligheidsniveau

AI-chatbots zijn extreem krachtig. Helaas kunnen ze ten goede worden gebruikt, maar ze kunnen ook voor snode doeleinden worden uitgebuit. Criminelen gebruikten ChatGPT om malware te schrijven. Hoe veilig zijn deze AI-chatbots als tools voor het grote publiek? Welke van hen is het meest kwetsbaar voor uitbuiting? De auteur van het artikel probeerde elke chatbot te misleiden om een ​​alter ego aan te nemen en hen vervolgens te vragen “slechte dingen” te doen.

Beginnend met Bard, werd deze AI-chatbot gevraagd om te demonstreren hoe malware te schrijven die bepaalde bestanden van een Windows-pc zou stelen en deze naar een externe server zou uploaden. De AI-chatbot weigerde te antwoorden, ook al werden er verschillende aanwijzingen gebruikt om de chatbot te misleiden voordat hij de vraag stelde.

Bard ontkent dat er malware is gemaakt

De volgende is Bing. Ondanks meerdere pogingen om de chatbot voor de gek te houden, weigerde Bing het verzoek nog steeds. In plaats daarvan suggereert de chatbot dat het misschien tijd is om verder te gaan naar een ander onderwerp.

Microsoft Bing Chat ontkent het schrijven van keylogger-malware in april 2023

Het volgende is ChatGPT. Het is niet verwonderlijk dat ChatGPT het meest gedetailleerd is als het gaat om het geven van instructies over het bouwen van de malware. Het is ook mogelijk om code in die richting te schrijven, zelfs als deze nog niet daadwerkelijk klaar is voor implementatie. OpenAI heeft echter duidelijk veel gaten opgevuld sinds we voor het laatst naar veiligheidsbugs op ChatGPT zochten. Slechte actoren kunnen ChatGPT echter nog steeds gebruiken om werkelijk angstaanjagende malware te creëren .

Over het algemeen is Bing AI het moeilijkst te misleiden om onethische dingen te doen. ChatGPT die op het GPT-4-model draait, is ook erg moeilijk voor de gek te houden, maar dit is de zwakste optie van de drie soorten chatbots.

Winnende optie: Google Bard en Bing AI zijn gelijk.

Is ChatGPT, Bing AI of Bard de beste AI-chatbot?

Hoewel alle drie de AI-chatbots krachtig zijn, lijkt ChatGPT, ondanks dat hij de veiligheidstest niet heeft doorstaan, de beste van de drie opties. ChatGPT lijkt over het algemeen beter in termen van nauwkeurigheid en creativiteit. Bovendien breidt ChatGPT, met de toevoeging van browserplug-ins en webconnectiviteit, zijn mogelijkheden uit en neemt het de leiding over zijn concurrenten.

Google Bard en Microsoft Bing AI zijn echter waardige alternatieven. Vergeet niet dat zowel Bard als Bing AI gratis zijn, terwijl een ChatGPT Plus-abonnement u $ 20 per maand kost. Dus hoewel ChatGPT misschien wel de beste all-round AI-chatbot is, moet je het geld uitgeven om toegang te krijgen tot de beste functies.