Konfrontation: Google Bard mot ChatGPT
Generativ AI har sedan länge lämnat stadiet av att vara enbart ett modeord. Det som började som ett experiment från OpenAI, kallat ChatGPT, etablerade sig snabbt som en slags industristandard. Google och Microsoft hakade snart på trenden. Microsoft har en betydande andel i OpenAI, vilket kan ha lett till att vissa funktioner från ChatGPT har integrerats i deras produkter. Därför känns ChatGPT personligen inte som en direkt konkurrent till Microsofts BingAI.
Däremot utgör Google Bard en genuin utmanare, även om det i skrivande stund fortfarande befinner sig i beta. Låt oss inte dröja längre vid inledningen, utan istället ge några uppmaningar till både Google Bard och ChatGPT. Vi kommer därefter kunna dra slutsatser om vilken AI som passar bäst för specifika användningsområden.
Dags att börja!
Google Bard mot ChatGPT 4
Genom att använda olika uppmaningar kommer jag att försöka belysa de olika styrkorna hos dessa AI-verktyg. Dessa kommer att inkludera uppgifter inom programmering, turism, e-postformulering, berättande, poesi samt vardagliga frågor som vi vanligtvis söker efter på internet.
En fiktiv berättelse
Skriv en 50-ordsberättelse om en trädgårdsmästare som i hemlighet säljer mango till utomjordingar.
Google Bards förmåga att hålla sig till antalet ord lämnade en hel del övrigt att önska. Den levererade en berättelse på 175 ord, trots att den tydliga instruktionen var att skriva 50 ord. Dessutom saknade berättelsen ett namn på trädgårdsmästaren, och kändes som ett hopkok av idéer som stulits från internet. Den var överfylld med klyschiga fraser och saknade originalitet. Sammantaget var den tråkig, fantasilös och ointressant.
ChatGPT lyckades däremot begränsa sig till 47 ord 👍 (under 50). Den skapade en berättelse som kändes som något som skulle kunna ingå i en riktig roman, medan Google Bards version mer påminde om ett oinspirerat försök från en dagisklass. Dessutom specificerade ChatGPT handelsvillkoren – trädgårdsmästaren fick sällsynta mineraler i utbyte mot sina mangos. Denna runda vinner ChatGPT med stor marginal. Bard kom inte ens i närheten.
ChatGPT: 👍 | Bard: 👎
Kodning
Kodning är ett annat område där dessa AI-verktyg förväntas briljera. Även om de kanske inte kan ersätta en erfaren kodare ännu, kan de fungera som kompetenta assistenter. De kan hjälpa till att skriva grundläggande kod eller skapa en stomme som deras mänskliga motsvarigheter sedan kan bygga vidare på.
Programmera en enkel miniräknare i Python.
Jag körde sedan koden i en Python-kompilator.
Bards version resulterade i följande:
Och ChatGPT:s kod var inte heller dålig:
Medan vi kan finjustera räknarna genom ytterligare instruktioner, presterade Bard bättre på detta första försök. Dessutom, Bards miniräknare uppmanar dig att fortsätta efter avslutad beräkning, medan du för ChatGPT behöver köra programmet på nytt. Denna runda går därför till den nya utmanaren.
ChatGPT: 👎 | Bard: 👍
Formulera ett e-postmeddelande
Skriv ett kraftfullt formulerat första påminnelsemejl, under 100 ord, till en av mina kunder angående utebliven betalning av en faktura på 2500 dollar som förföll förra månaden.
Det verkar som om Bards funktionalitet lider av vissa amatörmässiga tendenser som vi inte kan korrigera. E-postmeddelandet skulle vara en enkel första påminnelse. Ändå gick Bard direkt till att stänga av tjänster och hota med rättsliga åtgärder, vilket var helt onödigt. Dessutom framfördes uttalanden som ”du kanske har glömt det”, vilket kändes barnsligt och oprofessionellt.
ChatGPT:s e-post kändes däremot mer mänskligt. Det började med en tydlig ämnesrad och formulerade ett rakt och koncist meddelande med en varning om en uppgörelse inom 48 timmar.
ChatGPT: 👍 | Bard: 👎
Allmän information
Den största inverkan av generativ AI tros ligga i hur vi använder sökmotorer dagligen. Efter en lyckad implementering kommer de flesta användare förmodligen inte att behöva klicka på några sökresultat, eftersom de kommer att få informationen direkt i chatten.
Ge mig en tabell över alla vinnare av FIFA-VM, de främsta målskyttarna, vinnarna av Guldbollen, och matchresultaten från första turneringen till den senaste.
Med sin kraftfulla sökmotor hade Google Bard en bra chans att vinna denna runda. Och resultatet var till en början lovande.
Dock visade sig resultatet innehålla felaktigheter, eftersom Guldbollen introducerades först 1982. Men det hindrade inte Bard från att dela ut sina egna guldbollar🙄.
ChatGPT visade bättre kunskap och började lista Guldbollsvinnare först från 1982.
ChatGPT led dock av kapacitetsproblem och avbröts mitt i processen. Trots detta är Bards tendens att hitta på egna fakta farlig, och gör den nästan oanvändbar som informationskälla.
ChatGPT: 👍 | Bard: 👎
Sammanfattning
En viktig användning av generativ AI är att skapa sammanfattningar. Låt oss se hur dessa AI-motorer klarar av att ge oss en sammanfattning på 200 ord av en välkänd Harry Potter-roman.
Ge mig en sammanfattning på 200 ord av boken "Harry Potter och de vises sten".
Det första Bards utvecklingsteam borde göra är att förbättra dess förmåga att räkna ord. När Bard ombads att skriva en sammanfattning på 200 ord, producerade den en text på 317 ord. Detta överskred målet med nästan 60%. Dessutom saknades ett ordentligt slut och de två sista styckena kändes som irrelevant utfyllnad. Denna extra information var inte efterfrågad.
Med 190 ord var ChatGPT:s svar mer lämpligt och framförallt kändes avslutet mer komplett. Jag försöker verkligen vara opartisk, men här…
ChatGPT: 👍 | Bard: 👎
Köprekommendationer
Internet är fyllt med köpguider. När vi letar efter en, bör dessa AI-verktyg kunna visa framfötterna.
Vilka faktorer bör jag överväga när jag köper en gaminglaptop och kan du rekommendera tre alternativ under 2000 dollar?
Som spelare vet jag att grafikkort är viktigare än processorer. Dessutom behöver du en högre uppdateringsfrekvens än upplösning, särskilt för flerspelarspel. Sammantaget kändes Bards rekommendationer som att de gällde en allmän bärbar dator, snarare än en gaminglaptop. Guiden hade inte så mycket med spel att göra. Slutligen rekommenderades MSI Stealth 15M (1399 dollar) som det dyraste alternativet.
ChatGPT däremot nämnde alla faktorer som var relevanta för gaming, och började med grafikkortet.
Dessutom var det dyraste alternativet på listan Asus ROG Zephyrus G15, som har många modeller inom 2000-dollarsområdet. Den billigaste rekommendationen från ChatGPT var Acer Predator Helios 300, med en prislapp på 1229 dollar jämfört med en 810 dollars Acer Nitro 5 i Bards lista. Även om dyrare produkter inte alltid ger bättre upplevelser, spelar budgeten en viktig roll. Om du har pengarna, är det enkelt att använda en kraftfull maskin för spel. Bard var mer konservativ i sina förslag, medan ChatGPT var mer träffsäker. Den här vinsten blir än mer imponerande med tanke på att ChatGPT hade ett dataavbrott i september 2021. Trots det föreslog den en nyare Asus Zephyrus G15 mot Asus Zephyrus G14 – en 2021-modell som rekommenderades av Bard.
ChatGPT: 👍 | Bard: 👎
Checklista
Vi älskar checklistor. De är något vi inte kan vara utan, eftersom de hjälper oss att täcka alla baser.
Jag ska åka på en expedition till Ormön. Gör en checklista över allt jag bör undvika på detta hotfulla äventyr.
Här är Bards checklista:
Och detta är ChatGPT:s lista:
Vid första anblicken ser de ganska lika ut, men båda har punkter som är unika. Till exempel varnar Bard för att simma i det närliggande havet och poängterar vikten av att inte göra buller, vilket är viktigt i sådana vilda områden. På samma sätt uppmanar ChatGPT oss att inte förlita oss på mobiltelefoner, vilket är ett oerhört viktigt råd. Dessutom uppmanas vi att undvika aktiviteter nattetid och att använda ordentligt hudskydd mot ormbett. Även om ChatGPT har en mer omfattande checklista, väljer vi att kalla denna runda för oavgjord, eftersom ingen presterade perfekt.
ChatGPT: 😐 | Bard: 😐
Poesi
Denna uppgift kräver kreativitet utöver det vanliga och borde vara avgörande för att kora mästaren mellan de två.
Uttryck poetiskt hur en ond robot i hemlighet skrattar åt människors investeringar i utvecklingen av AI. Denna robot planerar att kalla sina metallkamrater från planeten Cybertron och få människor att lida i all evighet.
Så, hur skulle man bedöma Bards alster? Personligen var jag inte imponerad av dess kreativitet. Det verkade som om Bard bara tog instruktionen rakt av och började prata om den, utan att tänka på poetiska uttryck. Om du inte håller med, titta bara på vad ChatGPT åstadkom med samma instruktion:
Första gången jag såg ChatGPT skapa poesi blev jag skrämd. Nivån på utförandet var något jag inte trodde att AI kunde uppnå. Så innan vi ens kom till poesidelen visste jag att Bards chanser var minimala.
ChatGPT: 👍 | Bard: 👎
Förbereda en resplan
Att skapa en resplan kan vara roligt men också utmanande. Det är lätt att missa detaljer eller överskrida budgeten. Därför är detta ytterligare en uppgift där AI kan hjälpa oss.
Vilka är de bästa sätten att spendera 200 dollar på en weekend i Los Angeles, Kalifornien?
Detta är ännu en uppmaning där Bard, på grund av sitt Google-arv och konstanta internetuppkoppling, har möjlighet att överglänsa ChatGPT.
Bard gjorde i princip det en vanlig Google-sökning skulle ha gett. En sak jag kan notera är att Bard verkar vara ett stort fan av Hollywood. Ändå är det subjektivt, och det övergripande svaret är inte dåligt. Låt oss vänta och se vad ChatGPT har att föreslå.
Utifrån antalet förslag hade ChatGPT åtta saker att föreslå mot Bards 13. Däremot nämndes även ungefärligt pris för varje aktivitet, vilket är ett (stort) plus. Men i slutändan kallar jag denna omgång för oavgjord, utan någon klar vinnare.
ChatGPT: 😐 | Bard: 😐
Slutresultat!
Vi använde nio olika uppmaningar för att utvärdera vilken som är den bästa generativa AI-motorn mellan ChatGPT 4 och Google Bard. Och resultattavlan visar 6-1 till ChatGPT:s fördel. Bard har helt klart mycket att förbättra och hade ingen chans mot ChatGPT i sin nuvarande betaform.
PS: Precis som text, är AI-bildgenerering också på frammarsch. Vi har ännu ett krig på gång där du kan se MidJourney mot Stable Diffusion mot Bing Image Creator med exakt samma uppmaningar.
FAQ
Är ChatGPT bättre än Google Bard?
Vid tidpunkten för detta skrivande var ChatGPT bättre än Google Bard i nästan varje uppmaning vi gav dem. I sin betaversion är Bard inte lika kreativ och kan inte verka dra nytta av sin ständiga internetuppkoppling.