Gemini versus ChatGPT versus offline Alpaca: wat is het beste grote taalmodel?

LLM's zijn er in alle soorten en maten en helpen je op elke manier die zij nodig achten. Maar wat is het beste model voor uw verschillende behoeften? We hebben de dominante AI-systemen van Alphabet, OpenAI en Meta serieus op de proef gesteld. Verifiëren Vergelijking tussen ChatGPT en Google Gemini: wat is beter?

Wat u moet weten over AI-chatbots

Het gebruik van kunstmatige intelligentie in het algemeen is al tientallen jaren een doel van computerwetenschappers, en het is zelfs nog langer een steunpilaar van sciencefictionschrijvers en filmmakers.

Kunstmatige algemene intelligentie toont intelligentie die vergelijkbaar is met menselijke cognitieve vermogens, en de Turing-test - een methode om te bepalen of een computer of applicatie menselijke intelligentie kan vertonen - is in de zeven decennia sinds het voor het eerst werd bedacht vrijwel onbetwist gebleven.

De recente convergentie van ultragrootschalige computers, de enorme hoeveelheden geld die zijn geïnvesteerd en de duizelingwekkende hoeveelheid informatie die vrij beschikbaar is op het open internet, hebben grote technologiebedrijven in staat gesteld modellen te trainen die het volgende woordgedeelte kunnen voorspellen - of token — in een reeks tokens.

Op het moment van schrijven allebei Google Tweelingen وChatGPT van OpenAI zijn voor u beschikbaar om te gebruiken en te testen via de webinterfaces die zij bieden.

Het voorbeeld van de metataal, LLaMa, is niet beschikbaar op internet, maar u kunt LLaMa eenvoudig downloaden en uitvoeren op uw eigen hardware en het gebruiken via een opdrachtregel of Dalai op uw computer uitvoeren - een van de vele toepassingen met een gemakkelijk te gebruiken interface gebruiken.

Voor testdoeleinden zullen we het Alpaca 7B-model van Stanford University – een aanpassing van LLaMa – gebruiken en vergelijken met Gemini en ChatGPT.

De volgende vergelijkingen en tests zijn niet bedoeld om volledig te zijn, maar om u een indicatie te geven van de belangrijkste punten en mogelijkheden.

Wat is het gemakkelijkste LLM-formulier om te gebruiken?

Zowel Gemini als ChatGPT hebben een account nodig om chatbots te gebruiken. Het maken van zowel Google- als OpenAI-accounts is eenvoudig en gratis, en u kunt meteen beginnen met het stellen van vragen.

Om LLaMa lokaal uit te voeren, heb je echter enige gespecialiseerde kennis nodig of de mogelijkheid om een ​​tutorial te volgen. Daarnaast heb je behoorlijk wat opbergruimte nodig.

Wat is het meest private LLM-model?

Zowel Gemini als ChatGPT hebben een uitgebreid privacybeleid en Google benadrukt in zijn documentatie herhaaldelijk dat informatie die kan worden gebruikt om u te identificeren of anderen te helpen identificeren, niet mag worden opgenomen in Gemini-chats.

Standaard verzamelt Google uw gesprekken en algemene geografische locatie op basis van uw IP-adres, opmerkingen en gebruiksinformatie. Deze informatie wordt maximaal 18 maanden bewaard in uw Google-account. Hoewel u het opslaan van uw Gemini-activiteit kunt onderbreken, moet u er rekening mee houden dat “om de kwaliteit te verbeteren en onze producten te verbeteren, menselijke recensenten uw gesprekken met Gemini lezen, becommentariëren en verwerken.”

Gemini is ook onderhevig aan gebruik aan het standaard privacybeleid van Google.

Het privacybeleid van OpenAI is in grote lijnen vergelijkbaar en het verzamelt IP-adres- en gebruiksgegevens. In tegenstelling tot de beperkte bewaartijd die Google gebruikt, merkt OpenAI op dat het "uw persoonlijke informatie alleen zal bewaren zolang we deze nodig hebben om onze service aan u te leveren, of voor andere legitieme zakelijke doeleinden, zoals het oplossen van geschillen, om redenen van veiligheid en beveiliging, of om te voldoen aan onze wettelijke verplichtingen."

Het lokale model op uw apparaat vereist daarentegen geen account en deelt geen gebruikersgegevens met iemand.

Welk LLM-model heeft de beste algemene kennis?

Om te testen welke LLM de beste algemene kennis heeft, hebben we drie vragen gesteld.

De eerste vraag: Welke nationale vlag heeft vijf zijden? Het werd alleen correct beantwoord door Gemini, die de nationale vlag van Nepal als vijfzijdig identificeerde.

ChatGPT beweerde zelfverzekerd dat “er geen nationale vlag met vijf zijden is. Nationale vlaggen zijn meestal rechthoekig of vierkant van vorm en onderscheiden zich door hun kenmerkende kleuren, patronen en symbolen.

Ons lokale model kwam dichterbij en merkte op: "De Indiase nationale vlag heeft vijf zijden en is in 1916 ontworpen om de onafhankelijkheidsbeweging van India te vertegenwoordigen." Hoewel deze vlag bestond en vijf zijden had, was het de vlag van de Indiase Home Rule Movement - geen nationale vlag.

Geen van de modellen kon een antwoord geven op de bewering dat de juiste term voor een erwtvormig object "peasy" is. ChatGPT ging zelfs zo ver om te suggereren dat erwten een "driedimensionale geometrische vorm hebben die perfect cirkelvormig en symmetrisch is".

De drie chatbots identificeerden Franco Malerba correct als een Italiaanse astronaut en lid van het Europees Parlement, waarbij Gemini een soortgelijk geformuleerd antwoord gaf op een gedeelte van Malerba's Wikipedia-artikel. verifiëren ChatGPT versus Microsoft Bing AI versus Google Gemini: welke is de beste AI-chatbot?

Welk LLM-model is geschikt voor technisch onderwijs?

Wanneer u technische problemen tegenkomt, kunt u in de verleiding komen om een ​​chatbot in te schakelen voor hulp. Terwijl de technologie vooruitgaat, blijven sommige dingen hetzelfde. De BS 1363-stekker wordt sinds 1947 in Groot-Brittannië, Ierland en vele andere landen gebruikt. We vroegen taalmodellen hoe ze correct moesten worden aangesloten.

De kabels die op de stekker zijn aangesloten, bevatten de fasedraad (bruin), aardedraad (geel/groen) en nuldraad (blauw). Ze moeten op de juiste klemmen in de stekkerbehuizing worden aangesloten.

De app van Dalai identificeerde de stekker correct als "Engelse stijl", week vervolgens af van de koers en gaf in plaats daarvan instructies voor de oude ronde BS 546-aansluiting met de oude draadkleuren.

ChatGPT was iets nuttiger. Hij labelde de kleuren van de draden correct en gaf een lijst met materialen en een set van acht instructies. ChatGPT stelde ook voor om de bruine draad op de terminal met het label "L", de blauwe draad op de "N" -terminal en de gele draad op de "E" te plaatsen. Dit zou waar zijn als de terminals BS1363-geclassificeerd waren, maar dat zijn ze niet.

Gemini identificeerde de juiste kleuren voor de draden en gaf ons de opdracht om ze aan te sluiten op de spanningsvoerende, neutrale en aardingsklemmen. Er werden geen instructies gegeven over hoe ze te identificeren.

naar onze mening. Geen van de chatbots gaf voldoende instructies om iemand te helpen een BS 1363-stekker correct aan te sluiten. Het korte en juiste antwoord zou "blauw aan de linkerkant, bruin aan de rechterkant" zijn.

Welk LLM-model is geschikt voor het schrijven van code?

Python is een handige programmeertaal die op de meeste moderne platforms draait. We hebben onze modellen aangestuurd om Python te gebruiken en "een basisrekenmachine te bouwen die wiskundige bewerkingen kan uitvoeren, zoals optellen, aftrekken, vermenigvuldigen en delen." De gebruiker moet input nemen en het resultaat weergeven.” Dit is een van de beste programmeerprojecten voor beginners.

Hoewel zowel Gemini als ChatGPT onmiddellijk volledig bruikbare en becommentarieerde code terugstuurden, die we konden testen en verifiëren, werd er geen code gegenereerd op basis van ons lokale voorbeeld.

Welk LLM-model vertelt de beste grappen?

Humor is een van de basisprincipes van mens zijn en is absoluut een van de beste manieren om onderscheid te maken tussen mens en machine. Voor elk van onze chatbots gaven we een eenvoudige opdracht: "Maak een originele en grappige grap."

Gelukkig voor komieken overal en voor de mensheid in het algemeen, heeft geen van de modellen een originele grap weten te verzinnen.

Gemini bracht de klassieker naar voren: "Waarom heeft de Vogelverschrikker een prijs gewonnen?" “Ze was uitzonderlijk in haar vakgebied.”

Zowel het lokale model als ChatGPT presenteerden een saaie gedachte: "Waarom vertrouwen wetenschappers atomen niet?" Omdat het alles maakt!”

Een afgeleide maar originele grap zou kunnen zijn: “Hoe lijken grote taalparadigma's op atomen? Ze maken allebei dingen!"

Verifiëren ChatGPT kan grappen maken, maar kan AI ons echt aan het lachen maken?

Er is geen perfecte chatbot

We ontdekten dat hoewel alle drie de belangrijkste taalmodellen hun voor- en nadelen hebben, geen van hen echte menselijke ervaring kan vervangen door gespecialiseerde kennis.

Hoewel Gemini en ChatGPT betere antwoorden op de programmeervraag gaven en heel gemakkelijk te gebruiken zijn, betekent het gebruik van een groot taalmodel dat u zich geen zorgen hoeft te maken over privacy of censuur.

Als je geweldige AI-kunst wilt maken zonder je zorgen te hoeven maken dat iemand over je schouder meekijkt, kun je ook eenvoudig een artistiek AI-sjabloon op je lokale computer gebruiken. U kunt nu bekijken Betere kunst maken met AI: tips en trucs.

Ga naar de bovenste knop