Ytelsen til GPT-4.5 på stilltiende kunnskaper og feilsøkingsspørsmål, sammenlignet med GPT-4, gjenspeiler fremskritt i håndtering av kompleks og nyanserte spørsmål. Mens spesifikke beregninger for stilltiende kunnskap og feilsøking ikke er detaljert i tilgjengelig informasjon, kan flere viktige forbedringer i GPT-4.5 fremheves:
1. Instruksjonshierarki og sikkerhet: GPT-4.5 er opplært til å overholde et instruksjonshierarki, noe som hjelper til med å dempe risikoen for hurtig injeksjoner og andre angrep. Dette betyr at det er bedre ved å følge systeminstruksjoner over motstridende brukermeldinger, og forbedre evnen til å håndtere komplekse scenarier som kan kreve feilsøking [1]. I kontrast har GPT-4 ikke denne spesifikke forbedringen som er nevnt i litteraturen.
2. Tvetydige spørsmål: GPT-4.5 viser litt lavere nøyaktighet på tvetydige spørsmål sammenlignet med GPT-4O (en versjon av GPT-4), med en nøyaktighet på 0,95 for GPT-4O mot 0,95 for GPT-4 og 0,95 for GPT-4,5. Imidlertid er GPT-4.5s ytelse på entydige spørsmål lik GPT-4O, noe som indikerer at begge modellene håndterer klare spørsmål effektivt [1].
3. Stilltvittighet Kunnskap og feilsøking: Mens spesifikke beregninger for stilltiende kunnskap og feilsøking ikke er gitt, GPT-4.5s forbedrede evne til å håndtere motstridende meldinger og dens forbedrede instruksjonshierarki antyder at den kan prestere bedre i scenarier som krever nyansert forståelse og feilsøking. GPT-4, derimot, er kjent for sin forbedrede språkforståelse og evne til å gi mer presise svar på komplekse spørsmål [2].
4. Multimodale evner: GPT-4, som er basen for GPT-4.5, tilbyr betydelige forbedringer i forhold til GPT-3.5 i multimodale evner og håndtering av komplekse spørsmål. GPT-4 kan behandle og svare på et bredere spekter av datainnganger, noe som gjør det mer allsidig for oppgaver som kan innebære feilsøking eller stilltiende kunnskap [2] [6].
Oppsummert, mens GPT-4.5 bygger på styrkene til GPT-4, spesielt i håndtering av komplekse instruksjoner og sikkerhetsprotokoller, er dens spesifikke ytelse på stilltiende kunnskap og feilsøkingsspørsmål ikke omfattende detaljert. Imidlertid antyder det forbedrede instruksjonshierarkiet og forbedret håndtering av motstridende meldinger at det kan være mer effektivt i nyanserte feilsøkingsscenarier.
Sitasjoner:
[1] https://assets.ctfassets.net/kftzwdyauwt9/7eadv6oawhhxlaehuyu7db/64e9f7916d3581ba4b5d0f0a6c5098d1/gpt-4-5_system_card_card_card_card_card_card_card_card_card_card_card_card_card_card_card_card_card_card_card_sy_card_sy_card_card_sy_sy_card_sy_card_sy_sy_card_sy_card_sy_card_sy_card_sy_card_card_sy_card_sy_sy_card_card_sy_sy_card_card_sy_sy_cards
[2] https://datasciedojo.com/blog/gpt-3-5-vs-gpt-4-debate/
[3] https://www.opastpublishers.com/open-access-articles/evaluating-rror-and-improving-performance-of-chatgpt.pdf
[4] https://pmc.ncbi.nlm.nih.gov/articles/pmc11197181/
[5] https://community.openai.com/t/gpt-performance-is-not-follow-p--instructions-and-tasks/613298
[6] https://www.aubergine.co/insights/gpt-3-5-vs-gpt-4-an-in---dpth-analysis-of-Onais-språk-modell
[7] https://www.marketingaiinstitute.com/blog/the-ai-show-episode-137
[8] https://www.techtarget.com/searchenterpriseai/tip/gpt-35-vs-gpt-4-fest-differences-to-concred