Udførelsen af GPT-4.5 på stiltiende viden og fejlfindingsspørgsmål sammenlignet med GPT-4 afspejler fremskridt i håndtering af komplekse og nuancerede forespørgsler. Mens specifikke målinger for stiltiende viden og fejlfinding ikke er detaljeret i de tilgængelige oplysninger, kan flere nøgleforbedringer i GPT-4.5 fremhæves:
1. Instruktionshierarki og sikkerhed: GPT-4.5 er blevet trænet til at overholde et instruktionshierarki, som hjælper med at afbøde risikoen for hurtige injektioner og andre angreb. Dette betyder, at det er bedre til at følge systeminstruktioner over modstridende brugerbeskeder, hvilket forbedrer dens evne til at håndtere komplekse scenarier, der muligvis kræver fejlfinding [1]. I modsætning hertil har GPT-4 ikke denne specifikke forbedring nævnt i litteraturen.
2. tvetydige spørgsmål: GPT-4.5 viser lidt lavere nøjagtighed på tvetydige spørgsmål sammenlignet med GPT-4O (en version af GPT-4) med en nøjagtighed på 0,95 for GPT-4O versus 0,95 for GPT-4 og 0,95 for GPT-4.5. Imidlertid ligner GPT-4.5s præstation på entydige spørgsmål GPT-4O, hvilket indikerer, at begge modeller håndterer klare forespørgsler effektivt [1].
3. Stiltiende viden og fejlfinding: Mens der ikke gives specifikke målinger for stiltiende viden og fejlfinding, antyder GPT-4.5's forbedrede evne til at håndtere modstridende meddelelser og dens forbedrede instruktionshierarki, at det måske fungerer bedre i scenarier, der kræver nuanceret forståelse og fejlfinding. GPT-4 er på den anden side kendt for sin forbedrede sprogforståelse og evne til at give mere præcise svar på komplekse forespørgsler [2].
4. Multimodale kapaciteter: GPT-4, som er basen for GPT-4.5, tilbyder betydelige forbedringer i forhold til GPT-3.5 i multimodale kapaciteter og håndtering af komplekse forespørgsler. GPT-4 kan behandle og reagere på en bredere vifte af dataindgange, hvilket gør det mere alsidigt til opgaver, der kan involvere fejlfinding eller stiltiende viden [2] [6].
Sammenfattende, mens GPT-4.5 bygger på styrkerne af GPT-4, især ved håndtering af komplekse instruktioner og sikkerhedsprotokoller, er dens specifikke ydelse på stiltiende viden og fejlfindingsspørgsmål ikke i vid udstrækning detaljeret. Imidlertid antyder dets forbedrede instruktionshierarki og forbedret håndtering af modstridende meddelelser, at det kunne være mere effektivt i nuancerede fejlfindingsscenarier.
Citater:
[1] https://assets.ctfassets.net/kftzwdyauwt9/7eadv6oawhhxlaehuyu7db/64e9f7916d3581ba4b5d0f0a6c5098d1/gpt-4-5_system_card_2272025.pdf
[2] https://datasciencedojo.com/blog/GPT-3-5-VS-TT
[3] https://www.opastpublishers.com/open-access-articles/evaluating-rors-and-improving-performance-of-chatgpt.pdf
[4] https://pmc.ncbi.nlm.nih.gov/articles/pmc11197181/
[5] https://community.openai.com/t/gpt-performance-is-not-follow-op-to-instructions-and-tass/613298
)
[7] https://www.marketingaiinstitute.com/blog/the-i-show-episode-137
[8] https://www.techtarget.com/searchenterpriseai/tip/gpt-35-vs-trpt-4-biggest-differences-to- og konsider