GPT-4.5, som sin föregångare GPT-4, står inför flera begränsningar i kemisk forskning. Dessa begränsningar är avgörande för att förstå potentialen och utmaningarna med att använda stora språkmodeller på detta område.
1. Grundläggande kunskaper och specialiserade uppgifter
-Kunskapsbas: GPT-4,5, liknande GPT-4, har en stark grund inom kemi på läroböcker, inklusive fysiska och organiska kemiprinciper. Det kanske emellertid inte har tillgång till de senaste forskningsartiklarna på grund av upphovsrättsbegränsningar och utbildningsdatabegränsningar [1].- Specialiserade uppgifter: I uppgifter som reaktionsförutsägelse och retrosyntes presterar GPT -modeller i allmänhet sämre än specialiserade maskininlärningsmodeller utbildade i specifika kemiska datasätt [8]. Detta indikerar att även om GPT-4,5 kan ge allmän insikt, kanske det inte är lika effektivt i komplexa, specialiserade kemiska uppgifter.
2. Dataanalys och visualisering
- GPT-4.5, som andra stora språkmodeller, kämpar med att presentera komplexa dataanalysresultat på ett tydligt och kortfattat sätt, inklusive användning av visualiseringar, tabeller och grafer [2]. Denna begränsning gör det mindre effektivt för forskare som behöver kommunicera komplexa resultat effektivt.- Det saknar förmågan att djupt förstå statistiska metoder, identifiera fördomar och hantera saknade data, som är kritiska färdigheter i dataanalys [2].
3. Litteraturöversikt och källutvärdering
- GPT-4.5 kan inte granska akademiska källor omfattande, vilket är viktigt för att genomföra grundliga litteraturrecensioner. Det kan kämpa för att skilja mellan högkvalitativa och mindre pålitliga källor, vilket potentiellt kan leda till felaktigheter i genererade recensioner [2].- Modellens oförmåga att tillhandahålla exakta listor över refererade artiklar är en annan begränsning när man skriver vetenskapliga artiklar [6].
4. Kemisk syntes och experimentella procedurer
-GPT-4.5, liknande GPT-4, kanske inte ger exakta eller detaljerade experimentella förfaranden för kemisk syntes på grund av säkerhetsproblem och begränsningar för att förstå komplexa kemiska reaktioner [1]. Det kan föreslå kemiskt felaktiga syntesvägar eller missförstånd reaktionsmekanismer.- Modellens oförmåga att exakt uppskatta molekylstrukturer från sammansatta namn kan leda till felaktiga resonemang i keminformatikuppgifter [1].
5. Integration med specialiserade verktyg
- För uppgifter som involverar kemiska reaktioner kan GPT-4,5 dra nytta av integration med specialiserad kemisk programvara eller programmeringsspråk för att förbättra dess prestanda [1]. Denna integration kan hjälpa till att övervinna några av dess begränsningar i hantering av komplexa kemiska data och reaktioner.6. Etiska och säkerhetshänsyn
- GPT-4.5, som noterats i systemkortet, utgör en medelhög risk i kemisk och biologisk hotskapande på grund av dess förmåga att hjälpa till i operativ planering för kända hot [3]. Denna risk mildras emellertid av antagandet att användare redan har betydande domänkompetens.Sammanfattningsvis, medan GPT-4.5 erbjuder lovande förmågor inom kemisk forskning, såsom grundläggande kunskaper och dataanalys, står det inför betydande begränsningar i specialiserade uppgifter, datavisualisering, litteraturöversikt och säkerhetsöverväganden. Dess effektivitet förbättras när den används i samband med specialiserade verktyg och domänkompetens.
Citeringar:
[1] https://chemrxiv.org/engage/api-gateway/chemrxiv/assets/orp/resource/item/647d305dbe16ad5c5777727/original/prompt-gineering-of-gpt-4-for-chemical
[2] https://www.enago.com/academy/chatgpt-cannot-do-for-researchers-2/
[3] https://cdn.openai.com/gpt-4-5-system-card.pdf
[4] https://community.openai.com/t/what-are-the-limitations-of-gpt-4-in-analysing-pdf-text/534760
[5] https://www.tandfonline.com/doi/full/10.1080/27660400.2023.2260300
[6] https://pmc.ncbi.nlm.nih.gov/articles/pmc11184879/
[7] https://www.reddit.com/r/chatgpt/comments/1iznoek/gpt45_system_card_mmlu_896/
[8] https://arxiv.org/html/2305.18365v3