GPT-4.5, la fel ca predecesorul său GPT-4, se confruntă cu mai multe limitări în cercetarea chimică. Aceste limitări sunt cruciale pentru înțelegerea potențialului și provocărilor utilizării modelelor de limbaj mare în acest domeniu.
1. Cunoștințe fundamentale și sarcini specializate
-Baza de cunoștințe: GPT-4.5, similar cu GPT-4, are o bază puternică în chimia la nivel de manual, inclusiv principiile chimiei fizice și organice. Cu toate acestea, este posibil să nu aibă acces la cele mai recente articole de cercetare din cauza restricțiilor de autor și a limitărilor datelor de formare [1].- Sarcini specializate: În sarcini precum predicția reacției și retrosinteză, modelele GPT se comportă în general mai rău decât modelele specializate de învățare automată instruită pe seturi de date chimice specifice [8]. Acest lucru indică faptul că, deși GPT-4.5 poate oferi informații generale, este posibil să nu fie la fel de eficient în sarcini chimice complexe, specializate.
2. Analiza și vizualizarea datelor
- GPT-4.5, la fel ca și alte modele de limbaj mare, se luptă cu prezentarea rezultatelor complexe ale analizei de date într-o manieră clară și concisă, inclusiv utilizarea vizualizărilor, tabelelor și graficelor [2]. Această limitare o face mai puțin eficientă pentru cercetătorii care trebuie să comunice în mod eficient constatările complexe.- îi lipsește capacitatea de a înțelege profund metodologiile statistice, de a identifica prejudecățile și de a gestiona datele lipsă, care sunt abilități critice în analiza datelor [2].
3. Revizuirea literaturii și evaluarea sursei
- GPT-4.5 nu poate examina în mod cuprinzător sursele academice, ceea ce este esențial pentru efectuarea de recenzii minuțioase ale literaturii. Se poate lupta să diferențieze între surse de înaltă calitate și mai puțin fiabile, ceea ce ar putea duce la inexactități în recenzii generate [2].- Incapacitatea modelului de a furniza liste precise de articole la referire este o altă limitare la scrierea lucrărilor științifice [6].
4. Sinteză chimică și proceduri experimentale
-GPT-4.5, similar cu GPT-4, poate să nu furnizeze proceduri experimentale exacte sau detaliate pentru sinteza chimică din cauza problemelor de siguranță și a limitărilor în înțelegerea reacțiilor chimice complexe [1]. Poate propune căi de sinteză incorecte din punct de vedere chimic sau mecanisme de reacție neînțelegeți.- Incapacitatea modelului de a estima cu exactitate structurile moleculare de la numele compuse poate duce la raționamente incorecte în sarcinile chiminformatice [1].
5. Integrare cu instrumente specializate
- Pentru sarcini care implică reacții chimice, GPT-4.5 poate beneficia de integrare cu software chimic specializat sau limbaje de programare pentru a-și îmbunătăți performanța [1]. Această integrare ar putea ajuta la depășirea unora dintre limitările sale în gestionarea datelor și reacțiilor chimice complexe.6. Considerații etice și de siguranță
- GPT-4.5, după cum s-a menționat în cardul sistemului, prezintă un risc mediu în crearea de amenințări chimice și biologice, datorită capacității sale de a ajuta la planificarea operațională pentru amenințări cunoscute [3]. Cu toate acestea, acest risc este atenuat de presupunerea că utilizatorii dețin deja o expertiză semnificativă în domeniu.În rezumat, în timp ce GPT-4.5 oferă capacități promițătoare în cercetarea chimică, cum ar fi cunoștințele fundamentale și analiza datelor, se confruntă cu limitări semnificative în sarcini specializate, vizualizare a datelor, revizuirea literaturii și considerente de siguranță. Eficacitatea sa este îmbunătățită atunci când este utilizată împreună cu instrumente specializate și expertiză în domeniu.
Citări:
[1] https://chemrxiv.org/engage/api-gateway/chemrxiv/assets/orp/resource/item/647d305dbe16ad5c577b6627/original/prompt-enenering-of-gpt-4-for-chemical-research-whwh-can-cannot-done.pdf
[2] https://www.enago.com/academy/chatgpt-canot-do-for-researchers-2/
[3] https://cdn.openai.com/gpt-4-5-system-card.pdf
[4] https://community.openai.com/t/what-are-the-lemitații-of-gpt-4-in-analyzing-pdf-text/534760
[5] https://www.tandfonline.com/doi/full/10.1080/27660400.2023.2260300
[6] https://pmc.ncbi.nlm.nih.gov/articles/PMC11184879/
[7] https://www.reddit.com/r/chatgpt/comments/1iznoek/gpt45_system_card_mmlu_896/
[8] https://arxiv.org/html/2305.18365v3