GPT-4.5, kaip ir jo pirmtakas GPT-4, susiduria su keliais cheminių tyrimų apribojimais. Šie apribojimai yra labai svarbūs norint suprasti didelių kalbos modelių naudojimo potencialą ir iššūkius šioje srityje.
1. Pagrindinės žinios ir specializuotos užduotys
-Žinių bazė: GPT-4.5, panašiai kaip GPT-4, turi tvirtą pagrindą vadovėlių lygio chemijoje, įskaitant fizinės ir organinės chemijos principus. Tačiau dėl autorių teisių apribojimų ir mokymo duomenų apribojimų ji gali neturėti prieigos prie naujausių tyrimų straipsnių [1].- Specializuotos užduotys: tokiose užduotyse kaip reakcijos prognozavimas ir retrosintezė GPT modeliai paprastai veikia blogiau nei specializuoti mašinų mokymosi modeliai, apmokyti konkrečiuose chemijos duomenų rinkiniuose [8]. Tai rodo, kad nors GPT-4.5 gali suteikti bendrų įžvalgų, jis gali būti ne toks efektyvus atliekant sudėtingas, specializuotas chemines užduotis.
2. Duomenų analizė ir vizualizacija
- GPT-4.5, kaip ir kiti dideli kalbos modeliai, kovoja su sudėtingų duomenų analizės pateikimu aiškiai ir glaustai, įskaitant vizualizacijų, lentelių ir grafikų naudojimą [2]. Dėl šio apribojimo tyrėjams, kuriems reikia efektyviai pranešti apie sudėtingas išvadas, jis tampa ne toks efektyvus.- Trūksta galimybės giliai suprasti statistines metodikas, nustatyti šališkumą ir tvarkyti trūkstamus duomenis, kurie yra kritiniai duomenų analizės įgūdžiai [2].
3. Literatūros apžvalga ir šaltinio vertinimas
- GPT-4.5 negali išsamiai išnagrinėti akademinių šaltinių, o tai yra būtina atliekant išsamias literatūros apžvalgas. Tai gali stengtis atskirti aukštos kokybės ir mažiau patikimus šaltinius, dėl kurių sugeneruotų apžvalgų netikslumai [2].- Modelio nesugebėjimas pateikti tikslių nurodytų straipsnių sąrašų yra dar vienas apribojimas rašant mokslinius dokumentus [6].
4. Cheminė sintezė ir eksperimentinės procedūros
-GPT-4.5, panašiai kaip GPT-4, gali nepateikti tikslių ar išsamios eksperimentinės cheminės sintezės procedūros dėl saugumo problemų ir apribojimų suprantant sudėtingas chemines reakcijas [1]. Jis gali pasiūlyti chemiškai neteisingus sintezės maršrutus arba neteisingai suprantamas reakcijos mechanizmus.- Modelio nesugebėjimas tiksliai įvertinti molekulinių struktūrų iš junginių pavadinimų gali sukelti neteisingą cheminformatikos užduočių pagrindimą [1].
5. Integracija į specializuotus įrankius
- Atliekant užduotis, susijusias su cheminėmis reakcijomis, GPT-4.5 gali būti naudinga integracijai su specializuota chemine programine įranga ar programavimo kalbomis, kad padidintų jo našumą [1]. Ši integracija galėtų padėti įveikti kai kuriuos savo apribojimus tvarkant sudėtingus cheminius duomenis ir reakcijas.6. Etikos ir saugos sumetimai
- GPT-4.5, kaip pažymėta sistemos kortelėje, kelia vidutinę cheminės ir biologinės grėsmės kūrimo riziką dėl jos sugebėjimo padėti planuoti žinomas grėsmes [3]. Tačiau šią riziką sušvelnina prielaida, kad vartotojai jau turi didelę srities patirtį.Apibendrinant galima pasakyti, kad nors GPT-4.5 siūlo perspektyvias cheminių tyrimų galimybes, tokias kaip pagrindinės žinios ir duomenų analizė, ji susiduria su dideliais specializuotų užduočių, duomenų vizualizacijos, literatūros peržiūros ir saugumo sumetimais. Jo efektyvumas padidėja, kai jis naudojamas kartu su specializuotomis priemonėmis ir srities patirtimi.
Citatos:
[1] https://chemrxiv.org/engage/api-gateway/chemrxiv/assets/orp/resource/item/647d305dbe16ad5c577b6627/original/prompt-engineering-of-gpt-4-for-for-chemic-research-whan-cannot-be-done.pdf
[2] https://www.enago.com/academy/chatgpt-cannot-do-for-researchers-2/
[3] https://cdn.openai.com/gpt-4-5-system-card.pdf
[4] https://community.openai.com/t/whath-are-the-limitations-of-gpt-o-in-analyzing-pdf-text/534760
[5] https://www.tandfonline.com/doi/full/10.1080/27660400.2023.2260300
[6] https://pmc.ncbi.nlm.nih.gov/articles/pmc11184879/
[7] https://www.reddit.com/r/chatgpt/comments/1iznoek/gpt45_system_card_mmlu_896/
[8] https://arxiv.org/html/2305.18365v3