GPT-4.5, tako kot njegov predhodnik GPT-4, se sooča z več omejitvami v kemijskih raziskavah. Te omejitve so ključne za razumevanje potenciala in izzivov uporabe velikih jezikovnih modelov na tem področju.
1. temeljna znanja in specializirane naloge
-Baza znanja: GPT-4.5, podobno kot GPT-4, ima močan temelj v kemiji na ravni učbenikov, vključno z načeli fizične in organske kemije. Vendar pa morda nima dostopa do najnovejših raziskovalnih člankov zaradi omejitev avtorskih pravic in omejitev podatkov o usposabljanju [1].- Specializirane naloge: Pri nalogah, kot sta napovedovanje reakcije in retrosinteza, se GPT modeli na splošno ponašajo s specializiranimi modeli strojnega učenja, usposobljeni na posebnih kemičnih naborih [8]. To kaže, da čeprav lahko GPT-4.5 zagotavlja splošne vpoglede, morda ni tako učinkovit pri zapletenih, specializiranih kemičnih nalogah.
2. Analiza podatkov in vizualizacija
- GPT-4.5, tako kot drugi veliki jezikovni modeli, se bori s predstavitvijo zapletene analize podatkov na jasen in jedrnat način, vključno z uporabo vizualizacij, tabel in grafov [2]. Zaradi te omejitve je manj učinkovita za raziskovalce, ki morajo učinkovito komunicirati zapletene ugotovitve.- Manjka mu sposobnost globokega razumevanja statističnih metodologij, prepoznavanja pristranskosti in ravnanja z manjkajočimi podatki, ki so kritične spretnosti pri analizi podatkov [2].
3. Pregled literature in ocena virov
- GPT-4.5 ne more pregledovati akademskih virov celovito, kar je bistvenega pomena za izvajanje temeljitih pregledov literature. Lahko se bori za razlikovanje med kakovostnimi in manj zanesljivimi viri, kar lahko vodi v netočnosti v ustvarjenih pregledih [2].- Nezmožnost modela, da bi zagotovila natančne sezname referenčnih člankov, je še ena omejitev pri pisanju znanstvenih dokumentov [6].
4. Kemična sinteza in eksperimentalni postopki
-GPT-4.5, podobno kot GPT-4, morda ne bo zagotovil natančnih ali podrobnih eksperimentalnih postopkov za kemično sintezo zaradi varnosti in omejitev pri razumevanju zapletenih kemičnih reakcij [1]. Lahko predlaga kemično napačne sintezne poti ali nerazumevanje reakcijskih mehanizmov.- Nezmožnost modela za natančno oceno molekulskih struktur iz sestavljenih imen lahko privede do napačnega sklepanja pri nalogah keminformatike [1].
5. Integracija s specializiranimi orodji
- Za naloge, ki vključujejo kemične reakcije, lahko GPT-4.5 koristi od integracije s specializirano kemijsko programsko opremo ali programskimi jeziki za izboljšanje njegove učinkovitosti [1]. Ta integracija bi lahko pomagala premagati nekatere njegove omejitve pri ravnanju z zapletenimi kemičnimi podatki in reakcijami.6. Etični in varnostni premisleki
- GPT-4.5, kot je navedeno na sistemski kartici, predstavlja srednje tveganje pri ustvarjanju kemičnih in bioloških groženj zaradi svoje sposobnosti, da pomaga pri operativnem načrtovanju znanih groženj [3]. Vendar to tveganje ublaži predpostavka, da uporabniki že imajo veliko znanje domene.Če povzamemo, medtem ko GPT-4.5 ponuja obetavne zmogljivosti v kemijskih raziskavah, kot so temeljno znanje in analiza podatkov, se sooča z pomembnimi omejitvami pri specializiranih nalogah, vizualizaciji podatkov, pregledu literature in varnosti. Njegova učinkovitost se izboljša, če se uporablja v povezavi s specializiranimi orodji in domenskim strokovnim znanjem.
Navedbe:
[1] https://chemrxiv.org/engage/api-gateway/chemrxiv/assets/orp/resource/item/647d305dbe16ad5c577b6627/original/prompt-engineering-of-gpt-4-for-chemical-research-what-can-cannot-be-done.pdf
[2] https://www.enago.com/academy/chatgpt-cannot-do-for-researchers-2/
[3] https://cdn.openai.com/gpt-4-5-system-card.pdf
[4] https://community.openai.com/t/what-are-the-limitations-of-gpt-4-in-analyzing-pdf-text/534760
[5] https://www.tandfonline.com/doi/full/10.1080/27660400.2023.2260300
[6] https://pmc.ncbi.nlm.nih.gov/articles/pmc11184879/
[7] https://www.reddit.com/r/chatgpt/comments/1iznoek/gpt45_system_card_mmlu_896/
[8] https://arxiv.org/html/2305.18365V3