GPT-4.5, stejně jako jeho předchůdce GPT-4, čelí několika omezením chemického výzkumu. Tato omezení jsou zásadní pro pochopení potenciálu a výzev používání velkých jazykových modelů v této oblasti.
1. Základní znalosti a specializované úkoly
-Znalostní základna: GPT-4.5, podobně jako GPT-4, má silný základ v chemii na úrovni učebnice, včetně principů fyzikální a organické chemie. Nemusí však mít přístup k nejnovějším výzkumným článkům kvůli omezením autorských práv a omezením údajů o školení [1].- Specializované úkoly: V úkolech, jako je predikce reakce a retrosyntéza, modely GPT obecně fungují horší než specializované modely strojového učení vyškolené na konkrétních chemických datových sadách [8]. To ukazuje, že zatímco GPT-4.5 může poskytnout obecné poznatky, nemusí to být tak efektivní ve složitých, specializovaných chemických úkolech.
2. analýza a vizualizace dat
- GPT-4.5, stejně jako jiné velké jazykové modely, bojuje s prezentací komplexní analýzy dat jasným a stručným způsobem, včetně použití vizualizací, tabulek a grafů [2]. Díky tomuto omezení je méně efektivní pro vědce, kteří potřebují efektivně sdělit komplexní zjištění.- postrádá schopnost hluboce porozumět statistickým metodikám, identifikovat zkreslení a zpracovávat chybějící data, což jsou kritickými dovednostmi při analýze dat [2].
3. přehled literatury a hodnocení zdroje
- GPT-4.5 nemůže komplexně zkoumat akademické zdroje, což je nezbytné pro provádění důkladných přezkumů literatury. Může se snažit rozlišovat mezi vysoce kvalitními a méně spolehlivými zdroji, což potenciálně vede k nepřesnosti při generovaných recenzích [2].- Neschopnost modelu poskytovat přesné seznamy referenčních článků je dalším omezením při psaní vědeckých prací [6].
4. chemické syntézy a experimentální postupy
-GPT-4.5, podobně jako GPT-4, nemusí poskytovat přesné nebo podrobné experimentální postupy pro chemickou syntézu v důsledku bezpečnostních obav a omezení porozumění složitým chemickým reakcím [1]. Může navrhnout chemicky nesprávné trasy syntézy nebo nepochopení reakčních mechanismů.- Neschopnost modelu přesně odhadnout molekulární struktury ze složených názvů může vést k nesprávnému uvažování v úkolech cheminformatiky [1].
5. Integrace se specializovanými nástroji
- U úkolů zahrnujících chemické reakce může GPT-4.5 těžit z integrace se specializovaným chemickým softwarem nebo programovacím jazykům, aby se zvýšila jeho výkon [1]. Tato integrace by mohla pomoci překonat některá její omezení při řešení složitých chemických dat a reakcí.6. Etické a bezpečnostní úvahy
- GPT-4.5, jak je uvedeno v systémové kartě, představuje střední riziko při tvorbě chemických a biologických hrozeb díky jeho schopnosti pomáhat při provozním plánování známých hrozeb [3]. Toto riziko je však zmírněno předpokladem, že uživatelé již mají značné odborné znalosti domény.Stručně řečeno, zatímco GPT-4.5 nabízí slibné schopnosti v chemickém výzkumu, jako je základní znalost a analýza dat, čelí významným omezením ve specializovaných úkolech, vizualizaci dat, přezkumu literatury a bezpečnostních úvahách. Jeho účinnost je zvýšena, pokud se používá ve spojení se specializovanými nástroji a odbornými znalostmi domény.
Citace:
[1] https://chemrxiv.org/engage/api-gateway/chemrxiv/assets/orp/resource/item/647d305dbe16ad5c577b6627/origiginal/promp-engineering-of-gpt-4-f-Chemical
[2] https://www.enago.com/academy/chatgpt-cannot-do-for-researchers-2/
[3] https://cdn.openai.com/gpt-4-5-system-card.pdf
[4] https://community.openai.com/t/what-are-the-limitations-of-gpt-4-in-analyzing-pdf-text/534760
[5] https://www.tandfonline.com/doi/full/10.1080/27660400.2023.2260300
[6] https://pmc.ncbi.nlm.nih.gov/articles/pmc11184879/
[7] https://www.reddit.com/r/chatgpt/comments/1iznoek/gpt45_system_card_mmlu_896/
[8] https://arxiv.org/html/2305.18365v3