GPT-4.5, selefi GPT-4 gibi, kimyasal araştırmalarda çeşitli sınırlamalarla karşı karşıya. Bu sınırlamalar, bu alanda büyük dil modellerini kullanmanın potansiyelini ve zorluklarını anlamak için çok önemlidir.
1. Temel Bilgi ve Özel Görevler
-Bilgi tabanı: GPT-4.5, GPT-4'e benzer şekilde, fiziksel ve organik kimya prensipleri de dahil olmak üzere ders kitabı düzeyinde kimyada güçlü bir temele sahiptir. Ancak, telif hakkı kısıtlamaları ve eğitim veri sınırlamaları nedeniyle en son araştırma makalelerine erişimi olmayabilir [1].- Özel görevler: Reaksiyon tahmini ve retrosentez gibi görevlerde, GPT modelleri genellikle belirli kimyasal veri kümeleri üzerinde eğitilmiş özel makine öğrenme modellerinden daha kötü performans gösterir [8]. Bu, GPT-4.5'in genel bilgiler sağlayabilmesine rağmen, karmaşık, özel kimyasal görevlerde etkili olmayabileceğini göstermektedir.
2. Veri Analizi ve Görselleştirme
- GPT-4.5, diğer büyük dil modelleri gibi, karmaşık veri analizi sunma mücadeleleri, görselleştirmeler, tablolar ve grafiklerin kullanımı da dahil olmak üzere net ve özlü bir şekilde sonuçlanır [2]. Bu sınırlama, karmaşık bulguları etkili bir şekilde iletmesi gereken araştırmacılar için daha az etkili hale getirir.- Veri analizinde kritik beceriler olan istatistiksel metodolojileri derinden anlama, önyargıları tanımlama ve eksik verileri işleme yeteneğinden yoksundur [2].
3. Literatür taraması ve kaynak değerlendirmesi
- GPT-4.5, akademik kaynakları kapsamlı bir şekilde inceleyemez, bu da kapsamlı literatür incelemeleri yapmak için gereklidir. Oluşturulan incelemelerde potansiyel olarak yanlışlıklara yol açan yüksek kaliteli ve daha az güvenilir kaynaklar arasında ayrım yapmak için mücadele edebilir [2].- Modelin referanslı makalelerin doğru listelerini sağlayamaması, bilimsel makaleler yazarken başka bir sınırlamadır [6].
4. Kimyasal sentez ve deneysel prosedürler
-GPT-4.5, GPT-4'e benzer şekilde, karmaşık kimyasal reaksiyonların anlaşılmasındaki güvenlik endişeleri ve sınırlamaları nedeniyle kimyasal sentez için doğru veya ayrıntılı deneysel prosedürler sağlayamayabilir [1]. Kimyasal olarak yanlış sentez yolları veya yanlış anlama reaksiyon mekanizmalarını önerebilir.- Modelin bileşik adlardan moleküler yapıları doğru bir şekilde tahmin edememesi, keminformatik görevlerinde yanlış akıl yürütmeye yol açabilir [1].
5. Özel araçlarla entegrasyon
- Kimyasal reaksiyonları içeren görevler için GPT-4.5, performansını artırmak için özel kimyasal yazılım veya programlama dilleriyle entegrasyondan yararlanabilir [1]. Bu entegrasyon, karmaşık kimyasal verilerin ve reaksiyonların ele alınmasındaki bazı sınırlamalarının üstesinden gelmeye yardımcı olabilir.6. Etik ve güvenlik hususları
- GPT-4.5, sistem kartında belirtildiği gibi, bilinen tehditler için operasyonel planlamaya yardımcı olma yeteneği nedeniyle kimyasal ve biyolojik tehdit oluşturmada orta bir risk oluşturmaktadır [3]. Bununla birlikte, bu risk kullanıcıların zaten önemli alan uzmanlığına sahip oldukları varsayımı ile hafifletilmektedir.Özetle, GPT-4.5, temel bilgi ve veri analizi gibi kimyasal araştırmalarda umut verici yetenekler sunarken, özel görevler, veri görselleştirme, literatür taraması ve güvenlik hususlarında önemli sınırlamalarla karşı karşıyadır. Özel araçlar ve alan uzmanlığı ile birlikte kullanıldığında etkinliği arttırılır.
Alıntılar:
[1] https://chemrxiv.org/engage/api-gateway/chemrxiv/assets/orp/resource/item/647d305dbe16ad5c577b6627/original/prompt-nownering-of-cnot-be-don.pemchical-pemical--hemical
[2] https://www.enago.com/academy/chatgpt-cannot-do-for-researchers-2/
[3] https://cdn.openai.com/gpt-4-5-system-card.pdf
[4] https://community.openai.com/t/what-are-the-gpt-4-in-analzing-pdf-text/534760
[5] https://www.tandfonline.com/doi/full/10.1080/27660400.2023.2260300
[6] https://pmc.ncbi.nlm.nih.gov/articles/pmc11184879/
[7] https://www.reddit.com/r/chatgpt/comments/1iznoek/gpt45_system_card_mmlu_896/
[8] https://arxiv.org/html/2305.18365v3