전임자 GPT-4와 마찬가지로 GPT-4.5는 화학 연구에서 몇 가지 한계에 직면 해 있습니다. 이러한 한계는이 분야에서 큰 언어 모델을 사용하는 잠재력과 과제를 이해하는 데 중요합니다.
1. 기본 지식 및 전문 작업
-지식 기반 : GPT-4와 유사한 GPT-4.5는 물리적 및 유기 화학 원리를 포함하여 교과서 수준 화학의 강력한 토대를 가지고 있습니다. 그러나 저작권 제한 및 교육 데이터 제한으로 인해 최신 연구 기사에 액세스 할 수 없을 수도 있습니다 [1].- 특수 작업 : 반응 예측 및 재고 합성과 같은 작업에서 GPT 모델은 일반적으로 특정 화학 데이터 세트에 대해 훈련 된 특수 기계 학습 모델보다 더 나빠집니다 [8]. 이는 GPT-4.5가 일반적인 통찰력을 제공 할 수 있지만 복잡한 전문 화학 작업에서는 효과적이지 않을 수 있음을 나타냅니다.
2. 데이터 분석 및 시각화
-GPT-4.5는 다른 대형 언어 모델과 마찬가지로 복잡한 데이터 분석을 제시하는 데 어려움을 겪으면 시각화, 표 및 그래프 사용을 포함하여 명확하고 간결한 방식으로 결과가 나옵니다 [2]. 이러한 한계는 복잡한 결과를 효과적으로 전달 해야하는 연구원에게는 덜 효과적입니다.- 통계적 방법론을 깊이 이해하고, 편견을 식별하고, 누락 된 데이터를 처리 할 수있는 능력이 부족하며, 이는 데이터 분석의 중요한 기술입니다 [2].
3. 문헌 검토 및 소스 평가
-GPT-4.5는 학업 출처를 포괄적으로 면밀히 조사 할 수 없으며, 이는 철저한 문헌 검토를 수행하는 데 필수적입니다. 고품질과 덜 신뢰할 수있는 출처를 구별하는 데 어려움을 겪을 수 있으며, 잠재적으로 생성 된 검토에서 부정확성을 초래할 수 있습니다 [2].- 모델의 정확한 참조 기사 목록을 제공 할 수 없다는 것은 과학 논문을 작성할 때 또 다른 한계입니다 [6].
4. 화학 합성 및 실험 절차
-GPT-4와 유사한 GPT-4.5는 복잡한 화학 반응을 이해하는 데있어 안전 문제와 한계로 인해 화학 합성에 대한 정확하거나 상세한 실험 절차를 제공하지 않을 수 있습니다 [1]. 화학적으로 잘못된 합성 경로를 제안하거나 반응 메커니즘을 오해 할 수 있습니다.- 화합물 이름에서 분자 구조를 정확하게 추정 할 수 없다는 모델이 화학 정보학 작업에서 잘못된 추론을 초래할 수있다 [1].
5. 특수 도구와 통합
- 화학 반응과 관련된 작업의 경우 GPT-4.5는 특수 화학 소프트웨어 또는 프로그래밍 언어와의 통합을 통해 성능을 향상시킬 수 있습니다 [1]. 이 통합은 복잡한 화학 데이터 및 반응을 처리하는 데있어 일부 한계를 극복하는 데 도움이 될 수 있습니다.6. 윤리 및 안전 고려 사항
-GPT-4.5는 시스템 카드에 언급 된 바와 같이, 알려진 위협에 대한 운영 계획을 지원할 수있는 능력으로 인해 화학 및 생물학적 위협 창출에 중간 위험이있다 [3]. 그러나이 위험은 사용자가 이미 상당한 도메인 전문 지식을 가지고 있다는 가정에 의해 완화됩니다.요약하면, GPT-4.5는 기본 지식 및 데이터 분석과 같은 화학 연구에서 유망한 기능을 제공하지만 전문화 된 작업, 데이터 시각화, 문헌 검토 및 안전 고려 사항에서 상당한 제한에 직면 해 있습니다. 특수 도구 및 도메인 전문 지식과 함께 사용될 때 효과가 향상됩니다.
인용 :
[1] https://chemrxiv.org/engage/api-gateway/chemrxiv/assets/orp/resource/item/647d305dbe16ad5c577b6627/original/prompt-engineering-of-gpt-4-for-chemical-can-can-can-cant-cannot-don--
[2] https://www.enago.com/academy/chatgpt-cannot-do-for-researchers-2/
[3] https://cdn.openai.com/gpt-4-5-system-card.pdf
[4] https://community.openai.com/t/what-are-limitations-of-4-in-analyzing-pdf-text/534760
[5] https://www.tandfonline.com/doi/full/10.1080/27660400.2023.2260300
[6] https://pmc.ncbi.nlm.nih.gov/articles/pmc11184879/
[7] https://www.reddit.com/r/chatgpt/comments/1iznoek/gpt45_system_card_mmlu_896/
[8] https://arxiv.org/html/2305.18365v3