GPT-4.5 intègre de nouvelles techniques d'alignement évolutives conçues pour améliorer la collaboration humaine en améliorant la compréhension du modèle des besoins et de l'intention humains. Ces techniques permettent la formation de modèles plus grands et plus puissants à l'aide de données dérivées de modèles plus petits, ce qui est crucial car les modèles d'IA deviennent de plus en plus complexes et résolvent des problèmes plus larges [1] [3] [7].
Améliorations clés
1. Steerabilité: les nouvelles techniques d'alignement améliorent la direction de GPT-4.5, permettant aux utilisateurs de guider le modèle plus efficacement vers les résultats souhaités. Ceci est particulièrement important pour les tâches nécessitant un contrôle précis des réponses du modèle [1] [3].
2. Compréhension de la nuance: GPT-4.5 démontre une meilleure compréhension de la nuance, ce qui lui permet de gérer plus efficacement les aspects complexes et subtils de la communication humaine. Cette amélioration est vitale pour les tâches qui nécessitent de l'empathie et de l'intelligence émotionnelle [1] [3].
3. Conversation naturelle: la capacité du modèle à engager une conversation naturelle a été considérablement améliorée. Il peut désormais répondre de manière plus intuitive et empathique, ce qui rend les interactions plus humaines. Ceci est bénéfique pour les applications telles que le service client, les conseils et les projets créatifs collaboratifs [1] [3] [7].
Processus de formation
GPT-4.5 a été développé en utilisant une combinaison de méthodes traditionnelles telles que le réglage fin supervisé (SFT) et l'apprentissage du renforcement de la rétroaction humaine (RLHF), similaire à ceux utilisés pour GPT-4O. Le modèle a été formé et post-formé sur divers ensembles de données, y compris des données accessibles au public, des données propriétaires provenant de partenariats et des ensembles de données personnalisés développés en interne. Ces données de formation diverses contribuent à ses capacités de conversation solides et à ses connaissances mondiales larges [1] [3].
Intelligence émotionnelle
Le modèle présente une intelligence émotionnelle améliorée, lui permettant de détecter et de répondre de manière appropriée aux indices sociaux. Cela rend les interactions plus naturelles et empathiques, ce qui est particulièrement bénéfique pour les applications nécessitant une communication nuancée [7].
Dans l'ensemble, les nouvelles techniques d'alignement dans GPT-4.5 visent à créer un outil d'IA plus collaboratif et intuitif qui peut mieux s'aligner sur l'intention et les besoins humains, ce qui le rend adapté à un large éventail d'applications.
Citations:
[1] https://cdn.openai.com/gpt-4-5-system-card.pdf
[2] https://arxiv.org/html/2502.13775v1
[3] https://www.lesswrong.com/posts/fqajgqcpmgehkoee6/openai-releases-chatgpt-4-5
[4] https://community.openai.com/t/how-to-improve-gpt-4-api-output-length-and-structure/1025132
[5] https://www.lesswrong.com/posts/fqajgqcpmgehkoee6/openai-releases-gpt-4-5
[6] https://proceedings.neurips.cc/paper_files/paper/2024/file/a51a74b2d71387dc71cc29181b5519bb-paper-conference.pdf
[7] https://topstads.com/openai-release-gpt-4-5/
[8] https://arxiv.org/html/2408.06837v1