O GPT-4.5 incorpora novas técnicas de alinhamento escalável, projetadas para melhorar a colaboração humana, melhorando o entendimento do modelo sobre as necessidades e intenções humanas. Essas técnicas permitem o treinamento de modelos maiores e mais poderosos usando dados derivados de modelos menores, o que é crucial à medida que os modelos de IA se tornam cada vez mais complexos e resolvem problemas mais amplos [1] [3] [7].
Melhorias -chave
1. Steerabilidade: As novas técnicas de alinhamento aprimoram a Steerability da GPT-4.5, permitindo que os usuários oriem o modelo de maneira mais eficaz em relação aos resultados desejados. Isso é particularmente importante para tarefas que exigem controle preciso sobre as respostas do modelo [1] [3].
2. Compreensão das nuances: o GPT-4.5 demonstra uma melhor compreensão das nuances, permitindo que ele lide com aspectos complexos e sutis da comunicação humana de maneira mais eficaz. Essa melhoria é vital para tarefas que requerem empatia e inteligência emocional [1] [3].
3. Conversação natural: a capacidade do modelo de se envolver em conversas naturais foi significativamente melhorada. Agora pode responder de maneira mais intuitiva e empatia, fazendo com que as interações pareçam mais humanas. Isso é benéfico para aplicativos como atendimento ao cliente, aconselhamento e projetos criativos colaborativos [1] [3] [7].
Processo de treinamento ###
O GPT-4.5 foi desenvolvido usando uma combinação de métodos tradicionais como ajuste fino supervisionado (SFT) e aprendizado de reforço com o feedback humano (RLHF), semelhante aos usados para o GPT-4O. O modelo foi pré-treinado e pós-treinado em diversos conjuntos de dados, incluindo dados publicamente disponíveis, dados proprietários de parcerias e conjuntos de dados personalizados desenvolvidos internamente. Esses diversos dados de treinamento contribuem para suas capacidades de conversação robustas e amplo conhecimento mundial [1] [3].
Inteligência emocional
O modelo exibe uma inteligência emocional aprimorada, permitindo que ele detecte e responda adequadamente a pistas sociais. Isso torna as interações mais naturais e empáticas, o que é particularmente benéfico para aplicações que requerem comunicação diferenciada [7].
No geral, as novas técnicas de alinhamento no GPT-4.5 visam criar uma ferramenta de IA mais colaborativa e intuitiva que possa se alinhar melhor às intenções e necessidades humanas, tornando-a adequada para uma ampla gama de aplicações.
Citações:
[1] https://cdn.openai.com/gpt-4-5-system-card.pdf
[2] https://arxiv.org/html/2502.1375v1
[3] https://www.lesswrong.com/postss/fqajgqcpmgehkoee6/openai-releases-chatgpt-4-5
[4] https://community.openai.com/t/how-to-improve-gpt-4-api-output-length-and-structure/1025132
[5] https://www.lesswrong.com/posts/fqajgqcpmgehkoee6/openai-releases-gpt-4-5
[6] https://proecedings.neurips.cc/paper_files/paper/2024/file/a51a74b2d71387dc71cc29181b5519bb--per-conference.pdf
[7] https://topmostads.com/openai-release-gpt-4-5/
[8] https://arxiv.org/html/2408.06837v1