GPT-4,5 obsahuje nové, škálovateľné techniky zarovnania určené na zlepšenie spolupráce v ľudskej ľudskej spolupráci zlepšením porozumenia ľudských potrieb a zámeru modelu. Tieto techniky umožňujú školenie väčších a výkonnejších modelov pomocou údajov odvodených z menších modelov, čo je rozhodujúce, pretože modely AI sa stávajú čoraz zložitejšími a riešia širšie problémy [1] [3] [7].
Kľúčové vylepšenia
1. Riadenie: Nové techniky zarovnania vylepšujú riadenie GPT-4.5, čo používateľom umožňuje efektívnejšie viesť model k požadovaným výsledkom. To je obzvlášť dôležité pre úlohy, ktoré si vyžadujú presnú kontrolu nad reakciami modelu [1] [3].
2. Pochopenie nuansy: GPT-4,5 demonštruje lepšie pochopenie nuansy, čo mu umožňuje efektívnejšie zvládnuť zložité a jemné aspekty ľudskej komunikácie. Toto zlepšenie je nevyhnutné pre úlohy, ktoré si vyžadujú empatiu a emocionálnu inteligenciu [1] [3].
3. Prirodzená konverzácia: Schopnosť modelu zapojiť sa do prirodzenej konverzácie sa výrazne zlepšila. Teraz môže reagovať intuitívne a empatickejšie, takže interakcie sa cítia viac podobné človeku. Je to prospešné pre aplikácie, ako sú zákaznícky servis, poradenstvo a spoločné kreatívne projekty [1] [3] [7].
Výcvikový proces
GPT-4,5 bol vyvinutý pomocou kombinácie tradičných metód, ako je jemné doladenie pod dohľadom (SFT) a výučba posilnenia z ľudskej spätnej väzby (RLHF), podobné tým, ktoré sa používajú pre GPT-4O. Model bol vopred trénovaný a po vyškolených na rôznych súboroch údajov vrátane verejne dostupných údajov, patentovaných údajov z partnerstiev a vlastných súborov údajov vyvinutých interne. Tieto rozmanité údaje o školení prispievajú k jej robustným konverzačným schopnostiam a širokým svetovému znalostiam [1] [3].
Emocionálna inteligencia
Model vykazuje vylepšenú emocionálnu inteligenciu, čo mu umožňuje odhaľovať a primerane reagovať na sociálne narážky. Vďaka tomu je interakcie prirodzenejšie a empatickejšie, čo je obzvlášť prospešné pre aplikácie vyžadujúce nuansuančnú komunikáciu [7].
Celkovo sa nové techniky zarovnania v GPT-4,5 zameriavajú na vytvorenie kolaboratívnejšieho a intuitívnejšieho nástroja na AI, ktorý sa môže lepšie vyrovnať s ľudským zámerom a potrebami, čím je vhodný pre širokú škálu aplikácií.
Citácie:
[1] https://cdn.openai.com/gpt-4-5-system-card.pdf
[2] https://arxiv.org/html/2502.13775V1
[3] https://www.lesswrong.com/posts/fqajgqcpmgehkoee6/openai-releases-chatgpt-4-5
[4] https://community.openai.com/t/how-to-improve-gpt-4-api-output--dength-and-structure/1025132
[5] https://www.lesswrong.com/posts/fqajgqcpmgehkoee6/openai-releases-gpt-4-4-5
[6] https://proceings.neurips.cc/paper_files/paper/2024/file/a51a74b2d71387dc71cc29181b5519bb-paper-conference.pdf
[7] https://topostads.com/openai-rease-gpt-4-5/
[8] https://arxiv.org/html/2408.06837v1
