DeepSeek-R1-Zero, jednocześnie wykazując znaczące postępy w zakresie rozumowania poprzez uczenie się wzmocnienia, ma kilka znaczących ograniczeń:
** Problemy z miksowaniem języków i spójności: Jednym z głównych wyzwań jest tendencja modelu do tworzenia wyników, które mieszają języki, zwłaszcza angielskie i chińskie. Powoduje to odpowiedzi, które mogą być niespójne lub trudne do zrozumienia, szczególnie gdy zapytanie wejściowe znajduje się w jednym języku [1] [4].
** Słaba czytelność: czytelność wyników modelu jest często zagrożona. Użytkownicy zgłosili problemy z formatowaniem i jasnością, co utrudnia przestrzeganie procesu rozumowania lub ostatecznych odpowiedzi dostarczanych przez model [3] [5].
** Brak nadzorowanego dostrajania: DeepSeek-R1-Zero został opracowany bez żadnego wstępnego nadzorowanego dostrajania, co ogranicza jego zdolność do generowania w pełni dopracowanych i wyrównanych przez człowieka wyników. Ten brak udoskonalenia może prowadzić do mniej wiarygodnych odpowiedzi w porównaniu z modelami zawierającymi nadzorowane techniki uczenia się [1] [3].
** Niekończące się powtarzanie: model czasami wykazuje powtarzające się zachowanie w swoich odpowiedzi, które może umniejszać ogólną wrażenia użytkownika i skuteczność komunikacji [5] [7].
** Zmienność wydajności zadań kodowania: chociaż Deepseek-R1-Zero wykazuje dobrą wydajność w zadaniach rozumowania, słabo działa na wyzwania kodowania, wskazując, że jego możliwości mogą nie być tak solidne we wszystkich typach zadań [1] [2].
Ograniczenia te spowodowały dalsze wysiłki rozwojowe, co doprowadziło do stworzenia Deepseek-R1, które ma na celu rozwiązanie tych niedociągnięć poprzez włączenie nadzorowanych technik i poprawę ogólnej wydajności.
Cytaty:[1] https://www.pompthub.us/blog/deepseek-r-1-model-overview-and-how-it-ranks-against-openais-o1
[2] https://arxiv.org/html/2501.12948v1
[3] https://www.gocodeo.com/post/deepseek-r1-and-deepseek-r1-zero
[4] https://myedgetech.com/deepseek-r1-tr/
[5] https://huggingface.co/deepseek-ai/deepseek-r1-zero
[6] https://adasci.org/mastering-llms-reasoning-capability-with-deepseek-r1/
[7] https://www.datacamp.com/blog/deepseek-r1
[8] https://arxiv.org/pdf/2501.12948.pdf