Narzedzia AI · 5 min czytania · 22 listopada 2026

Perplexity: OpenAI pokazuje liczby i chce wspólnych limitów dla AI

Przejdź do treści i przykładów
Perplexity: OpenAI pokazuje liczby i chce wspólnych limitów dla AI

22 listopada 2026 Jakub Pachocki, Chief Scientist w OpenAI, opublikował na blogu firmy tekst, w którym proponuje, żeby twórcy modeli porównywali się jedną miarą: perplexity. OpenAI pokazuje własne pomiary z kolejnych modeli i postuluje wspólne limity rozwoju. Firmy nie przekraczałyby ich, dopóki nie nauczą się lepiej rozumieć i nadzorować AI. To deklaracja i propozycja jednej firmy, nie ustalony standard branży.

Czym jest perplexity i czy to nazwa narzędzia?

Nie, to nazwa miary. Bez technobełkotu: model językowy uczy się przewidywać następny fragment tekstu (tzw. token). Perplexity mierzy, jak dobrze mu to wychodzi średnio, a niższa wartość oznacza lepsze przewidywania. W praktyce OpenAI śledzi logarytm tej wartości, czyli cross-entropy loss.

Pachocki opisuje budowę nowoczesnej AI inaczej, niż zwykle budowało się oprogramowanie. Firmy nie projektują każdej umiejętności osobno. Najpierw trenują ogromny model (on nazywa go kompresorem albo predyktorem) na gigantycznym zbiorze danych. Potem promptowaniem, dotrenowaniem i uczeniem ze wzmocnieniem wydobywają z niego zdolności, które już w nim siedzą. Przypis dodaje, że ten kompresor to nie plik typu GZIP i nie musi "pamiętać" treści zbioru, na którym się uczył.

Im niższa wartość, tym lepsze przewidywanie następnego tokena
Im niższa wartość, tym lepsze przewidywanie następnego tokena

Przy jakich wartościach pojawiały się nowe umiejętności modeli?

OpenAI liczy log-perplexity od GPT-3.5 na zbiorze testowym pochodzącym z własnej bazy kodu (stały snapshot). Oto, co Pachocki przypisuje poszczególnym progom:

  • GPT-3.5, ok. 0,99: płynna rozmowa i baza pierwszego ChatGPT.
  • GPT-4, ok. 0,91: skuteczne rozumowanie krok po kroku (chain-of-thought). Dało to impuls do stworzenia modeli rozumujących.
  • Poniżej 0,8: zdolności o dużym znaczeniu w cyberbezpieczeństwie i matematyce.
  • Ok. 0,76: po przejściu na model z tą wartością zaczął dawać znaczące wyniki na otwartych problemach matematycznych, które OpenAI zadawał modelom od ponad roku.

Pachocki pisze, że widok kolejnych rozwiązań pojawiających się w jednym wątku na Slacku był dla matematyków w zespole mocno surrealistyczny. Podkreśla też, że z góry nie było wiadomo, iż te umiejętności wyskoczą akurat przy tych progach. To obserwacja po fakcie, nie prawo fizyki.

Dlaczego jedna miara, a nie zestaw testów? Bo testy się starzeją. Według Pachockiego dawne benchmarki były w większości wysycone około GPT-4, a oceny GPT-2 i GPT-3 na nowoczesnych testach nie miałyby sensu. Sprawdzanie dzisiejszych modeli egzaminem sprzed lat to tabliczka mnożenia dla kogoś, kto liczy całki. Jego zdaniem miara oparta na pretrainingu dłużej zachowa wartość informacyjną.

Darmowy webinar na żywo z Janem Gajosem · w najbliższą środę o 19:00

Czytasz o AI, a w pracy dalej robisz wszystko ręcznie? Znam to.

Sam tak robiłem. Na webinarze pokazuję na swoim ekranie, jak oddać AI powtarzalne zadania: maile, proste automatyzacje, asystenta do pracy. Bez programowania i bez teorii. 90 minut, a na końcu pytasz, o co chcesz.

Link do pokoju przyjdzie mailem. Zapisując się, zgadzasz się na wiadomości e-mail zgodnie z polityką prywatności. Wolisz zacząć od lektury? Zobacz e-booki Jana Gajosa

Po co wspólne limity i co dokładnie proponuje OpenAI?

Pachocki spodziewa się kolejnych dużych skoków zdolności po wejściu w okno ok. 0,68-0,7 log-perplexity. Przyznaje, że nie wie, jakie to będą zdolności, i że dziś możemy ich nie testować. Zapowiada też dalszy spadek skuteczności obecnych form audytu zgodności modeli z intencjami twórców. Spodziewa się również wzrostu "świadomości" modeli, że są oceniane i trenowane.

Dlatego proponuje:

  • wspólne normy oceny i red-teamingu modeli, zanim zaczną być używane, razem ze standardami przejrzystości,
  • wspólne limity oparte na perplexity i innych pomiarach, których firmy zobowiązałyby się nie przekraczać, dopóki nie osiągniemy konkretnego kamienia milowego w rozumieniu i monitorowaniu AI (np. następcy monitorów chain-of-thought),
  • branżowy standard z pierwszym limitem i opisem tego, co trzeba osiągnąć, żeby iść dalej.

OpenAI nie podała, kiedy ani przy jakiej wartości miałby wejść pierwszy wspólny limit.

Wspólny limit: pierwsza linia, której nie przekracza nikt z branży
Wspólny limit: pierwsza linia, której nie przekracza nikt z branży

Dlaczego akurat pretraining i dlaczego 2027?

Pachocki zauważa, że najczęściej dyskutuje się o AI zastępującej badaczy na każdym etapie, aż do pełnego samodoskonalenia bez nadzoru człowieka. Taki stan uważa za coś, czego trzeba unikać. Jego zdaniem pomija się jednak węższy scenariusz: AI uczestniczącą w badaniach nad algorytmami pretrainingu. Skoro matematyka dostała lawinę wyników po zmianie modelu, podobna lawina fundamentalnych usprawnień mogłaby, jego zdaniem, ruszyć już w 2027. Przyspieszenie widoczne na wykresie w 2026 OpenAI przypisuje głównie długoletnim badaniom i inwestycjom w moce obliczeniowe, a w mniejszym stopniu automatyzacji. Skala tych inwestycji to temat tekstu o kosztach centrum danych pod AI.

Cztery słabości perplexity, które przyznaje sam autor

Pachocki nie sprzedaje tej miary jako cudownej. To jego własna lista problemów:

  • Trudno porównywać laboratoria. Każdy używa innych zbiorów testowych i innych mieszanek danych treningowych. OpenAI podaje liczby ze swojego głównego zbioru.
  • Miara nie opisuje konkretnego zadania. Liczy się dlatego, że postęp na niej prowadzi do nowych zdolności.
  • Nie widzi postępów poza pretrainingiem. Chain-of-thought nie obniża perplexity, choć drastycznie podnosi możliwości modelu.
  • Nieznana podłoga. Zero jest nieosiągalne, ale nikt nie zna naturalnej entropii danych. Zbliżając się do niej, postęp na liczbach będzie wyglądał wolniej, choć mniejsze zyski mają oznaczać większe skoki inteligencji.

Do tego dochodzi ostrzeżenie dla czytelnika. To pomiary OpenAI, wykonane przez OpenAI na jej własnym zbiorze kodu, a w tym tekście nie przytaczamy ich zewnętrznej weryfikacji. Liczby nie powiedzą też nic o tym, jak model radzi sobie po polsku. Do tego służą osobne testy, jak porównanie opisane w tekście o Bieliku 11B v3.1 w EuroEval. Przykład sprawdzania modelu na konkretnym zadaniu zamiast jedną miarą znajdziesz w tekście o GPT-6 Astra w testach Hebbii. Inną drogę, jeden zbiorczy indeks, pokazuje materiał o Gemini 4 Neon.

Werdykt: to najciekawsza w tym roku próba zamiany "AI jest coraz mocniejsza" na liczbę, którą da się śledzić. Jej wartość zależy od tego, czy inne firmy pokażą własne pomiary. Na dziś jedno zadanie na 5 minut: otwórz post Pachockiego, znajdź wykres na górze strony i odczytaj, przy której wartości log-perplexity podpisano płynną rozmowę, rozumowanie przed odpowiedzią, pracę z kodem i eksperta od cyberbezpieczeństwa. Zobaczysz sam, jak mało brakuje do kolejnego progu.

Na podstawie: OpenAI: Perplexity and Intelligence (Jakub Pachocki, 22.11.2026)

Powiązane tematy

Informacje o artykule

Darmowy webinar na żywo z Janem Gajosem · w najbliższą środę o 19:00

Czytasz o AI, a w pracy dalej robisz wszystko ręcznie? Znam to.

Sam tak robiłem. Na webinarze pokazuję na swoim ekranie, jak oddać AI powtarzalne zadania: maile, proste automatyzacje, asystenta do pracy. Bez programowania i bez teorii. 90 minut, a na końcu pytasz, o co chcesz.

Link do pokoju przyjdzie mailem. Zapisując się, zgadzasz się na wiadomości e-mail zgodnie z polityką prywatności. Wolisz zacząć od lektury? Zobacz e-booki Jana Gajosa

Udostępnij:
Nie przegap nowych artykułów - dodaj SukcesAI do swoich źródeł w wyszukiwarce Google.
Dodaj do preferowanych źródeł
Jan Gajos

Ekspert AI & Founder, AI Evolution

Pasjonat sztucznej inteligencji, który od 18 lat działa z sukcesem biznesowo i szkoleniowo. Wprowadzam AI do swoich firm oraz codziennego życia. Fascynują mnie nowe technologie, gry wideo i składanie klocków Lego - tam też widzę logikę i kreatywność, które AI potrafi wzmacniać. Wierzę, że dobrze użyta sztuczna inteligencja to nie ogłupiające ułatwienie, lecz prawdziwy przełom w sposobie, w jaki myślimy, tworzymy i pracujemy.

Newsletter SukcesAI

Raz w tygodniu najważniejsze nowości z AI i nowe poradniki z tego bloga.

Link do wypisania się jest w każdym mailu. Polityka prywatności