Jeg mistenker at dette er riktig. Og jeg ville ikke bli overrasket om de aller fleste av de 700 millioner brukerne av ChatGPT allerede foretrekker GPT-5 og at meningen om X ikke gjenspeiler den typiske opplevelsen. (Noe som ikke betyr at problemene som er identifisert her ikke er veldig reelle)

GPT-5 Pro er en imponerende geo-gjetter. Jeg ga den et beskåret bilde med metadata fjernet, og den fant ut byen.

Problemet med GPT-5 i et nøtteskall er at med mindre du betaler for modellbytte og vet å bruke GPT-5 Thinking eller Pro, når du spør "GPT-5", får du noen ganger den beste tilgjengelige AI-en og noen ganger får du en av de verste AI-ene som er tilgjengelige, og den kan til og med bytte i en enkelt samtale.

Den nåværende tilstanden til AI for vedvarende arbeid: eksponentiell fremgang fortsetter uten uventede sprang, men heller ingen vegger. (Ja, dette METR-målet er bare en av mange benchmarks, og som alle benchmarks har de feil, men har også fordelen av å verken ha tak- eller gulveffekt)

Som spådd florerer det av eksempler på GPT-5 nano eller mini som produserer dårlige resultater på nettet. Å ikke gjøre det klart hvordan GPT-5 fungerer vil sannsynligvis forårsake problemer for OpenAI. Jeg lurer på om de må ta en annen tilnærming til å bytte eller i det minste utdanne brukere om hva GPT-5 gjør.

Så vi har noe sånt som fem versjoner av GPT-5, og nå må folk vite at GPT-5 Pro er bedre enn GPT-5 Thinking som er bedre enn GPT-5 med mindre GPT-5 bestemmer seg for å overlevere spørsmålet ditt til GPT-5 Thinking eller GPT-5 Pro som du ikke kan kontrollere eller vite om det skjer.

På det store bildet: GPT-5 som modell er stort sett på samme kurve som de andre topplaboratoriene. Jeg forventer at det vanlige spranget mellom Gemini, Claude, OpenAI og Grok vil fortsette. Der det er noen store gevinster er at GPT-5 virker godt trent for oppgaver i den virkelige verden på nye måter.

Du kommer sannsynligvis til å se mange veldig varierte resultater lagt ut på nettet fra GPT-5 fordi det faktisk er flere modeller, hvorav noen er veldig gode og noen er meh. Siden det underliggende modellvalget ikke er gjennomsiktig, kan du forvente forvirring.

Folk spør ofte om hvordan jeg jobber med AI-laboratorier, og jeg synes det er et godt spørsmål: Jeg tar ingen penger fra noen AI-lab. Jeg har ingen avtaler utenom taushetserklæringer. De ser ikke hva jeg skriver på forhånd. (Dette er ikke begrenset til laboratoriene, jeg aksepterer aldri sponsing eller annonser for noe skriving)

Verdt å lese hva GPT-5 skrev i introen til mitt nye innlegg da han ble bedt om å gjøre noe dramatisk. Det andre bildet forklarer triksene den brukte.