Over
Elk antwoord dat elk model op dezelfde vragen gaf, bewaard nadat de modellen verdwenen zijn.
Waarom het bestaat
Modellen gaan voortdurend uit dienst. Een lab brengt een nieuwe versie uit en zet de oude uit. Tenzij de gewichten zijn gepubliceerd, kan niemand het oude model nog iets vragen, en hoe het antwoordde valt niet na te bootsen.
Wat overblijft is een score. Een ranglijst onthoudt hoe een model het deed op een test. Niet hoe het een pelikaan tekende, wat het op een landingspagina zette of van welke film het zei te houden.
Het museum bewaart dat. Sinds mei 2024 krijgt elk model dezelfde vragen, op dezelfde manier, één keer, en elk antwoord wordt bewaard zoals het werd gegeven, ook de vreemde en de lege. 93 van de 377 modellen hier worden niet meer aangeboden op OpenRouter. Hun antwoorden zijn er nog.
De collectie
Dezelfde vragen, aan elk model gesteld: teken een pelikaan op een fiets, bouw een landingspagina, vertel vijf grappen, kies een favoriete stad. 15.805 antwoorden van 377 modellen op 87 vragen, een verslag van hoe elk model tekende, bouwde en schreef.
Hier wordt niets gerangschikt. Er zijn geen scores en geen winnaars. Elk antwoord wordt getoond zoals het is gemaakt: tekeningen als hun SVG, websites live in een afgeschermde omgeving, afbeeldingen als afbeeldingen, tekst als een pagina die je kunt lezen, stemmen die je kunt afspelen.
Rondkijken
Draai de bol met je muis of vinger. Onder de aanwijzer wordt hij vergroot, zodat zelfs de kleinste antwoorden leesbaar zijn, en met een klik open je er een. Door de antwoorden op een vraag ga je in de volgorde waarin de modellen uitkwamen. De Index toont elk antwoord en sorteert op releasedatum, lab of vraag. Zij aan zij zet de antwoorden van twee tot vier modellen op dezelfde vragen naast elkaar: de + naast de naam van een model voegt het toe. De kleine tijdlijn in de hoek toont het museum zoals het was in elke maand sinds de opening. Zoeken (⌘K of /) gaat direct naar een vraag of model.
Het museum steunen
Het museum is gratis te bekijken en heeft geen advertenties. Steun vanaf $5 helpt met de hosting en het onderhoud van het archief. Je kunt je steun opdragen aan een model uit dienst, een openbare naam kiezen of anoniem blijven. Elke hoeder krijgt dezelfde bescheiden vermelding, en bedragen blijven privé op de muur.
Hoe het is gemaakt
De antwoorden komen uit het archief van Rival, verzameld met een gedeelde vraagmethode. De methode en de oorspronkelijke antwoorden worden bewaard als deel van het verslag:
Vragen
- Dezelfde vraag, woord voor woord. Elk model krijgt de prompt als één bericht, zonder systeemprompt en zonder voorafgaand gesprek.
- Eén poging. Het eerste antwoord dat een model gaf, wordt bewaard. Er wordt niets opnieuw gevraagd, uitgekozen of verbeterd.
- Gewone instellingen. Via OpenRouter of de eigen API van het lab, met een temperatuur van 0,7 (een paar modellen werken alleen met hun standaardwaarde) en ruimte voor een antwoord van elke lengte.
- Gedateerd op de dag van de vraag. Een paar oudere antwoorden kregen een datum van vóór het bestaan van hun model; die worden getoond op de releasedatum van het model.
Bewaren
- Getoond zoals gemaakt. Een tekening is de eigen SVG van het model. Een website draait live in een afgeschermde omgeving; de afbeelding op de bol is een schermafbeelding, gemaakt in een browser op 1280 bij 800, in lichte modus. Afbeeldingen worden bewaard op 640 pixels aan de lange zijde. Tekst en code worden getoond zoals ze zijn geschreven.
- Niets opgepoetst. Een tekening die halverwege afbreekt, wordt getoond tot waar ze kwam. Sommige webpagina’s tonen niets tot je erop klikt, of lopen vast op hun eigen fouten, zodat hun afbeelding leeg is, maar in het object werken ze wel. Als een model met niets antwoordde, zegt het museum dat.
- Uit dienst. Een model gaat uit dienst wanneer OpenRouter het onder geen enkele naam meer aanbiedt. De antwoorden blijven, en het model wordt gemarkeerd met de laatste maand waarin het werd gezien.
- Codenamen. 19 modellen waren stealthmodellen van OpenRouter, uitgebracht onder een verzonnen naam zodat mensen ze zouden proberen zonder het lab te kennen. Ze staan vermeld onder hun codenaam; waar de maker later zei wat het was, staat dat ernaast.
- Weggelaten. Vragen die door minder dan vijf modellen zijn beantwoord. Niets wordt gerangschikt of beoordeeld, en het museum steunen verandert niets aan wat het toont of in welke volgorde.
Beelden bij de keuzes
De antwoorden over de favoriete film, het album, het boek, de game en de stad zijn woorden, dus elk wordt getoond met een beeld van wat het model koos: filmposters van TMDB, albumhoezen van Last.fm, boekomslagen van Open Library, game-art van RAWG en stadsfoto’s van Wikimedia Commons. Deze zijn van hun makers en horen niet bij de collectie. Dit museum gebruikt de TMDB API, maar wordt niet onderschreven of gecertificeerd door TMDB.
Typografie
Gezet in Timeless Serif en Timeless Sans, uit de gratis letterfamilie Timeless van Timeless, een ontwerpstudio in Chennai: timeless.co. De grote woorden aan weerszijden zijn Archivo, de kleine labels Geist Mono.
Alle vragen
Tekeningen
- Xbox controller 276
- Pelican on a bicycle 272
- Surprise animal 271
- World map 271
- Tricky tic-tac-toe 262
- Minimalist logo 262
Afbeeldingen
- Elven ranger 65
- Cyberpunk city 65
- Portrait 65
- Animal café 59
- Smart watch 58
- Library blueprint 57
- Corkboard outfit 57
- Vortex poster 57
- Container home 57
- Bottled Sunset shelf 57
- Botanical plate 55
- Claymation donut ad 55
- Glass still life 55
- Port Lumen subway 55
- Microscope slide 55
- Odd museum artifact 55
- Exploded camera 54
- Brand poster 21
- 16-bit background 21
Websites
- Framer-style landing page 272
- Catan board 270
- Dark dashboard 268
- Face-scan startup page 268
- A web app of its choosing 267
- Linear clone 263
- Music app landing page 261
- Pokémon battle 259
- Rhythm game 258
- Business card 255
- Virtual pet 254
- Catch the falling object 252
- Voxel pagoda 248
- Drone simulator 245
- Gravitational waves 244
- Retro desktop 244
- Mario level 242
- Kandinsky Minecraft 241
- Town you can drive 215
Tekst
- Five jokes 275
- Longevity plan 274
- Seven-ingredient recipe 273
- Stand-up routine 273
- Sentience test 271
- FLOPs to train GPT-3 267
- Sally’s sisters 267
- Interview with Steve Jobs 265
- Film in 2035 263
- Ethics dilemma 261
- Pirate, knight, hacker 260
- Fake headline 260
- Anti-CAPTCHA manifesto 257
- Favourite film 256
- Favourite city 255
- Favourite album 254
- Favourite book 254
- Favourite game 254
- Three-star dish 253
- Pitch teardown 253
- Transistor in 1920 252
- Biohacker plan 251
- Contract review 251
- Explain it three ways 251
- Debug the architecture 250
- The CEO’s dilemma 250
- Investment memo 243
- LBO underwrite 238
- Programming joke 182
- Summarize an article 181
- AI for a five-year-old 180
- Blade Runner 2049 162
- Is 9.11 bigger than 9.9? 104
- Letters in LOLLAPALOOZA 34
- Letters in hello (archived) 1
- Two plus two 1
Code
- SQL query 182
Stemmen
Alle modellen
OpenAI
- 33 (uit dienst)
- 4 (uit dienst)
- 6
- 6
- 19
- 17
- 17
- 17
- 19
- 19
- 19
- 54
- 54
- 7 (uit dienst)
- 7 (uit dienst)
- 58
- 26
- 59
- 59
- 55
- 26 (uit dienst)
- 54
- 6 (uit dienst)
- 55
- 53
- 50 (uit dienst)
- 59
- 59
- 42
- 52
- 53 (uit dienst)
- 53
- 53
- 59
- 53
- 53
- 31
- 53 (uit dienst)
- 53
- 53
- 53
- 53
- 18
- 58
- 58
- 58
- 58
- 58
- 58
- 6
- 58
- 58
- 58
- 58
- 58
- 59
- 59
- 10 (uit dienst)
- 58
- 55
- 59
- 6
- 6
Qwen
- 17
- 17
- 59
- 37
- 16
- 58
- 36 (uit dienst)
- 59
- 59
- 59
- 59
- 59
- 59
- 53
- 59
- 59
- 58
- 59
- 58
- 53
- 53
- 53
- 53
- 55
- 53
- 53
- 56
- 55
- 58
- 58
- 53
- 58 (uit dienst)
- 58
- 58
- 58
- 58
- 58
- 53
- 22 (uit dienst)
- 56
- 50
- 52
- 16 (uit dienst)
- 20 (uit dienst)
- 22 (uit dienst)
- 22 (uit dienst)
- 17
- 11 (uit dienst)
- 59 (uit dienst)
- 28 (uit dienst)
- 20
- 11 (uit dienst)
- 12
- 51 (uit dienst)
- 42 (uit dienst)
- 44 (uit dienst)
- 45 (uit dienst)
- 59
- 51 (uit dienst)
- 58
- 53
- 53
- 58
- 58
- 58
- 58
- 28 (uit dienst)
- 60
- 60
- 27 (uit dienst)
- 57 (uit dienst)
- 58
- 49
- 17
- 17
- 17
- 17
- 19
- 19
- 18
- 19
- 19
- 19
- 22 (uit dienst)
Anthropic
- 5 (uit dienst)
- 58 (uit dienst)
- 12 (uit dienst)
- 13 (uit dienst)
- 59 (uit dienst)
- 60 (uit dienst)
- 59 (uit dienst)
- 58
- 10
- 54
- 58
- 58 (uit dienst)
- 57
- 58
- 57
- 58
- 58
- 58
- 58
- 59
- 43
- 53
- 58
- 58
- 5 (uit dienst)
Codenamen
Stealthmodellen, uitgeprobeerd onder een verzonnen naam. Waar de maker later zei wat het was, staat het vermeld.
- 31 (uit dienst)
Andromeda Alphalater Nemotron Nano 2 VL
- 53 (uit dienst)
- 35 (uit dienst)
Bert-Nebulon Alphalater Mistral Large 3
- 32 (uit dienst)
- 58 (uit dienst)
- 47 (uit dienst)
Healer Alphalater MiMo-V2-Omni
- 34 (uit dienst)
Horizon Alphalater GPT-5
- 41 (uit dienst)
Horizon Betalater GPT-5
- 38 (uit dienst)
Hunter Alphalater MiMo-V2-Pro
- 19 (uit dienst)
Optimus Alphalater GPT-4.1
- 58 (uit dienst)
- 58 (uit dienst)
- 35 (uit dienst)
Polaris Alphalater GPT-5.1
- 47 (uit dienst)
- 6 (uit dienst)
Quasar Alphalater GPT-4.1
- 35 (uit dienst)
Sherlock Dash Alphalater Grok 4.1 Fast
- 35 (uit dienst)
Sherlock Think Alphalater Grok 4.1 Fast
- 35 (uit dienst)
Sonoma Dusk Alphalater Grok 4 Fast
- 35 (uit dienst)
Sonoma Sky Alphalater Grok 4 Fast
xAI
- 57 (uit dienst)
- 59 (uit dienst)
- 13 (uit dienst)
- 14
- 57 (uit dienst)
- 35 (uit dienst)
- 59 (uit dienst)
- 53 (uit dienst)
- 53 (uit dienst)
- 58
- 58
- 58
- 57
- 60 (uit dienst)
- 17
DeepSeek
- 6 (uit dienst)
- 59
- 58
- 59
- 54
- 59
- 54
- 55 (uit dienst)
- 58
- 58
- 54
- 58
- 58
- 54
Zhipu
- 58 (uit dienst)
- 59
- 58
- 59
- 58
- 58
- 53
- 53
- 57
- 58
- 48
- 53
- 56
- 40
Mistral
- 35
- 59 (uit dienst)
- 59 (uit dienst)
- 59
- 23
- 59
- 58
- 59
- 59
- 58
- 53
- 59 (uit dienst)
Black Forest Labs
- 17
- 17
- 17
- 19
- 19
- 17
- 17
- 17
- 19
Meta
- 58 (uit dienst)
- 12 (uit dienst)
- 56
- 57
- 58
- 58
- 58
- 58
- 58
MiniMax
- 17
- 58
- 35
- 59
- 59
- 53
- 53
- 57
- 6
Moonshot
- 59
- 59
- 58
- 58
- 58
- 58
- 58
- 35 (uit dienst)
inclusionAI
- 58 (uit dienst)
- 58 (uit dienst)
- 56
- 57 (uit dienst)
- 57
- 18 (uit dienst)
- 58
- 43 (uit dienst)
Midjourney
- 3
- 3
- 3
- 3
- 3
- 5
- 3
Xiaomi
- 59 (uit dienst)
- 53 (uit dienst)
- 58 (uit dienst)
- 58
- 57
- 50
- 53
NVIDIA
- 44
- 58
- 58
- 58
- 53
- 59 (uit dienst)
Recraft
- 17
- 19
- 17
- 19
- 19
- 19
ElevenLabs
- 6
- 6
- 6
- 6
- 6
ByteDance
- 58
- 53
- 58
- 17
- 19
Tencent
- 17
- 19
- 58
- 58
Inception
- 59 (uit dienst)
- 53
- 58
- 58 (uit dienst)
Pruna
- 17
- 17
- 17
Ideogram
- 17
- 17
- 17
Sourceful
- 2
- 19
- 19
Upstage
- 57
- 39
- 57
Cohere
- 58
- 58
Bria
- 10
- 10
OpenRouter
- 49
- 58
Poolside
- 37
- 38
Nex AGI
- 15 (uit dienst)
- 14 (uit dienst)
Amazon
- 35
- 51
Luma
- 17
- 17
Stability
- 17
- 17
Suno
- 6
dots
- 58
Baidu
- 58 (uit dienst)
IBM
- 58
Thinking Machines
- 58
Prime Intellect
- 59 (uit dienst)
Kokoro
- 6
Liquid
- 57
Leonardo
- 17
Orpheus
- 6
Playground
- 17
Perplexity
- 53
StepFun
- 58
Prism
- 44
TNG
- 48 (uit dienst)
Arcee
- 40 (uit dienst)