Sobre
Todas as respostas que cada modelo deu às mesmas perguntas, guardadas depois que os modelos se foram.
Por que ele existe
Modelos são aposentados o tempo todo. Um laboratório lança uma versão nova e desliga a antiga. A menos que os pesos tenham sido publicados, ninguém pode perguntar mais nada a ele, e o seu jeito de responder não pode ser reproduzido.
O que sobrevive é uma pontuação. Um ranking lembra como um modelo se saiu num teste. Não lembra como ele desenhou um pelicano, o que pôs numa landing page ou qual filme disse que adorava.
O museu guarda isso. Desde maio de 2024, as mesmas perguntas foram feitas a cada modelo, do mesmo jeito, uma única vez, e cada resposta é guardada como foi dada, incluindo as estranhas e as vazias. 93 dos 377 modelos daqui não estão mais em serviço no OpenRouter. As respostas deles continuam aqui.
A coleção
As mesmas perguntas, feitas a cada modelo: desenhe um pelicano andando de bicicleta, crie uma landing page, conte cinco piadas, escolha sua cidade favorita. 15.805 respostas de 377 modelos a 87 perguntas, um registro de como cada um desenhou, construiu e escreveu.
Nada aqui é classificado. Não há pontuações nem vencedores. Cada resposta é mostrada como foi feita: desenhos como o seu SVG, sites funcionando ao vivo num ambiente isolado, imagens como imagens, a escrita como uma página para ler, vozes para ouvir.
Como percorrer
Gire o globo com o mouse ou com o dedo. Sob o ponteiro ele se amplia, então até as menores respostas podem ser lidas, e um clique numa resposta a abre. As respostas de uma pergunta seguem a ordem em que os modelos foram lançados. O Índice lista todas as respostas e as ordena por data de lançamento, laboratório ou pergunta. Lado a lado coloca juntas as respostas de dois a quatro modelos às mesmas perguntas: o + ao lado do nome de qualquer modelo o adiciona. A pequena linha do tempo no canto mostra o museu como era em qualquer mês desde que abriu. Buscar (⌘K ou /) leva direto a qualquer pergunta ou modelo.
Apoiar o museu
O museu é gratuito para visitar e não tem anúncios. O apoio, a partir de US$ 5, ajuda com a hospedagem e a manutenção do arquivo. Você pode dedicar seu apoio a um modelo aposentado, escolher um nome público ou ficar anônimo. Todos os guardiões dividem o mesmo crédito discreto, e os valores ficam privados no mural.
Como foi feito
As respostas vêm do arquivo do Rival, reunidas com um método comum de perguntar. O método e as respostas originais são guardados como parte do registro:
Perguntar
- A mesma pergunta, palavra por palavra. Cada modelo recebe o prompt como uma única mensagem, sem prompt de sistema e sem conversa anterior.
- Uma única tentativa. A primeira resposta que o modelo deu é a que fica guardada. Nada é perguntado de novo, escolhido ou corrigido.
- Configurações comuns. Pelo OpenRouter ou pela API do próprio laboratório, com temperatura de 0,7 (alguns modelos só funcionam com a padrão) e espaço para uma resposta de qualquer tamanho.
- Datada no dia em que foi perguntada. Algumas respostas antigas foram marcadas com um dia anterior à existência do seu modelo; essas aparecem na data de lançamento do modelo.
Guardar
- Como foi feito. Um desenho é o próprio SVG do modelo. Um site funciona ao vivo num ambiente isolado; a imagem dele no globo é uma captura de tela feita num navegador a 1280 por 800, no modo claro. As imagens são guardadas com 640 pixels no lado maior. A escrita e o código são mostrados como foram escritos.
- Nada retocado. Um desenho cortado no meio é mostrado até onde chegou. Algumas páginas web não mostram nada até receberem um clique, ou quebram por causa dos próprios erros, então a imagem delas fica em branco, mas elas funcionam na peça. Quando um modelo não respondeu nada, o museu diz isso.
- Aposentados. Um modelo é aposentado quando o OpenRouter não o oferece mais com nenhum nome. As respostas dele ficam, e o modelo é marcado com o último mês em que foi visto.
- Codinomes. 19 modelos foram modelos secretos do OpenRouter, lançados com um nome inventado para que as pessoas os testassem sem saber de que laboratório eram. Eles aparecem com o codinome; quando o fabricante disse depois o que era, isso é indicado ao lado.
- O que fica de fora. As perguntas que menos de cinco modelos responderam. Nada é classificado nem pontuado, e apoiar o museu não muda nada do que ele mostra nem da ordem em que mostra.
Imagens das escolhas
As respostas sobre filme, álbum, livro, jogo e cidade favoritos são palavras, então cada uma aparece com uma imagem do que o modelo escolheu: pôsteres de filmes do TMDB, capas de álbuns do Last.fm, capas de livros da Open Library, arte de jogos do RAWG e fotografias de cidades do Wikimedia Commons. Elas pertencem aos seus autores e não fazem parte da coleção. Este museu usa a API do TMDB, mas não é endossado nem certificado pelo TMDB.
Tipografia
Composto em Timeless Serif e Timeless Sans, da família tipográfica gratuita Timeless, da Timeless, um estúdio de design de Chennai: timeless.co. As palavras grandes dos lados estão em Archivo e as etiquetas pequenas, em Geist Mono.
Todas as perguntas
Desenhos
- Xbox controller 276
- Pelican on a bicycle 272
- Surprise animal 271
- World map 271
- Tricky tic-tac-toe 262
- Minimalist logo 262
Imagens
- Elven ranger 65
- Cyberpunk city 65
- Portrait 65
- Animal café 59
- Smart watch 58
- Library blueprint 57
- Corkboard outfit 57
- Vortex poster 57
- Container home 57
- Bottled Sunset shelf 57
- Botanical plate 55
- Claymation donut ad 55
- Glass still life 55
- Port Lumen subway 55
- Microscope slide 55
- Odd museum artifact 55
- Exploded camera 54
- Brand poster 21
- 16-bit background 21
Sites
- Framer-style landing page 272
- Catan board 270
- Dark dashboard 268
- Face-scan startup page 268
- A web app of its choosing 267
- Linear clone 263
- Music app landing page 261
- Pokémon battle 259
- Rhythm game 258
- Business card 255
- Virtual pet 254
- Catch the falling object 252
- Voxel pagoda 248
- Drone simulator 245
- Gravitational waves 244
- Retro desktop 244
- Mario level 242
- Kandinsky Minecraft 241
- Town you can drive 215
Escrita
- Five jokes 275
- Longevity plan 274
- Seven-ingredient recipe 273
- Stand-up routine 273
- Sentience test 271
- FLOPs to train GPT-3 267
- Sally’s sisters 267
- Interview with Steve Jobs 265
- Film in 2035 263
- Ethics dilemma 261
- Pirate, knight, hacker 260
- Fake headline 260
- Anti-CAPTCHA manifesto 257
- Favourite film 256
- Favourite city 255
- Favourite album 254
- Favourite book 254
- Favourite game 254
- Three-star dish 253
- Pitch teardown 253
- Transistor in 1920 252
- Biohacker plan 251
- Contract review 251
- Explain it three ways 251
- Debug the architecture 250
- The CEO’s dilemma 250
- Investment memo 243
- LBO underwrite 238
- Programming joke 182
- Summarize an article 181
- AI for a five-year-old 180
- Blade Runner 2049 162
- Is 9.11 bigger than 9.9? 104
- Letters in LOLLAPALOOZA 34
- Letters in hello (archived) 1
- Two plus two 1
Código
- SQL query 182
Vozes
Todos os modelos
OpenAI
- 33 (aposentado)
- 4 (aposentado)
- 6
- 6
- 19
- 17
- 17
- 17
- 19
- 19
- 19
- 54
- 54
- 7 (aposentado)
- 7 (aposentado)
- 58
- 26
- 59
- 59
- 55
- 26 (aposentado)
- 54
- 6 (aposentado)
- 55
- 53
- 50 (aposentado)
- 59
- 59
- 42
- 52
- 53 (aposentado)
- 53
- 53
- 59
- 53
- 53
- 31
- 53 (aposentado)
- 53
- 53
- 53
- 53
- 18
- 58
- 58
- 58
- 58
- 58
- 58
- 6
- 58
- 58
- 58
- 58
- 58
- 59
- 59
- 10 (aposentado)
- 58
- 55
- 59
- 6
- 6
Qwen
- 17
- 17
- 59
- 37
- 16
- 58
- 36 (aposentado)
- 59
- 59
- 59
- 59
- 59
- 59
- 53
- 59
- 59
- 58
- 59
- 58
- 53
- 53
- 53
- 53
- 55
- 53
- 53
- 56
- 55
- 58
- 58
- 53
- 58 (aposentado)
- 58
- 58
- 58
- 58
- 58
- 53
- 22 (aposentado)
- 56
- 50
- 52
- 16 (aposentado)
- 20 (aposentado)
- 22 (aposentado)
- 22 (aposentado)
- 17
- 11 (aposentado)
- 59 (aposentado)
- 28 (aposentado)
- 20
- 11 (aposentado)
- 12
- 51 (aposentado)
- 42 (aposentado)
- 44 (aposentado)
- 45 (aposentado)
- 59
- 51 (aposentado)
- 58
- 53
- 53
- 58
- 58
- 58
- 58
- 28 (aposentado)
- 60
- 60
- 27 (aposentado)
- 57 (aposentado)
- 58
- 49
- 17
- 17
- 17
- 17
- 19
- 19
- 18
- 19
- 19
- 19
- 22 (aposentado)
Anthropic
- 5 (aposentado)
- 58 (aposentado)
- 12 (aposentado)
- 13 (aposentado)
- 59 (aposentado)
- 60 (aposentado)
- 59 (aposentado)
- 58
- 10
- 54
- 58
- 58 (aposentado)
- 57
- 58
- 57
- 58
- 58
- 58
- 58
- 59
- 43
- 53
- 58
- 58
- 5 (aposentado)
Codinomes
Modelos secretos, testados com um nome inventado. Quando o fabricante disse depois o que era, isso é indicado.
- 31 (aposentado)
Andromeda Alphadepois Nemotron Nano 2 VL
- 53 (aposentado)
- 35 (aposentado)
Bert-Nebulon Alphadepois Mistral Large 3
- 32 (aposentado)
- 58 (aposentado)
- 47 (aposentado)
Healer Alphadepois MiMo-V2-Omni
- 34 (aposentado)
Horizon Alphadepois GPT-5
- 41 (aposentado)
Horizon Betadepois GPT-5
- 38 (aposentado)
Hunter Alphadepois MiMo-V2-Pro
- 19 (aposentado)
Optimus Alphadepois GPT-4.1
- 58 (aposentado)
- 58 (aposentado)
- 35 (aposentado)
Polaris Alphadepois GPT-5.1
- 47 (aposentado)
- 6 (aposentado)
Quasar Alphadepois GPT-4.1
- 35 (aposentado)
Sherlock Dash Alphadepois Grok 4.1 Fast
- 35 (aposentado)
Sherlock Think Alphadepois Grok 4.1 Fast
- 35 (aposentado)
Sonoma Dusk Alphadepois Grok 4 Fast
- 35 (aposentado)
Sonoma Sky Alphadepois Grok 4 Fast
xAI
- 57 (aposentado)
- 59 (aposentado)
- 13 (aposentado)
- 14
- 57 (aposentado)
- 35 (aposentado)
- 59 (aposentado)
- 53 (aposentado)
- 53 (aposentado)
- 58
- 58
- 58
- 57
- 60 (aposentado)
- 17
DeepSeek
- 6 (aposentado)
- 59
- 58
- 59
- 54
- 59
- 54
- 55 (aposentado)
- 58
- 58
- 54
- 58
- 58
- 54
Zhipu
- 58 (aposentado)
- 59
- 58
- 59
- 58
- 58
- 53
- 53
- 57
- 58
- 48
- 53
- 56
- 40
Mistral
- 35
- 59 (aposentado)
- 59 (aposentado)
- 59
- 23
- 59
- 58
- 59
- 59
- 58
- 53
- 59 (aposentado)
Black Forest Labs
- 17
- 17
- 17
- 19
- 19
- 17
- 17
- 17
- 19
Meta
- 58 (aposentado)
- 12 (aposentado)
- 56
- 57
- 58
- 58
- 58
- 58
- 58
MiniMax
- 17
- 58
- 35
- 59
- 59
- 53
- 53
- 57
- 6
Moonshot
- 59
- 59
- 58
- 58
- 58
- 58
- 58
- 35 (aposentado)
inclusionAI
- 58 (aposentado)
- 58 (aposentado)
- 56
- 57 (aposentado)
- 57
- 18 (aposentado)
- 58
- 43 (aposentado)
Midjourney
- 3
- 3
- 3
- 3
- 3
- 5
- 3
Xiaomi
- 59 (aposentado)
- 53 (aposentado)
- 58 (aposentado)
- 58
- 57
- 50
- 53
NVIDIA
- 44
- 58
- 58
- 58
- 53
- 59 (aposentado)
Recraft
- 17
- 19
- 17
- 19
- 19
- 19
ElevenLabs
- 6
- 6
- 6
- 6
- 6
ByteDance
- 58
- 53
- 58
- 17
- 19
Tencent
- 17
- 19
- 58
- 58
Inception
- 59 (aposentado)
- 53
- 58
- 58 (aposentado)
Pruna
- 17
- 17
- 17
Ideogram
- 17
- 17
- 17
Sourceful
- 2
- 19
- 19
Upstage
- 57
- 39
- 57
Cohere
- 58
- 58
Bria
- 10
- 10
OpenRouter
- 49
- 58
Poolside
- 37
- 38
Nex AGI
- 15 (aposentado)
- 14 (aposentado)
Amazon
- 35
- 51
Luma
- 17
- 17
Stability
- 17
- 17
Suno
- 6
dots
- 58
Baidu
- 58 (aposentado)
IBM
- 58
Thinking Machines
- 58
Prime Intellect
- 59 (aposentado)
Kokoro
- 6
Liquid
- 57
Leonardo
- 17
Orpheus
- 6
Playground
- 17
Perplexity
- 53
StepFun
- 58
Prism
- 44
TNG
- 48 (aposentado)
Arcee
- 40 (aposentado)