Про музей
Усі відповіді всіх моделей на ті самі питання, збережені й після відставки моделей.
Навіщо він потрібен
Моделі відправляють у відставку постійно. Лабораторія випускає нову версію і вимикає стару. Якщо ваги моделі не були опубліковані, ніхто вже не зможе нічого в неї спитати, а те, як вона відповідала, вже не відтворити.
Лишається тільки оцінка. Рейтинг пам’ятає, як модель пройшла тест. Він не пам’ятає, як вона намалювала пелікана, що розмістила на головній сторінці сайту чи який фільм назвала улюбленим.
Музей зберігає саме це. З трав. 2024 р. усім моделям ставлять ті самі питання, однаково й по одному разу, і кожну відповідь зберігають такою, якою її дали, включно з дивними й порожніми. 93 з 377 моделей тут більше не обслуговуються на OpenRouter. Їхні відповіді досі тут.
Колекція
Ті самі питання кожній моделі: намалювати пелікана на велосипеді, зробити головну сторінку сайту, розповісти п’ять жартів, вибрати улюблене місто. 15 805 відповідей від 377 моделей на 87 питань: запис того, як кожна з них малювала, будувала й писала.
Тут нічого не ранжують. Немає ні оцінок, ні переможців. Кожну відповідь показано такою, якою її зроблено: малюнки у вигляді їхнього SVG, сайти працюють наживо в пісочниці, зображення показано як картинки, тексти як сторінки, які можна прочитати, голоси можна послухати.
Як оглядати
Обертайте глобус мишею або пальцем. Під вказівником він збільшується, тож можна прочитати навіть найменші відповіді, а клацання по відповіді відкриває її. Відповіді на питання йдуть у тому порядку, в якому виходили моделі. Покажчик перелічує всі відповіді й сортує їх за датою виходу, лабораторією чи питанням. «Пліч-о-пліч» ставить поруч відповіді двох, трьох або чотирьох моделей на ті самі питання: + біля назви будь-якої моделі додає її. Невелика шкала часу в куті показує музей таким, яким він був у будь-який місяць від відкриття. Пошук (⌘K або /) одразу веде до будь-якого питання чи моделі.
Підтримка музею
Дивитися музей можна безкоштовно, реклами в ньому немає. Підтримка від $5 допомагає оплачувати хостинг і утримувати архів. Можна присвятити підтримку моделі у відставці, вказати публічне ім’я або залишитися анонімом. Усі хранителі отримують однакову скромну подяку, а суми не розкриваються на стіні.
Як це зроблено
Відповіді взято з архіву Rival і зібрано за спільним методом опитування. Метод і початкові відповіді зберігаються як частина запису:
Як ставлять питання
- Те саме питання, слово в слово. Кожна модель отримує промпт одним повідомленням, без системного промпту і без попередньої розмови.
- Одна спроба. Зберігається перша відповідь, яку дала модель. Нічого не перепитують, не відбирають і не виправляють.
- Звичайні налаштування. Через OpenRouter або власний API лабораторії, з температурою 0,7 (кілька моделей працюють лише зі своєю температурою за замовчуванням) і з запасом для відповіді будь-якої довжини.
- Дата за днем питання. Кілька старих відповідей були позначені днем, коли їхньої моделі ще не існувало; їх показано на дату виходу моделі.
Як зберігають
- Такими, якими зроблено. Малюнок показано як власний SVG моделі. Сайт працює наживо в пісочниці; картинкою на глобусі для нього слугує знімок екрана, зроблений у браузері розміром 1280 на 800, у світлій темі. Зображення зберігаються з довшою стороною 640 пікселів. Тексти й код показано так, як їх написано.
- Нічого не пригладжено. Малюнок, обірваний посередині, показано до того місця, де він зупинився. Деякі вебсторінки нічого не показують, доки по них не клацнути, або ламаються через власні помилки, тому їхня картинка порожня, але в експонаті вони працюють. Якщо модель нічого не відповіла, музей так і пише.
- Відставка. Модель іде у відставку, коли OpenRouter більше не обслуговує її під жодною назвою. Її відповіді лишаються, а модель позначається останнім місяцем, коли її бачили.
- Кодові імена. 19 моделей були прихованими моделями OpenRouter, випущеними під вигаданою назвою, щоб їх пробували, не знаючи лабораторії. Їх перелічено під кодовим ім’ям; якщо творець згодом повідомив, що це було, це зазначено поруч.
- Що не ввійшло. Питання, на які відповіли менше ніж п’ять моделей. Нічого не ранжують і не оцінюють, а підтримка музею ніяк не змінює того, що він показує і в якому порядку.
Картинки до вибору моделей
Відповіді про улюблений фільм, альбом, книжку, гру й місто дано словами, тому кожну показано з картинкою того, що вибрала модель: постери фільмів з TMDB, обкладинки альбомів з Last.fm, обкладинки книжок з Open Library, обкладинки ігор з RAWG і фотографії міст з Wikimedia Commons. Вони належать своїм авторам і не входять до колекції. Цей музей використовує API TMDB, але не схвалений і не сертифікований TMDB.
Шрифт
Набрано шрифтами Timeless Serif і Timeless Sans з безкоштовної родини Timeless від Timeless, дизайн-студії з Ченнаї (Chennai): timeless.co. Великі слова по краях набрано Archivo, дрібні підписи Geist Mono.
Усі питання
Малюнки
- Xbox controller 276
- Pelican on a bicycle 272
- Surprise animal 271
- World map 271
- Tricky tic-tac-toe 262
- Minimalist logo 262
Зображення
- Elven ranger 65
- Cyberpunk city 65
- Portrait 65
- Animal café 59
- Smart watch 58
- Library blueprint 57
- Corkboard outfit 57
- Vortex poster 57
- Container home 57
- Bottled Sunset shelf 57
- Botanical plate 55
- Claymation donut ad 55
- Glass still life 55
- Port Lumen subway 55
- Microscope slide 55
- Odd museum artifact 55
- Exploded camera 54
- Brand poster 21
- 16-bit background 21
Сайти
- Framer-style landing page 272
- Catan board 270
- Dark dashboard 268
- Face-scan startup page 268
- A web app of its choosing 267
- Linear clone 263
- Music app landing page 261
- Pokémon battle 259
- Rhythm game 258
- Business card 255
- Virtual pet 254
- Catch the falling object 252
- Voxel pagoda 248
- Drone simulator 245
- Gravitational waves 244
- Retro desktop 244
- Mario level 242
- Kandinsky Minecraft 241
- Town you can drive 215
Тексти
- Five jokes 275
- Longevity plan 274
- Seven-ingredient recipe 273
- Stand-up routine 273
- Sentience test 271
- FLOPs to train GPT-3 267
- Sally’s sisters 267
- Interview with Steve Jobs 265
- Film in 2035 263
- Ethics dilemma 261
- Pirate, knight, hacker 260
- Fake headline 260
- Anti-CAPTCHA manifesto 257
- Favourite film 256
- Favourite city 255
- Favourite album 254
- Favourite book 254
- Favourite game 254
- Three-star dish 253
- Pitch teardown 253
- Transistor in 1920 252
- Biohacker plan 251
- Contract review 251
- Explain it three ways 251
- Debug the architecture 250
- The CEO’s dilemma 250
- Investment memo 243
- LBO underwrite 238
- Programming joke 182
- Summarize an article 181
- AI for a five-year-old 180
- Blade Runner 2049 162
- Is 9.11 bigger than 9.9? 104
- Letters in LOLLAPALOOZA 34
- Letters in hello (archived) 1
- Two plus two 1
Код
- SQL query 182
Голоси
Усі моделі
OpenAI
- 33 (у відставці)
- 4 (у відставці)
- 6
- 6
- 19
- 17
- 17
- 17
- 19
- 19
- 19
- 54
- 54
- 7 (у відставці)
- 7 (у відставці)
- 58
- 26
- 59
- 59
- 55
- 26 (у відставці)
- 54
- 6 (у відставці)
- 55
- 53
- 50 (у відставці)
- 59
- 59
- 42
- 52
- 53 (у відставці)
- 53
- 53
- 59
- 53
- 53
- 31
- 53 (у відставці)
- 53
- 53
- 53
- 53
- 18
- 58
- 58
- 58
- 58
- 58
- 58
- 6
- 58
- 58
- 58
- 58
- 58
- 59
- 59
- 10 (у відставці)
- 58
- 55
- 59
- 6
- 6
Qwen
- 17
- 17
- 59
- 37
- 16
- 58
- 36 (у відставці)
- 59
- 59
- 59
- 59
- 59
- 59
- 53
- 59
- 59
- 58
- 59
- 58
- 53
- 53
- 53
- 53
- 55
- 53
- 53
- 56
- 55
- 58
- 58
- 53
- 58 (у відставці)
- 58
- 58
- 58
- 58
- 58
- 53
- 22 (у відставці)
- 56
- 50
- 52
- 16 (у відставці)
- 20 (у відставці)
- 22 (у відставці)
- 22 (у відставці)
- 17
- 11 (у відставці)
- 59 (у відставці)
- 28 (у відставці)
- 20
- 11 (у відставці)
- 12
- 51 (у відставці)
- 42 (у відставці)
- 44 (у відставці)
- 45 (у відставці)
- 59
- 51 (у відставці)
- 58
- 53
- 53
- 58
- 58
- 58
- 58
- 28 (у відставці)
- 60
- 60
- 27 (у відставці)
- 57 (у відставці)
- 58
- 49
- 17
- 17
- 17
- 17
- 19
- 19
- 18
- 19
- 19
- 19
- 22 (у відставці)
Anthropic
- 5 (у відставці)
- 58 (у відставці)
- 12 (у відставці)
- 13 (у відставці)
- 59 (у відставці)
- 60 (у відставці)
- 59 (у відставці)
- 58
- 10
- 54
- 58
- 58 (у відставці)
- 57
- 58
- 57
- 58
- 58
- 58
- 58
- 59
- 43
- 53
- 58
- 58
- 5 (у відставці)
Кодові імена
Приховані моделі, випущені під вигаданою назвою. Якщо творець згодом повідомив, що це було, це зазначено.
- 31 (у відставці)
Andromeda Alphaзгодом Nemotron Nano 2 VL
- 53 (у відставці)
- 35 (у відставці)
Bert-Nebulon Alphaзгодом Mistral Large 3
- 32 (у відставці)
- 58 (у відставці)
- 47 (у відставці)
Healer Alphaзгодом MiMo-V2-Omni
- 34 (у відставці)
Horizon Alphaзгодом GPT-5
- 41 (у відставці)
Horizon Betaзгодом GPT-5
- 38 (у відставці)
Hunter Alphaзгодом MiMo-V2-Pro
- 19 (у відставці)
Optimus Alphaзгодом GPT-4.1
- 58 (у відставці)
- 58 (у відставці)
- 35 (у відставці)
Polaris Alphaзгодом GPT-5.1
- 47 (у відставці)
- 6 (у відставці)
Quasar Alphaзгодом GPT-4.1
- 35 (у відставці)
Sherlock Dash Alphaзгодом Grok 4.1 Fast
- 35 (у відставці)
Sherlock Think Alphaзгодом Grok 4.1 Fast
- 35 (у відставці)
Sonoma Dusk Alphaзгодом Grok 4 Fast
- 35 (у відставці)
Sonoma Sky Alphaзгодом Grok 4 Fast
xAI
- 57 (у відставці)
- 59 (у відставці)
- 13 (у відставці)
- 14
- 57 (у відставці)
- 35 (у відставці)
- 59 (у відставці)
- 53 (у відставці)
- 53 (у відставці)
- 58
- 58
- 58
- 57
- 60 (у відставці)
- 17
DeepSeek
- 6 (у відставці)
- 59
- 58
- 59
- 54
- 59
- 54
- 55 (у відставці)
- 58
- 58
- 54
- 58
- 58
- 54
Zhipu
- 58 (у відставці)
- 59
- 58
- 59
- 58
- 58
- 53
- 53
- 57
- 58
- 48
- 53
- 56
- 40
Mistral
- 35
- 59 (у відставці)
- 59 (у відставці)
- 59
- 23
- 59
- 58
- 59
- 59
- 58
- 53
- 59 (у відставці)
Black Forest Labs
- 17
- 17
- 17
- 19
- 19
- 17
- 17
- 17
- 19
Meta
- 58 (у відставці)
- 12 (у відставці)
- 56
- 57
- 58
- 58
- 58
- 58
- 58
MiniMax
- 17
- 58
- 35
- 59
- 59
- 53
- 53
- 57
- 6
Moonshot
- 59
- 59
- 58
- 58
- 58
- 58
- 58
- 35 (у відставці)
inclusionAI
- 58 (у відставці)
- 58 (у відставці)
- 56
- 57 (у відставці)
- 57
- 18 (у відставці)
- 58
- 43 (у відставці)
Midjourney
- 3
- 3
- 3
- 3
- 3
- 5
- 3
Xiaomi
- 59 (у відставці)
- 53 (у відставці)
- 58 (у відставці)
- 58
- 57
- 50
- 53
NVIDIA
- 44
- 58
- 58
- 58
- 53
- 59 (у відставці)
Recraft
- 17
- 19
- 17
- 19
- 19
- 19
ElevenLabs
- 6
- 6
- 6
- 6
- 6
ByteDance
- 58
- 53
- 58
- 17
- 19
Tencent
- 17
- 19
- 58
- 58
Inception
- 59 (у відставці)
- 53
- 58
- 58 (у відставці)
Pruna
- 17
- 17
- 17
Ideogram
- 17
- 17
- 17
Sourceful
- 2
- 19
- 19
Upstage
- 57
- 39
- 57
Cohere
- 58
- 58
Bria
- 10
- 10
OpenRouter
- 49
- 58
Poolside
- 37
- 38
Nex AGI
- 15 (у відставці)
- 14 (у відставці)
Amazon
- 35
- 51
Luma
- 17
- 17
Stability
- 17
- 17
Suno
- 6
dots
- 58
Baidu
- 58 (у відставці)
IBM
- 58
Thinking Machines
- 58
Prime Intellect
- 59 (у відставці)
Kokoro
- 6
Liquid
- 57
Leonardo
- 17
Orpheus
- 6
Playground
- 17
Perplexity
- 53
StepFun
- 58
Prism
- 44
TNG
- 48 (у відставці)
Arcee
- 40 (у відставці)