เกี่ยวกับ
ทุกคำตอบที่ทุกโมเดลให้ไว้กับคำถามชุดเดียวกัน เก็บรักษาไว้แม้โมเดลจะเลิกให้บริการแล้ว
ทำไมจึงมีที่นี่
โมเดลถูกปลดระวางอยู่ตลอดเวลา แล็บออกเวอร์ชันใหม่แล้วปิดเวอร์ชันเก่า หากไม่ได้เผยแพร่ค่าน้ำหนักไว้ ก็ไม่มีใครถามอะไรโมเดลนั้นได้อีก และวิธีที่มันตอบก็ทำซ้ำไม่ได้
สิ่งที่เหลืออยู่คือคะแนน ตารางอันดับจำได้ว่าโมเดลทำข้อสอบได้แค่ไหน แต่จำไม่ได้ว่ามันวาดนกกระทุงอย่างไร ใส่อะไรไว้ในหน้าแลนดิ้ง หรือบอกว่ารักหนังเรื่องไหน
พิพิธภัณฑ์เก็บสิ่งเหล่านั้นไว้ ตั้งแต่ พฤษภาคม 2024 ทุกโมเดลได้รับคำถามชุดเดียวกัน ด้วยวิธีเดียวกัน เพียงครั้งเดียว และทุกคำตอบเก็บไว้ตามที่ให้มา รวมถึงคำตอบแปลก ๆ และคำตอบที่ว่างเปล่า จาก 377 โมเดลที่นี่ มี 93 โมเดลที่ไม่ให้บริการบน OpenRouter แล้ว คำตอบของโมเดลเหล่านั้นยังอยู่ที่นี่
คอลเลกชัน
คำถามเดียวกัน ถามทุกโมเดล: วาดนกกระทุงขี่จักรยาน สร้างหน้าแลนดิ้ง เล่ามุกตลกห้ามุก เลือกเมืองที่ชอบ 15,805 คำตอบจาก 377 โมเดล ให้กับ 87 คำถาม เป็นบันทึกว่าแต่ละโมเดลวาด สร้าง และเขียนอย่างไร
ที่นี่ไม่มีการจัดอันดับ ไม่มีคะแนนและไม่มีผู้ชนะ ทุกคำตอบแสดงตามที่สร้างขึ้น: ภาพวาดเป็น SVG ของตัวเอง เว็บไซต์ทำงานจริงในแซนด์บ็อกซ์ ภาพแสดงเป็นภาพ งานเขียนเป็นหน้าที่อ่านได้ และเสียงที่เปิดฟังได้
การเดินชม
หมุนลูกโลกด้วยเมาส์หรือนิ้ว บริเวณใต้ตัวชี้จะขยายใหญ่ขึ้น คำตอบที่เล็กที่สุดจึงอ่านได้ และคลิกที่คำตอบใดก็จะเปิดคำตอบนั้น การไล่ดูคำตอบของคำถามหนึ่งจะเรียงตามลำดับที่โมเดลออกมา ดัชนีแสดงทุกคำตอบ และเรียงได้ตามวันเปิดตัว แล็บ หรือคำถาม เคียงข้างวางคำตอบของสองถึงสี่โมเดลต่อคำถามเดียวกันไว้ติดกัน: ปุ่ม + ข้างชื่อโมเดลใดก็ได้จะเพิ่มโมเดลนั้น เส้นเวลาเล็ก ๆ ที่มุมแสดงพิพิธภัณฑ์ตามที่เป็นในเดือนใดก็ได้นับตั้งแต่เปิด ค้นหา (⌘K หรือ /) พาไปยังคำถามหรือโมเดลใดก็ได้โดยตรง
การสนับสนุนพิพิธภัณฑ์
พิพิธภัณฑ์เปิดให้ชมฟรีและไม่มีโฆษณา การสนับสนุนเริ่มต้นที่ $5 ช่วยค่าโฮสติ้งและการดูแลคลังเก็บ คุณอุทิศการสนับสนุนให้โมเดลที่ปลดระวาง เลือกชื่อที่แสดงต่อสาธารณะ หรือไม่ระบุตัวตนก็ได้ ผู้พิทักษ์ทุกคนได้รับเครดิตเรียบ ๆ แบบเดียวกัน และจำนวนเงินไม่เปิดเผยบน กำแพง
ทำขึ้นอย่างไร
คำตอบมาจากคลังเก็บของ Rival รวบรวมด้วย วิธีถามแบบเดียวกัน วิธีการและคำตอบต้นฉบับเก็บไว้เป็นส่วนหนึ่งของบันทึก:
การถาม
- คำถามเดียวกัน ตรงทุกคำ แต่ละโมเดลได้รับพรอมต์เป็นข้อความเดียว ไม่มีพรอมต์ระบบและไม่มีบทสนทนาก่อนหน้า
- ครั้งเดียว คำตอบแรกที่โมเดลให้คือคำตอบที่เก็บไว้ ไม่มีการถามซ้ำ คัดเลือก หรือแก้ไข
- การตั้งค่าปกติ ผ่าน OpenRouter หรือ API ของแล็บเอง ที่อุณหภูมิ 0.7 (บางโมเดลรันได้เฉพาะค่าเริ่มต้นของตัวเอง) และเผื่อพื้นที่ให้คำตอบยาวเท่าใดก็ได้
- ลงวันที่ตามวันที่ถาม คำตอบเก่าบางข้อถูกประทับวันที่ก่อนที่โมเดลจะมีอยู่ คำตอบเหล่านั้นแสดงตามวันเปิดตัวของโมเดล
การเก็บรักษา
- แสดงตามที่สร้าง ภาพวาดคือ SVG ของโมเดลเอง เว็บไซต์ทำงานจริงในแซนด์บ็อกซ์ ภาพบนลูกโลกเป็นภาพหน้าจอที่ถ่ายในเบราว์เซอร์ขนาด 1280 × 800 ในโหมดสว่าง ภาพเก็บไว้ที่ 640 พิกเซลด้านยาว งานเขียนและโค้ดแสดงตามที่เขียน
- ไม่มีการตกแต่ง ภาพวาดที่ขาดกลางคันแสดงเท่าที่วาดได้ หน้าเว็บบางหน้าไม่แสดงอะไรจนกว่าจะคลิก หรือพังเพราะบั๊กของตัวเอง ภาพของหน้านั้นจึงว่างเปล่า แต่ยังทำงานในชิ้นจัดแสดง เมื่อโมเดลไม่ได้ตอบอะไรเลย พิพิธภัณฑ์ก็บอกไว้ตามนั้น
- ปลดระวาง โมเดลถือว่าปลดระวางเมื่อ OpenRouter ไม่ให้บริการโมเดลนั้นภายใต้ชื่อใดอีก คำตอบยังคงอยู่ และโมเดลถูกระบุด้วยเดือนสุดท้ายที่พบ
- ชื่อรหัส 19 โมเดลเป็นโมเดลลับของ OpenRouter ที่ออกมาภายใต้ชื่อสมมติ เพื่อให้คนลองใช้โดยไม่รู้ว่ามาจากแล็บไหน โมเดลเหล่านี้แสดงตามชื่อรหัส หากภายหลังผู้สร้างเปิดเผยว่าคือโมเดลใด จะระบุไว้ข้าง ๆ
- สิ่งที่ไม่ได้รวมไว้ คำถามที่มีโมเดลตอบไม่ถึงห้าโมเดล ไม่มีการจัดอันดับหรือให้คะแนน และการสนับสนุนพิพิธภัณฑ์ไม่เปลี่ยนสิ่งที่แสดงหรือลำดับการแสดง
ภาพของสิ่งที่เลือก
คำตอบเรื่องหนัง อัลบั้ม หนังสือ เกม และเมืองที่ชอบเป็นถ้อยคำ แต่ละคำตอบจึงแสดงพร้อมภาพของสิ่งที่โมเดลเลือก: โปสเตอร์หนังจาก TMDB ปกอัลบั้มจาก Last.fm ปกหนังสือจาก Open Library ภาพเกมจาก RAWG และภาพถ่ายเมืองจาก Wikimedia Commons ภาพเหล่านี้เป็นของผู้สร้างและไม่ได้เป็นส่วนหนึ่งของคอลเลกชัน พิพิธภัณฑ์นี้ใช้ TMDB API แต่ไม่ได้รับการรับรองหรือการยืนยันจาก TMDB
ตัวอักษร
เรียงพิมพ์ด้วย Timeless Serif และ Timeless Sans จากชุดแบบอักษรฟรี Timeless โดย Timeless สตูดิโอออกแบบใน Chennai: timeless.co คำใหญ่สองข้างใช้ Archivo และป้ายเล็กใช้ Geist Mono
ทุกคำถาม
ภาพวาด
- Xbox controller 276
- Pelican on a bicycle 272
- Surprise animal 271
- World map 271
- Tricky tic-tac-toe 262
- Minimalist logo 262
ภาพ
- Elven ranger 65
- Cyberpunk city 65
- Portrait 65
- Animal café 59
- Smart watch 58
- Library blueprint 57
- Corkboard outfit 57
- Vortex poster 57
- Container home 57
- Bottled Sunset shelf 57
- Botanical plate 55
- Claymation donut ad 55
- Glass still life 55
- Port Lumen subway 55
- Microscope slide 55
- Odd museum artifact 55
- Exploded camera 54
- Brand poster 21
- 16-bit background 21
เว็บไซต์
- Framer-style landing page 272
- Catan board 270
- Dark dashboard 268
- Face-scan startup page 268
- A web app of its choosing 267
- Linear clone 263
- Music app landing page 261
- Pokémon battle 259
- Rhythm game 258
- Business card 255
- Virtual pet 254
- Catch the falling object 252
- Voxel pagoda 248
- Drone simulator 245
- Gravitational waves 244
- Retro desktop 244
- Mario level 242
- Kandinsky Minecraft 241
- Town you can drive 215
งานเขียน
- Five jokes 275
- Longevity plan 274
- Seven-ingredient recipe 273
- Stand-up routine 273
- Sentience test 271
- FLOPs to train GPT-3 267
- Sally’s sisters 267
- Interview with Steve Jobs 265
- Film in 2035 263
- Ethics dilemma 261
- Pirate, knight, hacker 260
- Fake headline 260
- Anti-CAPTCHA manifesto 257
- Favourite film 256
- Favourite city 255
- Favourite album 254
- Favourite book 254
- Favourite game 254
- Three-star dish 253
- Pitch teardown 253
- Transistor in 1920 252
- Biohacker plan 251
- Contract review 251
- Explain it three ways 251
- Debug the architecture 250
- The CEO’s dilemma 250
- Investment memo 243
- LBO underwrite 238
- Programming joke 182
- Summarize an article 181
- AI for a five-year-old 180
- Blade Runner 2049 162
- Is 9.11 bigger than 9.9? 104
- Letters in LOLLAPALOOZA 34
- Letters in hello (archived) 1
- Two plus two 1
โค้ด
- SQL query 182
เสียง
ทุกโมเดล
OpenAI
- 33 (ปลดระวาง)
- 4 (ปลดระวาง)
- 6
- 6
- 19
- 17
- 17
- 17
- 19
- 19
- 19
- 54
- 54
- 7 (ปลดระวาง)
- 7 (ปลดระวาง)
- 58
- 26
- 59
- 59
- 55
- 26 (ปลดระวาง)
- 54
- 6 (ปลดระวาง)
- 55
- 53
- 50 (ปลดระวาง)
- 59
- 59
- 42
- 52
- 53 (ปลดระวาง)
- 53
- 53
- 59
- 53
- 53
- 31
- 53 (ปลดระวาง)
- 53
- 53
- 53
- 53
- 18
- 58
- 58
- 58
- 58
- 58
- 58
- 6
- 58
- 58
- 58
- 58
- 58
- 59
- 59
- 10 (ปลดระวาง)
- 58
- 55
- 59
- 6
- 6
Qwen
- 17
- 17
- 59
- 37
- 16
- 58
- 36 (ปลดระวาง)
- 59
- 59
- 59
- 59
- 59
- 59
- 53
- 59
- 59
- 58
- 59
- 58
- 53
- 53
- 53
- 53
- 55
- 53
- 53
- 56
- 55
- 58
- 58
- 53
- 58 (ปลดระวาง)
- 58
- 58
- 58
- 58
- 58
- 53
- 22 (ปลดระวาง)
- 56
- 50
- 52
- 16 (ปลดระวาง)
- 20 (ปลดระวาง)
- 22 (ปลดระวาง)
- 22 (ปลดระวาง)
- 17
- 11 (ปลดระวาง)
- 59 (ปลดระวาง)
- 28 (ปลดระวาง)
- 20
- 11 (ปลดระวาง)
- 12
- 51 (ปลดระวาง)
- 42 (ปลดระวาง)
- 44 (ปลดระวาง)
- 45 (ปลดระวาง)
- 59
- 51 (ปลดระวาง)
- 58
- 53
- 53
- 58
- 58
- 58
- 58
- 28 (ปลดระวาง)
- 60
- 60
- 27 (ปลดระวาง)
- 57 (ปลดระวาง)
- 58
- 49
- 17
- 17
- 17
- 17
- 19
- 19
- 18
- 19
- 19
- 19
- 22 (ปลดระวาง)
Anthropic
- 5 (ปลดระวาง)
- 58 (ปลดระวาง)
- 12 (ปลดระวาง)
- 13 (ปลดระวาง)
- 59 (ปลดระวาง)
- 60 (ปลดระวาง)
- 59 (ปลดระวาง)
- 58
- 10
- 54
- 58
- 58 (ปลดระวาง)
- 57
- 58
- 57
- 58
- 58
- 58
- 58
- 59
- 43
- 53
- 58
- 58
- 5 (ปลดระวาง)
ชื่อรหัส
โมเดลลับที่ทดลองภายใต้ชื่อสมมติ หากภายหลังผู้สร้างเปิดเผยว่าคือโมเดลใด จะระบุไว้
- 31 (ปลดระวาง)
Andromeda Alphaต่อมาคือ Nemotron Nano 2 VL
- 53 (ปลดระวาง)
- 35 (ปลดระวาง)
Bert-Nebulon Alphaต่อมาคือ Mistral Large 3
- 32 (ปลดระวาง)
- 58 (ปลดระวาง)
- 47 (ปลดระวาง)
Healer Alphaต่อมาคือ MiMo-V2-Omni
- 34 (ปลดระวาง)
Horizon Alphaต่อมาคือ GPT-5
- 41 (ปลดระวาง)
Horizon Betaต่อมาคือ GPT-5
- 38 (ปลดระวาง)
Hunter Alphaต่อมาคือ MiMo-V2-Pro
- 19 (ปลดระวาง)
Optimus Alphaต่อมาคือ GPT-4.1
- 58 (ปลดระวาง)
- 58 (ปลดระวาง)
- 35 (ปลดระวาง)
Polaris Alphaต่อมาคือ GPT-5.1
- 47 (ปลดระวาง)
- 6 (ปลดระวาง)
Quasar Alphaต่อมาคือ GPT-4.1
- 35 (ปลดระวาง)
Sherlock Dash Alphaต่อมาคือ Grok 4.1 Fast
- 35 (ปลดระวาง)
Sherlock Think Alphaต่อมาคือ Grok 4.1 Fast
- 35 (ปลดระวาง)
Sonoma Dusk Alphaต่อมาคือ Grok 4 Fast
- 35 (ปลดระวาง)
Sonoma Sky Alphaต่อมาคือ Grok 4 Fast
xAI
- 57 (ปลดระวาง)
- 59 (ปลดระวาง)
- 13 (ปลดระวาง)
- 14
- 57 (ปลดระวาง)
- 35 (ปลดระวาง)
- 59 (ปลดระวาง)
- 53 (ปลดระวาง)
- 53 (ปลดระวาง)
- 58
- 58
- 58
- 57
- 60 (ปลดระวาง)
- 17
DeepSeek
- 6 (ปลดระวาง)
- 59
- 58
- 59
- 54
- 59
- 54
- 55 (ปลดระวาง)
- 58
- 58
- 54
- 58
- 58
- 54
Zhipu
- 58 (ปลดระวาง)
- 59
- 58
- 59
- 58
- 58
- 53
- 53
- 57
- 58
- 48
- 53
- 56
- 40
Mistral
- 35
- 59 (ปลดระวาง)
- 59 (ปลดระวาง)
- 59
- 23
- 59
- 58
- 59
- 59
- 58
- 53
- 59 (ปลดระวาง)
Black Forest Labs
- 17
- 17
- 17
- 19
- 19
- 17
- 17
- 17
- 19
Meta
- 58 (ปลดระวาง)
- 12 (ปลดระวาง)
- 56
- 57
- 58
- 58
- 58
- 58
- 58
MiniMax
- 17
- 58
- 35
- 59
- 59
- 53
- 53
- 57
- 6
Moonshot
- 59
- 59
- 58
- 58
- 58
- 58
- 58
- 35 (ปลดระวาง)
inclusionAI
- 58 (ปลดระวาง)
- 58 (ปลดระวาง)
- 56
- 57 (ปลดระวาง)
- 57
- 18 (ปลดระวาง)
- 58
- 43 (ปลดระวาง)
Midjourney
- 3
- 3
- 3
- 3
- 3
- 5
- 3
Xiaomi
- 59 (ปลดระวาง)
- 53 (ปลดระวาง)
- 58 (ปลดระวาง)
- 58
- 57
- 50
- 53
NVIDIA
- 44
- 58
- 58
- 58
- 53
- 59 (ปลดระวาง)
Recraft
- 17
- 19
- 17
- 19
- 19
- 19
ElevenLabs
- 6
- 6
- 6
- 6
- 6
ByteDance
- 58
- 53
- 58
- 17
- 19
Tencent
- 17
- 19
- 58
- 58
Inception
- 59 (ปลดระวาง)
- 53
- 58
- 58 (ปลดระวาง)
Pruna
- 17
- 17
- 17
Ideogram
- 17
- 17
- 17
Sourceful
- 2
- 19
- 19
Upstage
- 57
- 39
- 57
Cohere
- 58
- 58
Bria
- 10
- 10
OpenRouter
- 49
- 58
Poolside
- 37
- 38
Nex AGI
- 15 (ปลดระวาง)
- 14 (ปลดระวาง)
Amazon
- 35
- 51
Luma
- 17
- 17
Stability
- 17
- 17
Suno
- 6
dots
- 58
Baidu
- 58 (ปลดระวาง)
IBM
- 58
Thinking Machines
- 58
Prime Intellect
- 59 (ปลดระวาง)
Kokoro
- 6
Liquid
- 57
Leonardo
- 17
Orpheus
- 6
Playground
- 17
Perplexity
- 53
StepFun
- 58
Prism
- 44
TNG
- 48 (ปลดระวาง)
Arcee
- 40 (ปลดระวาง)