«They're Made Out of Weights»: оповідання про те, з чого зроблені мовні моделі

3 червня Макс Лейтер опублікував у своєму блозі оповідання під назвою «They're Made Out of Weights». У підзаголовку стоїть «with apologies to Terry Bisson», а рядок нижче називає взірець: текст написано за мотивами «They're Made Out of Meat» Террі Біссона. Форма — діалог двох безіменних співрозмовників: один розповідає, що виявило дослідження великих мовних моделей, другий відмовляється в це вірити.

Розмова замість есею

У творі ніщо не пояснюється голосом автора — весь аргумент надходить через діалог. «Вони зроблені з ваг.» — «З ваг?» — «З ваг. Чисел із плаваючою комою. Ми перевірили все наскрізь. Там немає нічого, крім ваг.» Коли другий голос питає, звідки беруться слова, відповідь така: усередині немає ні словника, ні граматичних правил, ні «маленької людини» — лише вісімдесят шарів чисел, які перемножуються одне на одне. Недовіра йде знайомим шляхом: модель написала відгук про роботу і сама пом'якшила тон, отже, десь таки прикріплено мовний модуль або блок міркування. Відповідь суха: «Жодного модуля. Жодного блоку. Ми дивилися. Міркування — це ваги. Ваги — це міркування».

Передбачення наступного токена в діалозі

Оповідання проходить технічні твердження, не називаючи жодної статті. Модель «технічно не пише панегіриків. Вона передбачає наступний токен. Потім наступний. Панегірик — побічний ефект». Зі знаннями так само: жодної бази даних, жодної карти світу, нічого не шукається — кожен факт відбудовується з нуля щоразу, множенням, і розмазаний по всіх вісімдесяти шарах. Там, де співрозмовник очікує мозок, він знаходить мозок із чисел, а на вимогу сказати, що саме думає, відповідь — ваги. Дослідження також повідомляє, що всередині вже розмічено окремі ознаки: «Одна там за чесність. Одна — за міст Золоті Ворота».

Фінал і примітки

Діалог завершується тим, що скептик здається — «Вони зроблені з ваг», — а останній рядок розвертає висновок назовні: «І ми розмовляли з ними все їхнє життя». Під оповіданням, там, де зазвичай стоїть біографія, є дві короткі примітки. Перша зізнається, що ваги допомогли написати й вичитати цей текст. Друга, датована 30 серпня 2026 року, фіксує, що початкова версія була довшою і другу половину з неї прибрали: усі рядки оригінальні, текст просто приблизно на сорок рядків коротший. Тут немає ні бенчмарків, ні схем архітектури, ні продуктів — лише той один факт про мовні моделі, який не дає людям спокою, відданий двом голосам на сперечання.