Звідки береться знання

Запитай AI, хто написав «Гамлета» чи як зварити яйце, — і він просто знає. Але ніхто не сідав і не вписував ці відповіді в нього. То звідки все це взялося?

Ніхто не вписував відповіді

Уяви студента, який роками сидів у найбільшій бібліотеці світу — читав книжки, статті, гілки форумів, рецепти, код і безкінечні розмови туди-сюди. Він не заучував усе слово в слово. Але після достатнього читання вловив, як ідеї стикуються між собою: які слова зазвичай ідуть за якими, як побудований рецепт, як люди відповідають на питання. AI вчиться так само — читаючи приголомшливий обсяг людських текстів і вбираючи закономірності в них. Ця фаза читання називається навчанням.

Це віддзеркалення прочитаного

Оскільки все, що він знає, взялося з тієї гори тексту, ця гора й формує те, що він уміє. Дай йому вдосталь оповідань — і він стане добрим в оповіданнях. Дай код — і він писатиме код. Прибери цілий вид письма — і ціла здатність замовкне, бо просто не було з чого вчитися. Модель у прямому сенсі є дзеркалом свого читання.

Ось чому AI переймає й наші звички — і хороші, і погані. Якщо багато текстів хиляться в певний бік, модель хилиться туди ж. Вона вчилася в нас, тож і віддзеркалює нас: наші знання, наші стилі й наші сліпі плями.

У якийсь момент воно перестає читати

Читання триває не вічно. У якийсь момент навчання завершується, і модель заморожується — вона знає світ приблизно до тієї миті й не далі. Спитай про те, що сталося минулого тижня, — і вона могла цього ніколи не бачити. Цей край називається межею знань моделі.

Що взяти з собою

• —Знання AI береться з читання людських текстів, а не з фактів, вписаних вручну.
• —Прочитане формує вміння — прибери вид письма, і навичка згасне.
• —Його знання зупиняються на межі; дуже свіжого може бракувати.