код интеллекта.
9 класс · большие языковые модели
интерактив темы

Нейро­лаборатория

Четыре станции, чтобы потрогать руками, как языковая модель читает, предсказывает, отвечает — и ошибается.

Привет, я Искра. Сразу честно: я предсказываю слова, а не знаю истину. Заходи на станции — покажу, как это устроено изнутри.
Прогресс лаборатории0 из 4
Станция 1 · занятие 1
код интеллекта.

Токенизатор

Модель не читает буквы и слова, как ты. Она режет текст на токены. Посмотри, как — тремя способами.

У настоящих моделей: словарь примерно из 100 000 токенов, и он не составлен вручную, а выучен из данных. Здесь — двести морфем и простое правило, но принцип тот же: частое — крупными кусками, редкое — мелкими.
Станция 2 · занятие 1
код интеллекта.

Предскажи слово

Сыграй за языковую модель: выбери продолжение фразы. Очки — за совпадение с самым частым словом мини-корпуса.

У настоящих моделей: не 4 варианта, а весь словарь из ~100 000 токенов, и вероятности зависят от всего разговора, а не от пары соседних слов. Частоты здесь — наш мини-корпус для наглядности (числа раунда про школьников — из учебника).
Станция 3 · занятие 2
код интеллекта.

Прокачай промпт

Задача: получить от модели полезный план вечера настольных игр для класса. Собери промпт из блоков и добейся качества не ниже 90.

Итерация 0
Честно: ответы здесь заготовлены заранее, а настоящая модель каждый раз генерирует текст заново. Но зависимость настоящая: чем точнее промпт — тем полезнее ответ.
Станция 4 · занятие 2
код интеллекта.

Поймай галлюцинацию

Перед тобой 8 ответов нейросети. Звучат одинаково уверенно — но в некоторых спряталась выдумка. Найди её.

Честно: галлюцинация — не «поломка». Модель всегда делает одно и то же: предсказывает правдоподобное продолжение. Просто правдоподобное — не всегда правдивое. Здесь выдумки написаны вручную, у реальных моделей они непредсказуемы.