Раздел 49 · Агенты и LLM-разработка: типография «Оттиск»

Литеры и BPE

middle~30 мин

без входаВойди, чтобы отмечать прогресс, вести заметки и решать задачи в редакторе. войти

Технологическая карта № 2

Заказ: разобраться, как машина читает и пишет.

Заказчик: Сан Саныч, технолог.

Что нужно: понять, почему она уверенно пишет то, чего нет.

Особые отметки: технолог машине не верит.

За стеклянной дверью в конце цеха пахнет металлом и старой краской. Сюда давно никто не заходит, кроме Сан Саныча. Вдоль стены стоят наборные кассы, на гвоздях висят гранки, на столе лежит верстатка. Вчера ты раскладывал десять дел Веры Андреевны и упёрся в вопрос, на который без устройства модели не ответить: почему она ошибается так уверенно. Сан Саныч сказал «пойдём в наборный цех», а теперь выдвигает из стойки кассу и ставит её на наклонный стол.

В уроке 03 шаблон напечатал цену запуска, и рядом стояло число токенов, а не букв и не слов. Сегодня разберёмся, что это за единица. Машина режет текст на свои литеры, и касса у неё тоже сделана под язык, только под язык тех текстов, на которых её собирали. Отсюда сразу три следствия, которые ты увидишь в счёте: одно и то же письмо по-русски и по-английски стоит разных денег, у разных моделей разные кассы, а прикидка «токен это четыре буквы» врёт в разы.

премиум-урок

Продолжение в премиуме: 1 200 ₽ в месяц или 10 000 ₽ в год. Вместе с ним серверные проверки задач и школьные токены AI-коуча.

Оплата пока не подключена: премиум и курсы открываются промокодом.