Раздел 49 · Агенты и LLM-разработка: типография «Оттиск»

Эвалы в CI

middle~40 мин

без входаВойди, чтобы отмечать прогресс, вести заметки и решать задачи в редакторе. войти

Марк кладёт на стол Ирины Львовны две распечатки из CI. Один и тот же коммит Лёвы, два прогона эвалов на DeepSeek с разницей в час. В первом восемнадцать случаев из двадцати, во втором шестнадцать, и красные не те же самые.

В прошлом уроке Ирина Львовна разобрала ночные провалы и нашла самую большую корзину. Чинить её будут правкой промпта, а каждую правку надо прогонять на наборе. Если гонять его на живой модели, CI будет мигать: модель случайна даже на одном и том же запросе, как ты видел в уроке 09, а каждый прогон стоит денег. Если не гонять, правка промпта уйдёт к Дине непроверенной. Выход в том, чтобы разделить прогоны по вопросу, на который каждый отвечает.

премиум-урок

Продолжение в премиуме: 1 200 ₽ в месяц или 10 000 ₽ в год. Вместе с ним серверные проверки задач и школьные токены AI-коуча.

Оплата пока не подключена: премиум и курсы открываются промокодом.