Глава 8 · 90 мин · бесплатно
Шипим промпт вместе с eval
День 8. Завтра в 9 утра совет директоров, а на втором мониторе открыта презентация Матео. Слайд 4: «Sentinel scribe — расширение пилота, 12 → 40 клиник». Новый промпт работает. Точность выросла, правило про дозировки держится на кейсе с метформином, структурированный вывод парсится чисто, четыре лжи названы и защищены, и лестница инъекций из вчера не сломала системный промпт. Кай праздновал с обеда. Потом подходит Матео, смотрит на слайды и задаёт единственный вопрос, который возвращает всех на место: «Откуда мы знаем, что всё не сломается, когда кто-нибудь в следующий раз что-нибудь подправит?» Вот о чём сегодня. К 18:00 ты шипаешь промпт, его 5-кейсовый eval и JSON последнего успешного прогона как ОДИН версионированный артефакт, который Матео может воспроизвести на своём ноутбуке за 30 секунд. Всё, что ты выучил в главах 1–7, схлопывается в одну форму: промпт-как-версионированный-артефакт. Если не можешь воспроизвести eval и увидеть, как он проходит, — ты ничего не зашипал.
Чему вы научитесь
- Относись к промпту + eval + last-passing-run как к единому неделимому артефакту, а не трём файлам в папке
- Веди многоходовый диалог к версионированному манифесту промпта с чистой схемой
- Выбирай regression-on-replay вместо ревью человеком как единственный сигнал для деплоя под давлением
- Отличай настоящее описание PR от «вайб-описания» — и называй, чем одно отличается от другого
- Пиши 3 детерминированных eval-кейса-триггера отката, которые срабатывают без участия человека
- Выставляй уровень рассуждений для ночных регрессионных прогонов, не сжигая бюджет на стоимость
Старая структура Дарьи против твоей новой.
Матео открывает папку в Notion, которую оставила Дарья: там просто файлы промптов. `v3_final_FINAL_works_pls_no_touch.md`, `v3_final_FINAL_v2.md`, `v3_final_FINAL_pleasework.md`. Ты собираешься закоммитить новую структуру — одна папка на промпт, три файла в связке. Матео хочет знать, какая именно строчка изменения несёт нагрузку.
Что предстоит ответить
Прочти diff. Какое изменение является ключевым — тем шагом, который заставляет «regression on replay» работать по-настоящему?
Сохраните прогресс и получите сертификат
Это начало главы, продолжить можно бесплатно. 7 заданий · автопроверка · около 90 мин до сертификата. Бесплатно, без карты.
Без пароля. Чтобы войти с телефона, запросите код на почту на странице входа.
Уже начинали? Войдите по коду из письма
