Harness Engineer
Модель — компонент. Harness — продукт.
Для команд, у которых демо AI работает, а система в production — нет. Эта роль строит evals, контракты инструментов, трейсы и бюджеты отказов вокруг модели.
В демо работает. Мне нужен тот, кто добьётся прохождения evals.
За что отвечает Harness Engineer
Наборы задач
Проверки, которые задают «хорошо» до того, как кто-либо выпускает.
Контракты инструментов
Песочницы, повторы и трейсы для агентов.
Бюджет отказов
В чём системе можно ошибаться и что её останавливает.
Это человек на фиксированном этапе. Продукты для eval — инструменты, которыми управляет команда. Они не заменяют эту роль. Альтернатива — найм, эта роль или никто на дежурстве.
Где находится эта роль
AI Pivot Squad
Основное место. Squad поставляет систему. Эта роль добивается, чтобы модель проходила evals.
Business Process AI
Evals на агентах рабочего потока, когда в production находится процесс, а не функция продукта.
Когда беспорядок — сгенерированный репозиторий, эта роль остаётся после аудита. Этот аудит — отдельная смета.
Ваши пользователи уже на демо. Сделайте так, чтобы этот путь держался.
Для стартапов, у которых proof of concept уже с пользователями. Основная роль — Harness Engineer. AI Pivot Squad укрепляет путь, куда эти пользователи уже попадают. После себя остаются harness и именной владелец, чтобы следующий релиз не зависел от того, что основатель за ним следит.
Как POC это сработало. Теперь от этого зависят люди, и нам нужно выйти на следующий уровень.
«Следующий уровень» значит: путь проходит evals на реальных задачах, стоимость ограничена, и менять это может кто-то кроме основателя. Нарратив для привлечения инвестиций — не результат поставки.
Harness — продукт.
Наборы задач, бюджет отказов, трейсы и потолок стоимости. Модель остаётся компонентом.
Почините путь, куда попадают пользователи.
Удалите то, у чего нет владельца, если репозиторий был сгенерирован. Остальное дерево не трогайте.
Первый укреплённый путь — этап в четыре недели.
Второго человека с вашей стороны обучают на этом пути. Если обучать некого, остаётся эта роль на отдельном этапе.
- Пока нельзя сказать, что такое «хорошо»: AI Product Manager на неделю discovery, затем инженерия.
- Дерево написали Copilot, Cursor или агент, и никто не возьмёт его в собственность: сначала AI Code Cleanup.
- Уже в production, и сдвигаются затраты или поведение: AI Ops.
- Первый ход — эта роль и укрепление через Squad. Это не Business Process AI. Это не новая платформа.
Частые вопросы
Нет. Модель — заменяемый компонент. Harness — продукт. Универсал, который знает фреймворк, — другой найм.
Нет. Продукты — инструменты, которыми управляет команда. Это engagement: именной человек и фиксированный этап.
Да. Её объём фиксируют отдельно от аудита за $10,000. Аудит покупает оценённый отчёт. То, что остаётся после, — следующая смета.
Сделайте так, чтобы демо проходило evals.
Scoping call на 30 минут достаточно, чтобы понять, является ли эта роль входом или Squad должен идти вместе с ней.