Что проверяется
Процесс и границы
Bounded task (ограниченная задача), вход, результат, owner, stop conditions (условия остановки), исключения и цена ошибки.
State (состояние) и memory (память)
Состояния, checkpoint (контрольная точка), resume, TTL, privacy, versioning и очистка данных.
Tools (инструменты) и permissions (права доступа)
Schemas (схемы), validation, least privilege (минимальные привилегии), secrets (секреты), approvals (подтверждения), idempotency (идемпотентность) и audit (аудит).
Quality и evals (оценки качества)
Task success (успешность задачи), trajectory (траектория выполнения), regression dataset (регрессионный набор данных), adversarial cases и human review.
Надёжность
Timeouts (тайм-ауты), retries (повторные попытки), limits, fallback (резервный сценарий), partial failure (частичный сбой), rollback (откат) и kill switch (аварийное отключение).
Эксплуатация и стоимость
Traces (трассировки), alerts (оповещения), prompt/tool versions, cost per task (стоимость задачи), ownership и incident runbook (операционная инструкция).
Результат review
| Материал | Что получает команда |
|---|---|
| Agent Workflow (рабочий процесс агента) Canvas | процесс, state (состояние), tools (инструменты), side effects (побочные действия), approvals (подтверждения) и trust boundaries |
| Реестр рисков | приоритет, вероятность, влияние, evidence (подтверждение) и ответственный |
| Readiness (готовность) score | оценка по quality, security, reliability (надёжность), observability (наблюдаемость) и operations |
| План действий | быстрые исправления, blockers запуска и roadmap на 30–90 дней |
Что подготовить
- карту процесса и критерии завершённой задачи
- схему state (состояние), tools (инструменты), permissions (права доступа) и approval (подтверждение) gates
- eval dataset (набор данных для оценки) и результаты regression-прогонов
- traces (трассировки) с версиями prompt, модели и tools (инструменты)
- список side effects (побочные действия), retries (повторные попытки) и idempotency (идемпотентность) rules
- runbook (операционная инструкция), rollback (откат) и kill switch (аварийное отключение)