Вопросы RFP по AI-агентам, которые отделяют доказательства от презентации
Банк вопросов покупателя для RFP по AI-агентам: соответствие процессу, контрольные точки, безопасность, пилот, наблюдаемость, владение, коммерческие условия и формат ответа.
Northstar
Northstar - студия AI agent systems. Алекс ведёт engineering и продукт, Джордан - operations и fit процессов. Делаем production-агентов в tools, которыми команда уже пользуется.
Alex Morgan · LinkedIn · Northstar
Прямой ответ
Используйте RFP, чтобы потребовать письменные доказательства соответствия процессу, контроля, безопасности, наблюдаемости, владения и коммерческих условий.
Любой отсутствующий письменный ответ рассматривайте как сигнал «стоп», пока вендор не предоставит доказательства.
OpenAI здесь полезен, потому что говорит: агенты уместны там, где детерминированные и основанные на правилах подходы уже не справляются.
Значит, RFP должен проверять, действительно ли процессу нужно агентное поведение.
Если процесс по-прежнему решается движком правил, не давайте процедуре скатиться в продающую презентацию.
Что должен выявить пакет
У пакета одна задача.
Он должен показать, может ли вендор поставить контролируемую систему в реальной среде.
IBM описывает развёртывание как задачу реальной среды с подключёнными бизнес-системами.
Dataiku формулирует это ещё жёстче.
Говорится, что агентам, готовым к эксплуатации, нужны живые пользователи, реальные данные, мониторинг, контроль доступа, откат и определённые метрики успеха.
Именно этот стандарт должны выявлять вопросы.
Основной банк запросов
| Артефакт, который запросить | Что требовать | Почему это важно |
|---|---|---|
| Карта процесса | Попросите пошаговую карту первого рабочего процесса | Показывает, понимает ли вендор форму процесса |
| Матрица доступа | Попросите системы, роли и уровни прав | Делает принцип минимально необходимых прав видимым |
| Приёмочный тест | Попросите входы, ожидаемые выходы и пороги прохождения | Превращает пилот в проверяемый результат |
| План отката | Спросите, как процесс останавливает или отменяет рискованные действия | Показывает сдерживание, а не оптимизм |
| Инвентарь передачи | Попросите документы, промпты, наборы для оценки и инструкции по эксплуатации | Показывает, сможет ли покупатель владеть системой позже |
| Допущения по стоимости | Попросите допущения по использованию, повторам, поддержке и масштабу | Делает стоимость первого года сопоставимой |
| Исключения | Спросите, что явно вне объёма | Предотвращает расползание объёма во время сборки |
| Окно поддержки | Спросите, как долго вендор остаётся на связи после запуска | Делает владение конкретным |
Как оценивать ответы
Не опирайтесь на размытое «чутье».
Используйте простую модель: принять / проверить / остановить.
| Сигнал | Что это значит |
|---|---|
| Принять | Вендор называет процесс, контрольные точки, доступ к данным, тест и передачу без оговорок |
| Проверить | Вендор звучит правдоподобно, но оставляет важные пункты размытыми |
| Остановить | Вендор не может письменно описать контроль, владение или приёмочный тест. Запросите недостающие доказательства, прежде чем двигаться дальше. |
NIST здесь полезен, потому что рассматривает AI как задачу доверия и управления рисками.
OWASP тоже полезен: у агентных систем своя поверхность безопасности.
Если ответы не снижают риск, RFP не выполняет свою работу.
Красные флаги в письменных ответах
| Гипотетический слабый ответ | Почему это проблема |
|---|---|
| «Разберёмся с процессом позже» | Вендор продаёт до понимания процесса |
| «Агент сделает всё от начала до конца» | Вендор не назвал модель контрольных точек |
| «Для пилота дадим широкий доступ» | Не соблюдается принцип минимально необходимых прав |
| «Логи необязательны» | Вы не сможете восстановить сбой |
| «Документация будет после запуска» | Покупатель может оказаться в зависимости от вендора |
| «Мы обычно не пишем приёмочные тесты» | Вендор не готов доказать поведение в рабочей среде |
Gartner предупреждает, что agent washing реален.
Поэтому RFP не должен поощрять отполированный язык.
Он должен поощрять доказательства.
Используйте вместе со связанными страницами
- Как написать RFP по AI-агентам - структура документа.
- Главные вопросы AI-вендорам на живом созвоне - живой созвон.
- Как нанять агентство AI-агентов - полный цикл найма.
- Как сравнивать AI-агентства - финальное сравнение финалистов.
Как сюда встраивается Northstar
Northstar рекомендует держать банк вопросов привязанным к доказательствам готовности к эксплуатации.
Пакет - это комплект материалов для контроля, а не маркетинговый документ.
Если нужен структурированный следующий шаг, принесите один рабочий процесс на страницу решений для ограниченного по объёму разбора готовности к эксплуатации.
FAQ
Нет. Для многих узких процессов достаточно короткого брифа и нескольких письменных ответов. Используйте формальный RFP, когда закупке нужны повторяемость или дисциплина сравнения.