Качество · 11 мин
Как тестировать ИИ-решение
Приёмка, регресс на изменениях промптов и моделей, контроль галлюцинаций, метрики качества.
Вывод. ИИ-функция без регрессионного контроля деградирует незаметно.
Блог
Подробные разборы: что произошло, как это устроено, что это значит для российской компании и что делать. Без пересказа пресс-релизов.
Качество · 11 мин
Приёмка, регресс на изменениях промптов и моделей, контроль галлюцинаций, метрики качества.
Вывод. ИИ-функция без регрессионного контроля деградирует незаметно.
Качество · 12 мин
Финансы, медицина, КИИ требуют объяснимости.
Вывод. Выигрывает не самая сильная модель, а самая проверяемая архитектура.
Качество · 12 мин
Метрики качества, доля эскалаций, поведение на краевых случаях, регресс при обновлении модели.
Вывод. Без критериев приёмки решение неотличимо от демо.
Проверка готовности
15 вопросов, 4 минуты. На выходе — где главное ограничение, какие AI-сценарии реалистичны, какой эффект можно ожидать и что закрыть в первую очередь.