Прикладной ИИ
Как измерить отдачу от ИИ, не считая сэкономленных часов
Хулиан Медина · Директор SourcingUp и создатель CommerceUp
Я измерял подготовку, исполнение, проверку и доработку. Отдача появляется тогда, когда улучшается полный результат: доступная емкость, качество или время отклика, после учета затрат на поддержание решения.
Я построил сопоставимую ссылку
Возьмите набор похожих задач до и после изменения. Это позволит отделить простые случаи от исключений; Сравнивая их вместе, можно не понять, где работает ИИ. Также запишите минимальное качество, которому должна соответствовать поставка. Создание большего количества черновиков не эквивалентно решению большего количества запросов, если команде нужно исправить их все.
Я включил менее видимые затраты
Помимо лицензирования и использования, требуется время на интеграцию, подготовку данных, обучение и контроль. Первоначальный счет может сравнить стоимость освобожденной мощности с этими затратами. Эта мощность не приводит к автоматической экономии денег: необходимо решить, позволит ли она выполнить больше работы, сократить задержки или перераспределить усилия на другую деятельность.
Решите, что вы будете делать с результатом
Я определил перед пилотом, какой сигнал оправдает продолжение, корректировку или остановку. Например, улучшить время реагирования, сохранив необходимое качество и не увеличивая количество жалоб. Используйте то же определение во время сравнения. При изменении процесса или инструментов проверьте ссылку; Хороший предыдущий результат не демонстрирует текущую производительность.
Чтобы применить это на практике
- Я измерил сопоставимые случаи.
- Подсчитайте корректировки и вмешательства.
- Отделите высвобождаемые мощности от эффективных сбережений.
- Я включил техническое обслуживание в оценку.
Откуда этот взгляд?
Гид Хулиана Медины. Предлагаемые сценарии носят иллюстративный характер; Они не представляют собой измеренные результаты для клиентов. Моя работа в SourcingUp.