Что наблюдать, пока агент работает с задачами команды
Руководитель проектов тратит время на задачи команды, отчёты заказчику и протоколы встреч. Выберите одну из этих линий и следите за ней несколько недель, не меняя остальное.
Полезно записывать не только время, но и качество: сколько раз заказчик вернул отчёт с вопросами, сколько договорённостей со встреч потерялось. Именно протоколы встреч — хорошая точка для сравнения, потому что до агента вы вели их руками и хорошо помните, сколько это стоило.
Не пытайтесь охватить сразу портфель проектов. Один проект, одна линия работ и общий для двух периодов список вопросов дают честное сравнение.
Как сравнить работу до и после
Возьмите две сопоставимые недели без отпусков и сдачи крупного этапа. На первой ведите отчёт заказчику как обычно и замеряйте время. На второй доверьте черновик агенту, но проверку делайте сами и тоже замеряйте.
Сравнивайте не черновик с чистой работой, а полный цикл: подготовка, проверка, правки, отправка. Если цикл стал короче и вопросов от заказчика не прибавилось, польза есть. Если выросло число правок, начинайте с уточнения инструкции агента.
- Опишите задачу и результат, который считается готовым.
- Замерьте время текущего способа за пару недель.
- Подключите агента на той же задаче и замерьте цикл целиком.
- Сравните время, число правок и вопросы заказчика.
Какие ловушки искажают оценку
Главная ловушка — считать только время генерации. Агент выдал текст за минуту, а вы потратили полчаса на проверку фактов по трекеру. Эти полчаса и есть настоящая цена.
Вторая ловушка — перенос зависящего от настроения. Месяц, когда команда работала спокойно, выглядит как победа агента. Сравнивайте периоды сходной загрузки и отмечайте внешние причины рядом с цифрами.
Третья — игнорировать мнение команды. Если разработчики жалуются, что итоги встреч стали обезличенными, это сигнал независимо от сэкономленного времени.
Хороший способ проверки — попросить коллегу из другого проекта прочитать итог и сказать, что ему непонятно. Если непонятно многое, экономия мнимая.
Итоговая проверка перед выводом
Прежде чем говорить, что агент помогает, ответьте себе на несколько вопросов.
Если большая часть ответов отрицательная, это не провал: вы просто нашли задачу, для которой агент пока не подходит, и можете взять другую.
- Совпадают ли условия сравниваемых периодов.
- Учтено ли время на проверку и правки.
- Не ухудшилось ли качество для заказчика.
- Что говорит команда, а не только вы.
- Какие ошибки повторяются и записаны ли они.
Как с этим работает Coagent
Coagent ставится на сервер вашей компании и подключается к 1С, Битрикс24 и почте. Агент готовит результат, а важное действие выполняется после подтверждения человека.
Сравните один цикл отчёта заказчику с агентом и без него — этого достаточно, чтобы увидеть реальную картину.