Ощущение «с агентом быстрее» и факт «с агентом быстрее» — разные вещи, и расходятся они регулярно: в опытах, где людей мерили по часам, часть работы замедлялась, а люди при этом были уверены, что ускорились. Поэтому пользу агента стоит мерить на своих задачах: короткой разметкой, журналом времени и слепой проверкой результата.
Считать время — вам, делать черновик — агенту
Хорошо: разложить неделю на задачи и назвать у каждой признаки; вести журнал времени по шаблону; сравнивать два результата вслепую, без подписи «кто делал»; считать, сколько раз пришлось переделывать. Категорически плохо: объявлять «стало быстрее» по памяти, мерить пользу одним настроением, списывать на агента время, которое ушло на поиск инструмента и настройку. Нельзя решать за коллегу, что ему тоже подходит, и выдавать свой замер за общий вывод про всех. Польза агента — свойство задачи и вашей привычки проверять, а не свойство модели вообще.
Шаг 1. Разметить задачи по признакам
Любая работа состоит из кусков, и куски эти не одинаковы. Первый признак — повторяемость: если задача делается в третий раз по тем же правилам, агенту есть что поручить. Второй — проверяемость: результат можно открыть и сравнить, а не «вроде гладко». Третий — цена ошибки: где опечатка стоит письма клиенту, там черновик агента дешевле, чем готовый ответ. Четвёртый — исследование: если сначала надо понять, что вообще требуется, агент часто уводит в сторону, потому что уверенно придумывает постановку за вас. Разметка — это таблица на неделю: задача, признаки, ожидание. Она нужна не для отчёта, а чтобы отличить зону, где ускорение вероятно, от зоны, где его придётся доказывать. Занимает она вечер: дела вы и так помните, а признаки приходится называть впервые.
| Признак | Скорее ускорит | Скорее замедлит |
|---|---|---|
| Повторяемость | дело делалось раньше по тем же правилам | первый раз, правила ещё не сложились |
| Проверяемость | результат виден и сравнивается глазами | верность видна только по последствиям |
| Цена ошибки | черновик, который вы всё равно перечитаете | письмо клиенту или документ без проверки |
| Постановка | требование уже сформулировано | сначала надо понять, что требуется |
| Объём | много однотипных файлов или строк | один абзац, который быстрее написать |
Вот список дел за неделю, как я его помню: [список]. 1) Раздели его на отдельные задачи — не больше двенадцати. Слипшиеся дела раздели на части и назови, по какому признаку делил. 2) По каждой задаче ответь на пять вопросов из таблицы: повторяется ли, проверяется ли результат глазами, какова цена ошибки, сформулировано ли требование, каков объём. 3) Отнеси задачу в одну зону — «вероятно ускорит», «вероятно замедлит», «непонятно». В третью зону пусть попадёт всё, где ты сомневаешься. 4) Для каждой задачи назови, что в ней можно поручить и что нельзя. Не оценивай, сколько времени это сэкономит: числа появятся на следующем шаге.
Разбор: «сложное» не значит «не для агента»
Граница проходит не по сложности, а по тому, есть ли у вас способ проверить результат. Трудная задача с ясным критерием — хороший кандидат: агент сделает черновик, вы примете по критерию. Простая задача без критерия — плохой: «придумай название» выглядит легко, а спор о вкусе займёт больше времени, чем придумать самому. Второе, что видно на разметке, — задачи, которые вы делаете по привычке, хотя они давно повторяются: именно там агент окупается быстрее всего. И третье: разметка почти всегда показывает пару дел, которые проще бросить, чем автоматизировать, и это тоже результат.
Шаг 2. Замер: две недели и журнал времени
Замер строится на парах: одна и та же задача делается с агентом и без него. Если так не выходит, пара составляется из похожих задач: два отчёта одного размера, два письма одному адресату, две выгрузки из одной системы. В журнале пишется не «долго» или «быстро», а минуты: когда начал, когда отдал результат, сколько было переделок. Отдельной строкой — время на постановку задачи: оно тоже ваша работа, и в опытах именно оно съедает выигрыш у тех, кто делает дело впервые. Две недели — минимум, который отсеивает случай: одна удачная генерация ничего не доказывает, а неделя отпуска — тем более. Числа из журнала потом складываются, а не пересказываются: если по памяти «на треть быстрее», а в журнале вышло на десять минут дольше, верен журнал.
Я замеряю задачи две недели. Помоги вести журнал [моих задач], но не выдумывай чисел. 1) Держи таблицу: дата, задача, делал ли с агентом, время начала и конца, число переделок, кто проверял результат. 2) Каждый вечер сверяй записи и спрашивай меня о пропусках. Пропуск оставляй пустым, а не заполняй догадкой. 3) Раз в неделю печатай свод по похожим задачам: пары «с агентом» и «без», по каким признакам они похожи, где выигрыш, где проигрыш. 4) Отдельной строкой — время на постановку задачи и на проверку результата.
Разбор: что считать работой
Время, которое ушло на установку, вход в аккаунт и чтение подсказок, — тоже ваше время, и выбрасывать его из замера нечестно: в первые дни оно и съедает всю экономию. Обратное тоже верно: если агент сделал работу, которую вы всё равно переделали целиком, выигрышем считается ноль, а не полдела. Самая частая ошибка — записывать в выигрыш время, которого не было: «я бы на это убил два часа» — оценка, а не факт. Поэтому в журнале стоит только то, что измерено, а несбывшиеся ожидания идут отдельным списком и потом сверяются с фактом.
Например, тридцать минут в журнале за неделю оказались не одним делом «разобрать почту», а четырьмя: открыть, решить, ответить, переложить. Агент забрал второе и четвёртое, а время на ответ письма осталось вашим — оно и не сократилось.
Шаг 3. Слепая проверка и вывод
Когда результатов набралось десяток, их стоит оценить вслепую: уберите из файлов следы авторства, перемешайте и оцените по одним и тем же критериям — полнота, точность, вид результата. Вслепую оценка честнее: подпись «сделал агент» тянет занизить, а собственный вчерашний текст — завысить. Третий шаг замера — вывод, и он пишется в одну строку: какие задачи уходят агенту, какие остаются за вами, что перепроверять всегда. Строка живёт в файле правил и пересматривается через месяц: задачи меняются, и то, что тормозило вчера, может ускорить завтра — и наоборот.
Вот результаты за две недели [файлы результатов и оценки]: по каждой задаче файл без подписи, кто делал. 1) Перемешай файлы и назови их номерами. Скажи, какие критерии можно проверить глазами, а какие — только по факту. 2) Оцени каждый результат по трём полям: полнота, точность, вид результата (файл, письмо, таблица). Оценки ставь по одной шкале, без ссылки на автора. 3) После оценок сопоставь номера с журналом и назови, где результат с агентом оказался не хуже, а где хуже. 4) Предложи строку правила: что поручаем агенту, что оставляем себе, что проверяем всегда. Не делай выводов шире моих задач.
Почему ощущение скорости обманывает?
Потому что память хранит удачные случаи и стирает переделки. В опыте 2025 года шестнадцать опытных разработчиков решали настоящие задачи в больших чужих проектах: с инструментами они работали примерно на пятую часть дольше, а по опросу считали, что стали быстрее почти на столько же. Дело не в том, что они ошибались в честности, — так устроено внимание: длинная переписка с агентом ощущается работой, даже когда она отнимает время. Второй опыт, полевой и более ранний, с консультантами крупной фирмы, показал ту же границу с другой стороны. На задачах, где модель сильна, результат становился лучше и быстрее, а на одной задаче вне её зоны верных решений стало меньше почти на пятую часть. Отсюда практический вывод: не спрашивайте «ускоряет ли агент», спрашивайте «что именно ускорило у меня» — и отвечайте журналом, а не ощущением.
Замер делают на деле, а не на демо: сравнивают выдачу двух агентов на одной задаче, а повторяющуюся ручную работу видно в автоматизации. Тормозит агент не на медленных ответах, а на поздно замеченной ошибке: как её заметить, остановить, откатить.
Осторожно: замер на своих задачах не превращается в общий вывод. Чужие числа не переносятся на вашу работу: другие задачи, другие инструменты, другая привычка проверять. Не показывайте журнал времени как отчёт о работе сотрудника — это инструмент для себя, и давление цифрами портит данные быстрее, чем любая ошибка модели. И помните, что результат агента всё равно проверяет человек: если проверка съедает больше времени, чем дело, агент в этой задаче не нужен.