Такие проверки я делаю на своих системах регулярно. Разбор по этой теме есть и в канале: пост в канале.
Советов про автоматизацию на ИИ-агентах вокруг много, и звучат они уверенно. Я взял три самых частых и спросил про каждый: какая записанная цифра или дата его подтверждает. Ниже способ проверки, результат, место, где совет сработал, и калькулятор окупаемости.
Три совета, которые повторяют все
Коротко: это три разных утверждения, и каждое звучит как факт, хотя на старте это гипотеза.
Вот они:
- *Один удачный прогон значит, что агент работает.*
- *Агент может сам проверять свой результат.*
- *Экономия от агента очевидна, считать её не нужно.*
Мысль простая: пока у утверждения нет числа или даты, это ощущение. Доказательство - вопрос, который можно задать любому совету: какая запись его подтверждает. Пример - сцена из начала. Пустая панель после ночного прогона может значить ноль ошибок, а может ноль работы. Без записи о том, сколько раз агент реально отработал, отличить одно от другого нельзя.
Как проверял
Коротко: каждому совету я задал один вопрос и проверил его на трёх своих системах, у которых есть даты и статусы.
Системы такие:
- Конвейер новостей об ИИ (ночью собирает и проверяет новости об ИИ и готовит пост дня для Telegram). Работает по расписанию с 30 августа 2026, два живых прогона подряд.
- Фриланс-Оператор (агентная система для бирж: находит заказ, пишет отклик с рабочим демо и ведёт до предоплаты). Этап 1 собран и проверен запуском 13 августа 2026.
- Джарвис (главный агент-оркестратор: живёт на сервере, управляется из Telegram и руководит остальными моими системами). По статусу на 10 августа 2026 работает вживую и поднимается сам, закрыты фазы 0-8 и ступень 9.1.
Правило проверки: если по утверждению есть дата, число прогонов или явный статус, оно подтверждено на этом уровне. Если есть только моё впечатление, это гипотеза, и я так её и называю.
Про слово объём нужно сказать честно. У конвейера два прогона подряд, у Фриланс-Оператора один запуск первого этапа. Это не тысячи прогонов. Поэтому там, где объём нужен для вывода, я показываю арифметику и не выдаю её за замер. Как я собирал агентов раньше, есть в дневнике сборки.
Если хочешь от разбора перейти к своей задаче, следующий шаг - Витрина кейсов.
Что вышло с советом про один удачный прогон
Коротко: совет сработал наполовину. Прогон доказывает, что цепочка собирается и запускается, но не что она работает стабильно.
Мысль: один прогон отвечает на вопрос, взлетает ли конструкция. Он не отвечает на вопрос, как она ведёт себя на повторах.
Доказательство - мои статусы. У Фриланс-Оператора этап 1 проверен запуском 13 августа 2026. По этому этапу вопрос закрыт. Остальную цепочку (отклик, переписка до предоплаты, ТЗ, сборка, сдача) запуском я не подтверждал, поэтому в статусе пишу этап 1, а не система работает. У Джарвиса статус записан по фазам, одной галочкой он не обозначен.
Где совет сработал: запуск как проверка сборки. Он закрывает вопрос, стартует ли собранный этап вообще, и без него я бы не знал даже этого. У конвейера два живых прогона подряд. Это больше, чем один, но ряда, на котором можно считать долю сбоев, ещё нет. Для себя я называю это началом ряда.
Что вышло с советом, что агент проверит себя сам
Коротко: как первый фильтр совет работает, как последняя инстанция нет.
Мысль: проверка внутри агента убирает часть ручной работы, но решение остаётся за человеком.
Доказательство - устройство конвейера. Ночью он обходит источники, проверяет факты, выбирает тему дня и пишет пост. Утром я открываю панель и читаю готовый пост, источники сам не обхожу. В этом самопроверка сработала: она экономит мне разбор сырья.
Теперь про границу. НЕВОД (мой контент-завод: из одной темы пишет статью и посты под каждую площадку и публикует после моей кнопки) устроен так же: публикация идёт только после моей кнопки. Это моё решение, а не вывод из замера. Замера доли ошибок, которые ловит самопроверка агента, у меня нет, и называть такую цифру я не буду.
Пример, где это важно: агент может уверенно отчитаться об успехе, потому что проверял по тем же данным, по которым писал. Отдельная история - что вообще система получает право трогать. Это я разбирал в статье как проверить локальные нейросети до доступа к вашим данным.
Что вышло с советом, что экономию считать не нужно
Коротко: совет не выдержал. Экономия состоит из нескольких чисел, и самое коварное из них - время проверки результата.
Мысль: экономия агента равна времени на задачу руками минус время на проверку, умноженному на число прогонов, минус поддержка.
Доказательство - арифметика ниже. Минута проверки на одном прогоне незаметна, а на сорока прогонах в месяц это сорок минут. На объёме именно проверка решает, окупится агент или нет.
Пример - мои же системы. Честной цифры экономии в часах по конвейеру я здесь не называю: в формулу нужны замеры ручной работы до запуска и времени проверки после, а в этот разбор я их не принёс. Лучше пустая строка, чем придуманное число.
Почему эти советы живут, хотя не держатся
Коротко: они верны ровно в тот момент, когда их читают, то есть при запуске.
Причин три:
- На демонстрации идёт один прогон, и он зелёный. Для одного прогона совет про удачный запуск справедлив.
- Самопроверка выглядит убедительно в отчёте: в нём нет ни сомнений, ни вопросов.
- Экономию считают в момент, когда агент только заработал. Время проверки тогда принимают за ноль, потому что результат ещё не приходилось разбирать.
Каждая из причин сводится к одному: решение принимают по первым впечатлениям, а цена ошибки проявляется позже, на повторах.
Что делать вместо
Коротко: заменить каждый совет проверяемой записью.
- Вместо один прогон - значит работает: писать статус по этапам и с датой, как у Фриланс-Оператора. Этап 1 проверен 13 августа 2026, дальше не заявлено.
- Вместо агент проверит себя: считать самопроверку первым фильтром и оставить человека на последнем шаге, как в конвейере и НЕВОДе.
- Вместо экономия очевидна: посчитать формулой до сборки, а после запуска заменить допущения замерами.
Выбирать задачу для автоматизации агентом тоже лучше по расчёту. Как я подходил к выбору способов, есть в разборе про нейросети в бизнесе.
Где эта схема тоже врёт
Коротко: формула ломается в четырёх случаях, и их стоит знать заранее.
- Если проверка занимает столько же, сколько ручная работа, или больше, агент ничего не экономит. Дальше можно не считать.
- Если задача редкая и прогонов мало, сборка не отобьётся. Ниже в таблице видно, как это выглядит.
- Если освободившееся время ни во что не превращается, деньгами экономию считать нельзя. Считай её часами и честно называй часами.
- Если поддержка растёт вместе с объёмом, число M из формулы придётся пересчитывать заново.
Что ты уносишь
Коротко: формула из трёх строк, таблица с примером и порядок, как подставить свои числа.
Обозначения.
- T - минуты на задачу руками.
- P - минуты на проверку результата агента.
- N - число прогонов в месяц.
- S - стоимость часа в рублях.
- M - поддержка агента в месяц, в рублях (часы поддержки умножить на S).
- B - вложения в сборку, в рублях (часы сборки умножить на S).
Формулы.
- Выгода в месяц = (T - P) × N / 60 × S - M
- Окупаемость в месяцах = B / Выгода в месяц
- Минимум прогонов, чтобы выгода была не меньше нуля = M × 60 / ((T - P) × S)
Пример. Условные числа для показа арифметики, это не мои замеры: T = 30 минут, S = 1000 ₽, поддержка 2 часа в месяц (M = 2000 ₽), сборка 20 часов (B = 20 000 ₽). В строке A проверка и поддержка приняты за ноль, как их считают в момент запуска.
| Вариант | T | P | N | Выгода в месяц, ₽ | Окупаемость, мес. | |---|---|---|---|---|---| | A. По ощущению: проверка и поддержка ноль | 30 | 0 | 40 | 20 000 | 1 | | B. С замером проверки и поддержкой | 30 | 15 | 40 | 8 000 | 2,5 | | C. Проверка почти как ручная работа | 30 | 27 | 40 | 0 | не окупится | | D. Как B, но 10 прогонов вместо 40 | 30 | 15 | 10 | 500 | 40 |
Разберём строку B по формуле: (30 - 15) × 40 / 60 × 1000 - 2000 = 10 000 - 2000 = 8000 ₽ в месяц, и 20 000 / 8000 = 2,5 месяца.
Что видно в таблице. Между A и B срок вырос в два с половиной раза только из-за того, что проверку и поддержку учли. Между B и D тот же агент, но объём меньше в четыре раза, и срок вырос с 2,5 до 40 месяцев. В строке C выгода съедена поддержкой целиком. Для варианта B минимум прогонов по третьей формуле: 2000 × 60 / (15 × 1000) = 8. На восьми прогонах в месяц агент только покрывает свою поддержку.
Как подставить свои числа.
- Возьми несколько реальных выполнений задачи руками и запиши среднее время: это T.
- Прогони агента и засеки, сколько занимает разбор его результата: это P. Если P не меньше T, остановись, агент не экономит.
- Оцени N на ближайший месяц по фактической частоте задачи.
- Выбери S и переведи часы поддержки и сборки в рубли: M и B.
- Посчитай выгоду по первой формуле. Если она не больше нуля, окупаемости нет. Иначе дели B на выгоду.
- Сверь N с минимумом из третьей формулы. Если N рядом с минимумом, результат держится на допущениях.
Полную версию, калькулятор окупаемости ИИ-агента, который считает, за сколько месяцев агент вернёт вложенное на твоих цифрах, можно получить в Telegram за кодовое слово. Как - в последнем разделе.
От расчёта к примерам можно перейти в Витрине кейсов.
Посчитать на своих цифрах
Коротко: калькулятор окупаемости ИИ-агента я пришлю в личку.
Он считает, за сколько месяцев агент вернёт вложенное, на твоих цифрах. Напиши мне в личку кодовое слово «ИИ-АГЕНТОВ ОБЪЁМЕ», и я его отправлю.