← На головнуEnglish version

Методологія: як ми рахуємо ефект і які цифри публікуємо

Автор: Богдан Гончарук, CEO · 7 років у міжнародному працевлаштуванні, 4 роки в ШІ

Коротко

Кожна цифра на сайті BOOOST Labs має джерело і рівень надійності: від незалежно перевіреного результату (V1) до чернетки (V5), яку ми не публікуємо. Для кожної метрики називаємо формулу, стан до запуску (базову лінію) і період. Ринкові дослідження цитуємо з базою відсотка, прогнози позначаємо як прогнози, а окупність подаємо як оцінку з відкритими припущеннями.

Принцип

На ринку ШІ-послуг багато гучних відсотків без визначень: незрозуміло, від чого рахували, за який період і хто перевіряв. Ми йдемо іншим шляхом. Біля кожної цифри має бути видно, звідки вона, що саме вимірює і наскільки їй можна довіряти.

Ця сторінка описує правила, за якими ми рахуємо і публікуємо цифри: на сайті, в пропозиціях і у звітах клієнтам. Вона стосується і наших власних результатів, і ринкових досліджень, на які ми посилаємося. Якщо цифра не проходить ці правила, ми її не публікуємо, навіть коли вона виглядає переконливо.

Наскільки можна довіряти цифрі: рівні V1–V5

Не всі цифри однаково надійні. Одну перевірила незалежна сторона, іншу назвав сам клієнт, третя — лише розрахунок. Тому ми ділимо цифри на п'ять рівнів, від найнадійнішого V1 до V5, який не публікуємо. Коли наводимо власну цифру, вказуємо її рівень.

РівеньЩо за цим стоїтьПриклад формулюванняЯк подаємо
V1 · перевірено незалежнорезультат клієнта, який перевірила третя сторона; відомо, що було до запуску, що стало після, за який період і як рахували«Час першої відповіді скоротився з 18 до 4 хвилин за три місяці» + посилання на перевіркуяк факт
V2 · підтверджено клієнтомклієнт письмово погодив цифру чи відгук, але незалежно їх ніхто не перевіряв«За даними клієнта, менеджери витрачають на заявки вдвічі менше часу»з поміткою «за даними клієнта»
V3 · наш вимірми самі виміряли на тестах або за журналами системи«На 200 тестових питаннях агент правильно відповів на 180»разом з описом, як міряли
V4 · розрахунокоцінка за формулою чи прогноз, а не виміряний результат«Окупність — близько 4 місяців, якщо агент забере 80 годин роботи на місяць»завжди як «оцінка» і з припущеннями
V5 · не перевіреночернетка, цифра без джерела або без методу—не публікуємо

Приклади у таблиці ілюструють формулювання, це не результати наших клієнтів.

Словник метрик

Кожна метрика — це дріб: що рахуємо, від якої загальної кількості і за який період. Нижче — метрики, які ми використовуємо для агентів і автоматизацій.

МетрикаФормулаНа що зважати
Частка звернень, вирішених без людинирозмови, завершені агентом без передачі людині ÷ усі розмови, в яких брав участь агентокремо рахуємо «підтверджено» (клієнт сам підтвердив) і «припущено» (не просив людину і не повернувся з тим самим питанням протягом 24 годин)
Частка передач людинірозмови, передані людині ÷ усі розмови з агентомвисока частка не завжди погано: іноді так і має бути
Частка виправлених відповідейвідповіді, які людина виправила або визнала хибними ÷ усі перевірені відповідірахуємо на вибірці, яку людина перевіряє вручну
Час першої відповідімедіана часу від першого повідомлення клієнта до першої відповідімедіана, а не середнє, щоб кілька довгих випадків не спотворили картину
Години ручної роботи на місяцькількість проходів процесу × середній час на один прохідміряємо до і після запуску тим самим способом
Частка збоїв потокуневдалі запуски ÷ усі запуски за періодокремо — збої, які призвели до втрати даних

Базова лінія і період вимірювання

  • До запуску фіксуємо стан «до» за тими самими формулами. Тривалість — щонайменше 2–4 тижні.
  • Результат «після» рахуємо не раніше ніж через 4 тижні роботи на повному обсязі.
  • Порівнюємо співставні періоди: з урахуванням сезону, акцій і зміни обсягу звернень.
  • Якщо одночасно із запуском змінилося щось інше (нові співробітники, ціни, продукт), так і пишемо поруч із цифрою.

Що ми не вважаємо результатом

  • Демо і тести на підготовлених прикладах.
  • Пілот на частині потоку, поданий як результат постійної роботи.
  • Змодельовану економію, подану як фактичну.
  • Відсоток без абсолютних значень і без цифри «до запуску».
  • Ефект, який може пояснюватися сезоном чи іншими змінами, без застереження.

Правила для цифр

  • Завжди вказуємо період і базу, від якої рахуємо.
  • Не змішуємо результати пілоту й постійної роботи.
  • Не називаємо змодельовану економію фактичною.
  • Показуємо абсолютні значення поруч із відсотками.
  • Не показуємо логотип чи назву клієнта без його дозволу.
  • Пишемо про обмеження, а не ховаємо їх.

Як ми цитуємо ринкові дослідження

  • Називаємо базу відсотка: «респонденти опитування», «опитані компанії» чи «підприємства ЄС» — це різні речі.
  • Прогноз позначаємо як прогноз, з автором і датою.
  • Посилаємося на остаточну рецензовану версію дослідження, а не на ранній препринт, і на свіже видання щорічних звітів.

Приклад того, чому база важлива. 88% респондентів McKinsey повідомляють, що їхні організації регулярно використовують ШІ хоча б в одній бізнес-функції (The state of AI 2025, 1 993 респонденти; у виданні 2026 — «майже дев'ять із десяти»). Серед підприємств ЄС з 10+ працівниками ШІ використовували 20,0% (Eurostat, 2025). Цифри не суперечать одна одній: перша — опитування з перевагою великих компаній, друга — офіційна статистика по всіх підприємствах.

Ще приклад. Ранній препринт дослідження про ШІ-асистента в підтримці давав +14% і +34% для новачків на 5 179 операторах. У рецензованій версії (Quarterly Journal of Economics, 2025) — +15% у середньому і близько +30% для менш досвідчених, 5 172 оператори. Ми цитуємо другу.

Як рахуємо окупність

Місячна економія = години ручної роботи на місяць × вартість години − супровід − оплата моделі − платформа. Строк окупності = разова вартість ÷ місячна економія.

До запуску це оцінка (рівень V4) з припущеннями, які ви бачите і можете змінити. Після запуску ми замінюємо її виміряними даними за формулами зі словника метрик. Приклад розрахунку — у гайді «Скільки коштує ШІ-агент і автоматизація».

Обмеження і конфлікт інтересів

  • Ми вимірюємо власну роботу, тому зацікавлені в хороших цифрах. Саме для цього формули відкриті, а сирі дані для розрахунку лишаються в клієнта.
  • «Припущене» вирішення може бути завищеним: клієнт міг просто піти, не отримавши відповіді. Тому ми показуємо його окремо від підтвердженого.
  • Невелика кількість звернень дає нестабільні відсотки. Малі вибірки подаємо в абсолютних числах.

Оновлення і виправлення

Біля кожної сторінки з цифрами стоїть дата останньої перевірки. Ринкові дані переглядаємо, коли виходить нове видання джерела.

Знайшли помилку в цифрі чи посиланні? Напишіть на boost.info.ai@gmail.com — відповідаємо протягом 5 робочих днів. Виправлену цифру позначаємо датою зміни.

Питання

Чому на сайті немає кейсів із цифрами?

Ми публікуємо результат клієнта лише з його письмового дозволу, з базовою лінією і періодом (рівень V1 або V2). Кейси з'являться тут, коли пройдуть це правило.

Чи гарантуєте ви економію?

Ні. Ми даємо оцінку з відкритими припущеннями, а після запуску міряємо фактичний ефект тими самими формулами.

Як перевірити, що частка «вирішено без людини» не завищена?

Ми рахуємо окремо підтверджене і припущене вирішення, показуємо абсолютні числа і даємо вам доступ до даних, з яких зроблено розрахунок.

Чому в різних дослідженнях такі різні цифри про використання ШІ?

Бо в них різна база: одні опитують респондентів, здебільшого з великих компаній, інші рахують усі підприємства країни. Ми завжди називаємо базу поруч із відсотком.

Читайте також

  • Скільки коштує ШІ-агент і автоматизація бізнесу у 2026 році
  • ШІ-агенти для бізнесу: підтримка і продажі
  • Автоматизація бізнес-процесів з ШІ для компаній

Обговоримо ваш процес?

Почнемо з короткого брифу — відповімо з оцінкою.

Ваша наступна велика ідея

Почнімо
з вашої ідеї.

Опишіть, що хочете створити. Ми зв’яжемося з вами найближчим часом.

Ми відповімо на вказаний контакт. Нічим більше не турбуємо.