Среднее, медиана и процентиль

Сейчас снова занимаюсь метриками на работе: строю Time to Market, Time to Discovery и даже накопительную диаграмму потока. И обратил внимание, что все почему-то любят смотреть на средние значения. То есть среднее время выполнения задачи, средняя скорость или средний простой

Но из-за выбросов среднее не всегда точный инструмент. Мне больше нравится процентиль (еще пишут перцентиль), потому что он точнее описывает наблюдаемый показатель

Процентиль показывает в какое значение укладывается заданная доля наблюдений. Например, 95-й процентиль времени выполнения задач - это срок, за который завершились как минимум 95% задач

Причем можно смотреть на 80%, 95% или 99%. Так мы выбираем какую долю задач хотим охватить оценкой. Например, в какой срок укладывались 80% задач, даже если отдельные задачи занимали гораздо больше времени

Но давайте на примере - бизнес спрашивает «За сколько сделаете эту задачу?»

Мы осознанная команда и у нас есть сроки 11 похожих предыдущих задач в днях: [1, 3, 4, 10, 40, 1, 4, 1, 2, 1, 5]

Для начала посчитаем среднее и получим примерно 6,5 дней. Но 9 из 11 задач мы сделали быстрее, просто одна задача на 40 дней сильно потянула среднее вверх

Тогда попробуем медиану, ее тоже любят использовать. Для этого расставим сроки по порядку и возьмем середину: [1, 1, 1, 1, 2, 3, 4, 4, 5, 10, 40]

Посередине стоит тройка - это и есть наша медиана. Но обещать три дня тоже рискованно, почти половина задач заняла больше времени

Поэтому полезно посмотреть на процентили. Они показывают, в какой срок уложилась заданная доля задач

В нашем примере: • за 4 дня завершились 8 из 11 задач, примерно 73%; • за 5 дней - 9 из 11, примерно 82%

На языке статистики это: 70-процентиль - 4, 80-процентиль - 5

То есть мы знаем к какому сроку завершилась нужная нам доля задач. 70 процентов всех задач мы успели сделать за четыре дня, а 80 процентов задач сделали за пять.

И теперь бизнесу можно спокойно сказать: «В прошлых похожих задачах мы примерно в 80% случаев укладывались в пять дней. Предлагаю ориентироваться на этот срок»

Поэтому пробуйте использовать процентили для своих метрик. Они хорошо дополняют среднее и медиану. Кстати, медиана это 50-й перцентиль