Вы провели опрос вовлеченности и лояльности сотрудников. В результате Happy Index составил 70% и превысил значение прошлого года. Однако в исследовании участвовали не все сотрудники. Можно ли верить этой цифре и утверждать, что проведенная вами работа за прошедший год действительно была успешной? Давайте разбираться.
Что такое статистическая погрешность
Одна из метрик точности результатов исследования — статистическая погрешность рассчитанных показателей. Это максимальная величина (в абсолютном или относительном выражении), на которую истинное значение исследуемого показателя может отличаться от его расчетного значения с заданной вероятностью. Статистическая погрешность будет равна нулю только в том случае, если в исследовании приняли участие все без исключения респонденты. Тогда истинное значение анализируемого показателя всегда равно его расчетному значению. Чем больше процент выборки (т. е. доля респондентов по отношению к общему объему целевой аудитории), тем меньше статистическая погрешность и тем точнее результаты исследования.
Почему небольшим компаниям нужен максимальный охват
На величину статистической погрешности (при одинаковом проценте выборки) также влияет общий объем целевой аудитории. При исследовании больших групп статистическая погрешность ниже, чем для малых групп.
Предположим, исследования проводились в компаниях с разной численностью персонала. В каждом из них приняли участие 60% от общего числа сотрудников. Допустим, Happy Index, который показывает долю одновременно вовлеченных и лояльных сотрудников, в каждой компании составил 70%. Насколько мы можем доверять данной оценке?
Расчеты показывают, что с вероятностью 95% истинное значение Happy Index лежит в диапазоне (см. Диаграмму 1):
- от 69,6% до 70,4% в компании с общей численностью 20 000 сотрудников (статистическая погрешность — 0,4 п.п.);
- от 57% до 82% в компании с общей численностью 20 сотрудников (статистическая погрешность — 13 п.п.).
Получается, если в прошлом году Happy Index составлял 65%, то в компании численностью 20 000 человек мы смело можем утверждать, что значение показателя за год возросло. А в компании численностью 20 человек мы так утверждать не можем: объем выборки для этого недостаточный. Таким образом, чем меньше общая ЦА, тем больший процент выборки нужен для обеспечения требуемого уровня точности результатов.
В Таблице 1 показано, какой процент сотрудников должен пройти опрос, чтобы получить нужную точность, в зависимости от численности компании. Значения подходят для оценки погрешности Happy Index и других показателей, рассчитанных по шкале от 0 до 100%.
Например, в вашей компании 500 сотрудников. Вы допускаете погрешность не больше 2,5 п.п.. Получается, опрос должны пройти минимум 75%, то есть 375 сотрудников.
Почему 61% — минимальный процент выборки для участия в сертификации «Отличное место для работы»
Сертификат «Отличное место для работы» подтверждает, что Happy Index компании входит в топ-25% по бенчмарку России или отрасли (т. е. в верхнем квартиле). По нашим многолетним наблюдениям, границы квартилей в бенчмарках разных отраслей обычно отличаются друг от друга не менее, чем на 5 п.п. Это значит, что погрешность измерения не должна «съедать» эту разницу: если Happy Index измерен с точностью ±2,5 п.п., компания почти наверняка остается в своем квартиле — ее наблюдаемое место в бенчмарке совпадает с истинным.
Теперь посмотрим, какой процент участия дает такую точность. Медианная численность компаний, которые проводят исследование вовлеченности, — около 1 000 сотрудников. Для компании такого размера погрешность не более 2,5 п.п. достигается, если опрос прошли минимум 61% сотрудников (см. Таблицу 1). Отсюда и порог 61% участия. Это уровень, при котором мы можем доверять положению типичной компании-участницы в бенчмарке.
В бенчмарки входят компании разной численности, но порог для всех единый — мы рассчитали его для компании среднестатистического размера, делая подход универсальным. При этом небольшим компаниям мы рекомендуем не ограничиваться минимумом — об этом ниже.
Какой охват нужен вашей компании
Целевая аудитория менее 1 000 сотрудников
Для обеспечения приемлемого уровня точности результатов исследования (погрешность не более 2,5 п.п.) процент выборки должен составлять:
- для компаний, численностью 500 сотрудников — не менее 75%;
- для компаний, численностью 100 сотрудников — не менее 94%.
Поэтому небольшим компаниям мы советуем добиваться более высокого охвата, чем 61%. Иначе погрешность будет слишком велика, чтобы принимать верные управленческие решения по результатам опроса.
По Таблице 1 можно определять целевой охват не только по компании целиком, но и по отдельным подразделениям. Возьмите численность дирекции или департамента и вы увидите, какая выборка нужна, чтобы доверять результатам по этому подразделению.
Целевая аудитория более 1 000 сотрудников
При росте численности сотрудников требования к проценту выборки снижаются. Однако, какой бы крупной ни была компания, мы не рекомендуем снижать фактическую выборку ниже 61%. Для достоверности результатов крайне важно обеспечить не только целевой объем, но и репрезентативность выборки респондентов.
Представьте производственную компанию, где опрос прошли в основном офисные сотрудники, а рабочие цехов — почти нет. Формально выборка достаточная, но картина искажена: вы измерили вовлеченность офиса, а не компании.
В крупных компаниях общая совокупность сотрудников практически всегда неоднородна. Результаты исследования по отдельным группам персонала в таких компаниях (бизнес-единицам, предприятиям, категориям сотрудников, функциям и т. д.) могут существенно отличаться друг от друга. Поэтому в крупной компании снижать охват рискованно: если какая-то группа сотрудников пройдет опрос активнее других, ее ответы перевесят, и результат по компании исказится. Не допускать такой перекос можно, формируя репрезентативную выборку с использованием специальных статистических методов. Но проще и надежнее обеспечить высокий процент участия по компании в целом.
