Метаанализ — это статистическое объединение данных, собранных в результате многих различных исследований. В таком качестве он доставляет исключительно достоверную информацию, поскольку контролирует ошибки измерения и выборки и другие несоответствия, искажающие результаты индивидуальных исследований. Метаанализ позволяет устранить систематическую ошибку и получить оценку истинной достоверности либо истинной взаимосвязи между двумя или более переменными. Статистики, типично вычисленные в ходе метаанализа, позволяют исследователям выявить наличие или отсутствие факторов, влияющих на взаимосвязи. В области психологии, образования, поведения, медицины и отбора персонала было уже проведено более 1000 исследований, опирающихся на метаанализ. Научная литература, посвященная социальным аспектам поведения людей, изобилует исследованиями, выводы которых порой противоречат друг другу. Тем не менее метаанализ позволяет исследователю оценить основные взаимосвязи между переменными и устранить искусственные источники различий в результатах разных исследований. Он предоставляет метод, при помощи которого исследователи могут выяснить, являются ли достоверности и взаимосвязи значимыми в разных ситуациях (например, в разных фирмах или в разных географических районах).
В этой книге мы не будем приводить полного описания метаанализа. Если читатель захочет получить базовую информацию и подробное описание новейших методов метаанализа, то мы предлагаем ему ознакомиться со следующими источниками: Schmidt (1992); Hunter & Schmidt (1990); Lipsey and Wilson (1993); Bangert-Drowns (1986); Schmidt, Hunter, Pearlman and Rothstein-Hirsh (1985).
Гипотезы и характеристики исследования
Перечислим гипотезы, протестированные в ходе метаанализа.
1. Восприятие сотрудником качества управления, измеряемое с помощью 13 ключевых элементов, связано с результатами коммерческой деятельности бизнес-единицы. (Другими словами, бизнес-единицы, набравшие больше баллов по этим показателям, демонстрируют в целом более высокие результаты коммерческой деятельности.)
2. Достоверность восприятия сотрудниками качества управления, измеренного 13 ключевыми элементами, значима во всех изученных организациях.
В базу данных Института Гэллапа было включено в совокупности 28 исследований, выполненных по заказу различных организаций. В рамках каждого из этих исследований были использованы один или несколько ключевых элементов; данные по ним исследователи обобщили на уровне бизнес-единицы и проверили, насколько они коррелируют с обобщенными результатами измерений показателей результатов коммерческой деятельности.
• Потребительская удовлетворенность/лояльность.
• Прибыльность.
• Производительность.
• Текучесть рабочей силы.
Таким образом, объектами этого анализа были организационные единицы. Вычислив корреляции Пирсона, мы оценили взаимосвязь между показателями восприятия сотрудников, усредненными по бизнес-единицам, и каждым из четырех показателей результатов деятельности. Такие коэффициенты корреляции были вычислены для бизнес-единиц каждой компании и занесены в базу данных для каждого из 13 ключевых элементов. Затем аналитики рассчитали средние достоверности, стандартные отклонения достоверностей и статистики значимости достоверностей для каждого из ключевых элементов и каждого из четырех показателей результатов деятельности бизнес-единицы.
Вот краткое описание исследований, включенных в этот метаанализ.
• В 18 исследованиях мы проанализировали зависимость между восприятием сотрудников бизнес-единицы и восприятием клиентов. Восприятие клиентов включало в себя меру потребительской удовлетворенности, рейтинги учителей среди учащихся и оценки качества обслуживания мнимыми покупателями5. Инструменты изучения мнения потребителей менялись в зависимости от исследования. Совокупный индекс потребительской удовлетворенности/лояльности был рассчитан как усредненное значение всех показателей, включенных в каждое измерение.
• Показатели прибыльности были доступны в 14 исследованиях. Прибыльность мы обычно определяли как процент от выручки (продаж). Но для некоторых компаний в качестве наилучшего индикатора исследователи использовали изменение прибыли по сравнению с результатами прошлого года или относительно целевых значений, поскольку это позволяло точнее всего измерить относительную прибыльность каждой бизнес-единицы. Таким образом, мы избегали влияния специальных благоприятных условий, когда показатели прибыльности было трудно сравнивать для разных бизнес-единиц. Например, переменная изменчивости включала отношение прибыли к выручке, выраженное в процентах, из которого вычитали затем процент вложенных средств. В каждом случае переменные прибыльности измеряли ставку доходности, а переменные производительности измеряли общий объем произведенных товаров/услуг.
