Assesment of competencies of managers with situational judgment tests

Abstract

Данная работа посвящена оценке компетенций у менеджеров с помощью теста ситуативных суждений. Был проведен анализ зарубежных работ по разработке и применению тестов ситуативных суждений, проведен перевод оригинальных зарубежных методик и составлен банк вопросов. Целью данного исследования была апробация переведенной методики в реалиях русской профессиональной среды. В исследовании приняли участие 96 человек: 78 менеджеров низшего звена, 18 работников различных сфер профессиональной деятельности. Респонденты выполняли тест ситуативных суждений, а также отвечали на вопросы опросника «Требования должностной позиции». Ситуативный тест суждений - Situational Judgment Test (далее- SJT) - это тип теста, который измеряет отношение и поведение человека в ситуациях, связанных с работой. Кандидатам предлагают решить проблемы, с которыми они могли или могут встретиться во время рабочего процесса, используя знания и навыки принятия решений. Для каждой проблемной ситуации представлены несколько возможных вариантов действия, кандидаты должны выбрать наиболее и наименее эффективные действия для решения описанной проблемы. Обработка данных: факторный анализ, корреляционный анализ по критериям корреляции r-Пирсона и r-Спирмена, анализ надежности разработанной методики по коэффициенту α-Кронбаха, непараметрический критерий для двух независимых выборок U- Манна-Уитни. В результате проведенного эмпирического исследования был апробирован тест ситуативных суждений. Получена факторная структура методики, выделены 3 фактора: «Ответственность», «Способ задания приоритетов задач», «Коммуникация с коллегами». Валидность методики подтверждена статистически устойчивыми положительными взаимосвязями между компетенциями методики «Требования должностной позиции» и шкалами (факторами) теста ситуативных суждений. Ситуации SJT сильно контекстуализированы. Контекстуализированный характер элементов SJT делает их склонными к культурным различиям. В нашем исследовании были использованы кейсы американского ситуативного теста, поэтому выбор русских респондентов не совпал с ключом во многих кейсах. Наиболее благоприятно, когда тест составляется непосредственно под модель компетенций компании, чтобы избежать ошибок, связанных с культурными различиями.

This research is devoted to assessment of competencies of managers with a Situational Judgment Test. The analysis of English-language publications of development and application situational judgment tests was carried out. The translation of foreign methods was conducted and the question pool was compiled for assessment of competencies of managers. The aim of the study was approbation of situational judgment test in Russia. The participants were 96 members of the organization: 78 managers, 18 employees of different spheres. The participants passed the situational judgment test and also test "Position Requirements". Situational Judgment Tests are a type of test that measures behaviors and attitude of a person in work-related situations. This type of test presents candidates challenging situations that they might experience in the job, to measure decision-making skills. For each situation, several possible actions are presented and candidates have to identify the most and the least effective answers to solve the problem described. Data processing: factor analysis, correlation analysis according to the correlation coefficients r-Pearson and r-Spearman, α- Cronbach coefficient of consistency, Mann-Whitney U-test. As a result of the conducted empirical research the test of situational judgments was designed (three competences: Responsibility, Priority of tasks, Communication with colleagues). Statistically significant communications of competence and level of demand for position were confirmed. Implication, speculation, or recommendation: SJT items are highly contextualized. The contextualized nature of SJT items makes them particularly prone to cultural differences. The American versions of cases of SJTs were used, so the solution of many cases did not coincide with the key. It would help to avoid mistakes related to cultural differences.