Оценка психометрических свойств опросника OPQ

Под руководством П. Баррета (www.pbarrett.net), профессора Окландского университета (Великобритания) и профессора Кентерберийского университета (Новая Зеландия), было проведено исследование с целью оценить способность шкал OPQ (Occupational Personality Questionnaire), опросника, разработанного компанией SHL, выявлять индивидуальные различия.

В фокусе исследования оказались шкалы опросника и пункты, их образующие. Выборка составила 1042 человека.

Анализ пунктов опросника и шкал показал, что достаточно надежную оценку дают только 22 из 31 шкалы. Девять остальных шкал имеют низкую точность оценки и недостаточное количество хорошо работающих пунктов.

Основываясь на результатах исследования, а также на работах Матеуса и Сантона (1994), авторы сделали вывод, что дальнейшая работа над опросником должна заключаться в пересмотре теоретических моделей и методов измерения.

Теоретическая модель, которая лежит в основе Occupational Personality Questionnaire (OPQ), была создана на основе обзора и анализа концепций личности в современной литературe, а также базируясь на опыте компаний, действующих в сфере бизнеса.

Основной проблемой, побудившей авторов к исследованию, является отсутствие статистических показателей пригодности опросника к использованию в области бизнеса. Те же исследования, проведенные авторами теста, которые имеют место быть, не решают, а наоборот, ставят новые проблемы. Например, известно, что процедура факторного анализа, позволяла выбрать между широким спектром моделей, содержащих от двух до 19 факторов. В основу опросника были положены модели, содержащие 4, 5, 8, 11 и 19 факторов. Но не было четкого обоснования этого выбора.

Дело в том, что и до приведенного здесь исследования существовали экспериментальные работы, исследующие проблему адекватного количества факторов. В частности, в работах Матеуса, Стэнтона, Грэхэма и Бринелоу (Matthews, G. Stanton, N., Graham, N.C., Brimelow, C.(1990) A factor analyses of the scales of the Occupational Personality Questionnaire) процедура факторного анализа, проведенного на материалах заполнения OPQ девяносто четырьмя испытуемыми, выявила всего 5 факторов.

Работа Матеуса и Стэнтона (Matthews, G. Stanton, N. (1994). Item and scale factor analyses of the Occupational Personality Questionnaire.) с использованием выборки около 2000 человек позволила сделать вывод, что только 5-6 факторов можно выделить четко.

Все эти данные позволили усомниться в эффективности использования 31 шкалы в опроснике OPQ.

Проблема, которую ставили перед собой исследователи, заключалась в анализе авторских шкал опросника OPQ с точки зрения их способности четко диагностировать ту или иную черту личности.

Выборка
621 человек в возрасте от 18 до 50 лет заполняли опросник OPQ в реальной ситуации приема на работу. Они составили выборку № 1. Данные еще об 390 мужчинах и 30 женщинах были предоставлены другими компаниями (выборка № 2).

Oбъект исследования
Опросник OPQ 5.2 содержащий 248 вопросов (пунктов опросника), позволяющих оценить 31 шкалу (8 пунктов на шкалу). Каждый пункт оценивался респондентами по пятибальной системе.

Предмет исследования
Шкалы опросника OPQ 5.2.

Основной метод
Процедура факторного анализа (MLFA). Полученный результат — матрица корреляций, — использовался для подсчета показателя «качества» шкалы и подсчитывался по следующим формулам.

где

  • ITC — корреляция между пунктом и шкалой, в которую он входит (основная шкала)
  • nsITC — корреляция между пунктом и шкалой, в которую он не входит (неосновная шкала)
  • S — количество пунктов в основной шкале
  • NS — количество пунктов в неосновных шкалах
  • N — количество шкал в опроснике
  • K1 — количество неосновных шкал в опроснике, показатель ITC которых больше или равен 66% показателя ITC
  • K — количество пунктов, коэффициент корреляции которых с основной шкалой больше или равен среднему ITC основной шкалы, или больше 0,5.
  • NB — количество пунктов, показатель C_SSNR которых меньше чем 0,5
  • NL — количество пунктов, чей показатель ITC меньше чем среднее ITC по всей шкале
  • CB — коэффициент коррекции для сложных (комплексных) шкал
  • CR — коэффициент коррекции для шкал с низким ITC
  • Bound Value — среднее ITC по шкале или 0,5, если значение ITC больше 0,5

С помощью этой формулы вычисляется комплексный показатель «качества», учитывающий сложность шкалы (неоднородный вес каждого пункта в шкале), общую корреляцию пунктов с результатами по шкале и некоторые другие показатели.

Результаты
Результаты наиболее удобно будет представить в таблице. Ее содержание составляют наименование шкал, показатель «качество» и количество пунктов, вес которых в шкале больше 0,3

Таблица 1

Шкала «Качество» Пункты
Оказание влияния 0,56 4
Контроль 0,75 7
Независимость 0,05 2
Живость 0,24 7
Принадлежность к группе 0,61 7
Уверенность в себе 0,15 7
Скромность 0,88 8
Демократизм 0,81 7
Заботливость 0,80 5
Интерес к практике 0,89 8
Интерес к информации 0,91 8
Интерес к искусству 0,91 8
Интерес к поведению 0,86 7
Традиционализм 0,82 7
Ориентация на изменения 0,21 2
Концептуализм 0,76 7
Инновативность 0,87 8
Планирование 0,00 1
Методичность 0,83 7
Пунктуальность 0,73 8
Устойчивость 0,46 7
Тревожность 0,12 3
Невозмутимость 0,80 8
Эмоциональный контроль 0,88 7
Оптимизм 0,52 6
Критичность 0,56 3
Энергия 0,74 6
Соревновательность 0,57 6
Мотивированность на достижения 0,52 3
Решительность 0,78 8
Социальная желательность 0,64 6

Описание результатов
При оценке измерительных способностей шкал для того, чтобы сделать вывод о низкой эффективности шкалы, проанализированы два показателя: показатель эффективности (который должен быть ниже 0,6) и количество шкал имеющих вес в шкале 0,3 (их должно быть больше половины). При определении границы показателя «качества» использовались результаты работ Кайзера (Kaiser, H. F. (1974) An index of factorial simplicity). В результате девять шкал были оценены как низко эффективные, обладающие слабым измерительным потенциалом, это шкалы: «Оказание влияния», «Независимость», «Живость», «Уверенность в себе», «Ориентация на изменения», «Планирование», «Тревожность», «Критичность», «Мотивированность на достижение».

Выводы
На основании исследования, проведенного на двух выборках в сумме составляющих 1042 человека, можно заключить, что 9 шкал имеют низкие оценочные свойства. Они нуждаются в дальнейшей проработке, направленной на увеличение их эффективности и количественного обоснования их применения в диагностике.

Литература

  1. Kaiser, H. F.(1974). An index of factorial simplicity. Psychometrika, 39, 31-36
  2. Matthews, G. Stanton, N. (1994). Item and scale factor analyses of the Occupational Personality Questionnaire. Personality and Individual Differences, 16(5), 733 — 744
  3. Matthews, G. Stanton, N., Graham, N.C., Brimelow, C.(1990)A factor analyses of the scales of the Occupational Personality Questionnaire. Personality and Individual Differences, 11, 591-596
Киев
(+380 443) 92-84-25
ул. Очаковская, д. 5/6
info.ua@ontarget.ru
Москва
(+7 495) 663-20-62/82
ул. Бутырская, д. 75
info@ontarget.ru