31. Задачи, стоящие перед психологом в ситуации «внутрикультурного переноса» теста на новую популяцию.

Особые задачи ставит перед психологом ситуация «внутрикультурного переноса» теста на новую популяцию, отличающуюся от выборки стандартизации половозрастными или профессионально-культурными особенностями. В данном случае необходимо: 1) проверить валидность методики; 2) перепроверить тестовые нормы.

32. Этапы эмпирико-статистической работы при адаптации многомерного переводного теста-опросника.

33. Основные этапы конструирования психодиагностических методик. Требования к каждому этапу.

1) Формирование исходного варианта психодиагностического теста.

— Теоретический анализ диагностируемого конструкта, разработка теоретической концепции тестируемого свойства. Выявление (с использованием литературы) системы взаимосвязанных диагностических конструктов, внутри которой новый диагностический конструкт характеризуется определенными структурно-функциональными связями и отношениями. Прогнозирование результатов корреляционных экспериментов по проверке конструктной валидности.

— Выделение составных частей теоретического конструкта, формирование системы «эмпирических индикаторов» (системы исходных признаков) — операционально однозначных показателей, фиксирующих проявление конструкта в различных поведенческих ситуациях. Конструирование пунктов теста.

В случае заимствования отдельных частей нового теста у известных психодиагностических методик производится выбор таких методик (как правило, многомерных тестов), части которых теоретически способны отражать требуемое диагностическое свойство.

— Формулирование релевантного внешнего критерия, который будет использоваться для проверки эмпирической валидности теста и может также быть использован при проведении эмпирико-статистического анализа данных для определения параметров диагностической модели.

2) Проведение экспериментальных обследований и определение параметров диагностических моделей.

— Планирование и проведение обследования исходным вариантом нового психодиагностического теста специально подобранной выборки испытуемых, для которых известны (или будут известны) значения критериального показателя, а также результаты по родственным тестам. При необходимости на этих испытуемых проводятся дополнительные тесты с целью обеспечения в дальнейшем проверки конструктной валидности нового теста (экспертные оценки в данном случае рассматриваются как одна из параллельных процедур получения критериальной или психологической информации).

В настоящее время не существует однозначного ответа на вопрос об объеме обследуемой выборки. По крайней мере такой ответ невозможно дать априорно до проведения разведочного статистического анализа и установления вида распределений изучаемых переменных. Исследование большого числа реальных задач многомерного анализа данных показывает, что основная масса использовавшихся таблиц экспериментальных данных содержала от 30 до 200 объектов и медиана эмпирического распределения объема выборки составляет 100 /Александров В. В. и др., 1990/. В зависимости от объема выборки используются различные статистические критерии. Проблема малой выборки при построении линейных решающих правил рассмотрена, например, в /Раудис Ш. и др., 1975/.

— Определение параметров диагностических моделей (отбор информативных пунктов теста, нахождение весовых коэффициентов) производится с помощью методов многомерного статистического анализа, описанных в данной главе. Эти методы в достаточно полном объеме реализованы практически во всех известных пакетах прикладных программ для статистической обработки данных типа STATGRAPHICS, SPSS, BMDP, которые функционируют на персональных компьютерах. Однако, как отмечалось выше, специфика психологических измерений (высокая размерность, номинальный и качественный характер исходных признаков) накладывает свой отпечаток на применение этих методов в психодиагностике. Часто бывает нецелесообразно, а то и невозможно использовать классические версии того или иного метода. Нередко исследователю имеет смысл ограничиться упрощенными моделями указанных методов и остановиться на их реализации в форме отбора признаков и самой приблизительной оценки весовых коэффициентов для пунктов теста, вошедших в правило вычисления результирующего психодиагностического показателя.

3) Анализ распределения тестовых баллов, построение тестовых норм и проверка их репрезентативности.

При построении тестовых норм психолог должен произвести следующие действия /Общая психодиагностика, 1987/.

— Сформировать выборку стандартизации (случайную или стратифицированную по какому-либо параметру) из той популяции, на которой предполагается применять тест. Провести на каждом испытуемом выборки тест в сжатые сроки (чтобы устранить иррелевантный разброс, вызванный внешними событиями, происшедшими за время обследования).

— Произвести группировку «сырых» баллов с учетом выбранного интервала квантования.

— Построить распределение частот тестовых баллов (для заданных интервалов) в виде таблицы и в виде соответствующих графиков гистограммы и кумуляты.

— Произвести расчет среднего и стандартного отклонения, а также асимметрии и эксцесса. Проверить гипотезы о значимости асимметрии и эксцесса. Сравнить результаты проверки с визуальным анализом кривых распределений.

— Произвести проверку нормальности закона распределения частот тестовых баллов с помощью, например, критерия Колмогорова или с помощью других более мощных критериев.

— Если гипотеза о нормальности распределения отвергается, произвести процентильную нормализацию с переводом в выбранную стандартную шкалу. Проверить устойчивость распределения расщеплением выборки на две случайные половины. При совпадении нормализованных баллов для половины и для целой выборки считать нормализованную шкалу устойчивой.

— Проверить однородность распределения по отношению к варьированию заданного популяционного признака (пол, профессия и т. п.) с помощью критерия Колмогорова. Построить в совмещенных координатах графики гистограммы и кумуляты для полной и частной выборок. При значимых различиях этих графиков разбить выборку на разнородные выборки.

— Построить таблицы процентильных и нормализованных тестовых норм (для каждого интервала «сырого» балла). При наличии разнородных выборок для каждой из них строится своя таблица.

— Определить критические точки (верхнюю и нижнюю) для доверительных интервалов (на уровне -Р<СО,01) с учетом стандартной ошибки в определении среднего значения.

— Обсудить конфигурацию полученных распределений с учетом предполагаемого механизма решения того или иного теста.

— В случае негативных результатов — отсутствия устойчивости норм для шкалы с заданным числом градаций (с заданной точностью) — осуществить обследование более широкой выборки или отказаться от плана использования данного теста.

4) Анализ надежности.

— Для тестов, построенных по принципу внутренней согласованности (без использования внешнего критерия), производится расчет коэффициентов надежности по формулам 2.69—72.

— Если имеются результаты обследования выборки стандартизации параллельными формами теста, то рассчитываются коэффициенты корреляции этих результатов с баллами, полученными с помощью нового теста.

— Проверка надежности как устойчивости к перетестированию совершенно необходима при диагностике свойств, по отношению к которым теоретически ожидается инвариантность во времени. Анализ ретестовой надежности может быть (так же как анализ надежности — согласованности) совмещен с исследованием информативности отдельных пунктов.

5) Анализ валидности.

Рассчитываются коэффициенты корреляции сконструированного теста с релевантным внешним критерием, а также с результатами дополнительных тестов для оценки конструктной валидности.

Требования кпсихометристу, разрабатывающему психодиагностический тест изложены в /Бурлачук Л. Ф. и др., 1989/. Там же излагаются требования к использованию компьютеров в психодиагностике.