Совершенно другие требования к надежности должны быть предъявлены к методикам (или тестам), диагностирующим стойкие природные, а тем более – генетически обусловленные психофизиологические особенности, например свойства нервной системы в их физиологических показателях. Коэффициенты надежности при сопоставлении первого и повторного испытания даже при значительных сроках, отделяющих первое от повторного, тут должны быть достаточно высоки. Только специфические функциональные состояния испытуемых могут снизить эту надежность. Таким образом, вопрос о надежности того психологического или психофизиологического свойства, которое испытывается тестом, не решается всегда однозначно. Решение зависит от сущности самого диагностируемого свойства.

Мы осветили некоторые важные стороны вопроса надежности психологических диагностических методик. Исследователь может разрабатывать тесты для решения своих частных задач, например задач теоретического порядка, не связанных с диагностическими и прогностическими целями. Установление валидности подобных тестов не может считаться обязательным делом. Однако если результаты тестирования могут хотя бы в малейшей степени повлиять на судьбу людей, проходивших испытания, необходимо знать, насколько тест пригоден для того, чтобы выполнить свое назначение, и насколько высока вероятность того, что результаты тестирования отражают такие стойкие индивидуально-психологические особенности людей, которые реализуются в их учебной и производственной деятельности и так или иначе влияют на ее успешность и эффективность.

Психолог, работающий в области психологической диагностики, должен знать, каков сложившийся в настоящее время аппарат установления валидности, какие трудности и неясности возникают при его использовании. Но это особый вопрос, хотя и тесно соприкасающийся с вопросом о надежности, он требует специального рассмотрения.

1.2. Статистика – аппарат доказательства психологической диагностики

Конструирование психолого-диагностических методик ставит перед психологом два вопроса.

1. Какие признаки, какие психологические или психофизиологические особенности должны быть выделены в качестве объекта диагностирования?

2. Как построить методику, как доказать, что полученные с ее помощью данные диагностируют выделенные признаки, другими словами, что методика отвечает замыслу?

Первый вопрос – вопрос о содержании методики. Ответ на него должен раскрыть ту психологическую или психофизиологическую реальность, в изучении которой – по теоретическим или практическим соображениям – заинтересован психолог. Такой ответ может дать только психологическая теория. Только она может с надлежащей компетентностью обозначить объекты диагностирования, их «гомологию» и иерархию. Понятно, что диагностика служит не только для того, чтобы подтверждать гипотезы, она может и опровергать их, и выдвигать новые. Но диагностируемые признаки в конечном счете систематизируются теорией.

Однако нередко при психологическом диагнозе пренебрегают теорией, а стремясь якобы приблизиться к требованиям практики, оперируют случайным и неустойчивым набором теоретически неясных психологических признаков человека и не заботятся о том, чтобы научно обосновать объект диагностирования и ввести его в систему теоретических понятий. В конечном счете это отражается на самой методике и на эффективности ее применения. Пора уже признать, что решающее слово в определении объекта психологической диагностики принадлежит теории. Тестология избегала такого признания, и это отнюдь не пошло ей на пользу. Только в последние годы эмпирика в тестологии начинает уступать место вытесняющей ее теории.

Недостаточную теоретическую обоснованность того, что диагностируется, тестология пыталась возместить детально разработанной техникой диагностирования, обработки, сопоставлений и пр. Предполагалось, что созданный для этой цели хорошо продуманный аппарат поднимет полученные результаты на уровень теории, если не общепсихологической, то хотя бы своей собственной, тестологической. Это была бы если не полностью независимая от психологии, то все же относительно самостоятельная теория, теория – «как диагностировать».

Однако при всех достоинствах созданной тестологией методической системы скрупулезной статистической проверки тестов из результатов этой проверки никак не вытекали собственно теоретические принципы. Поэтому и задача внесения этих принципов в тесты посредством применения теории вероятностей и статистики оказалась нерешаемой. Складывались принципы тестирования, но не принципы выделения предметов тестирования. Форма и содержание предстали разобщенными, и стало ясно, что форма не обеспечивает содержание. Необходимо же было обеспечить их единство.

Трудность состоит в том, что признание доминирующей роли содержания никак не означает, будто форме, технике, методической стороне дела можно отводить второстепенное и несущественное место. Диагностика стоит на сравнении, ранжировании, сопоставлении. Для всего этого абсолютно необходима методическая точность, иначе при известной массовости получаемых данных диагностическое исследование теряет смысл. Попробуйте опереться не на методическую строгость, а на «общепсихологическую интуицию» отдельных экспериментов – и вы тотчас же лишитесь критериев, а с ними – и научного содержания диагноза.

Методическая идея, даже если она теоретически обоснована, еще не превращается в методику; для этого должна быть продумана и последовательно осуществлена особая и весьма трудоемкая процедура. Только дилетантам представляется, будто эта процедура для всех методик одинакова и независима от идеи. На деле оказывается, что «доведение» методики, ее проверка есть задача также в большей мере теоретическая и чаще всего требующая как психологической, так и математико-статистической подготовки.

Представление о том, что формальная сторона подготовки методики вроде как не относится к психологу, а может быть передана в руки подсобного специалиста, есть представление ложное. Психолог-диагност должен вникать в суть статистических приемов, которые служат критериальными для его методик, так как эти приемы органически связаны с методическими идеями.

Получившие распространение в наши дни и хорошо обоснованные с математической стороны статистические приемы применялись и применяются в диагностике лишь потому, что они в большей или меньшей степени отвечали и отвечают определенным психологическим воззрениям. Поэтому их нельзя абсолютизировать и применять в любых случаях, как некий статистический универсальный ключ. Неадекватное применение статистических приемов может привести к столь же плачевным результатам, как и пренебрежение к статистике.

В частности, это относится к статистическим приемам проверки надежности и валидности методик и к понятию так называемой «нормы».

Речь идет, таким образом, о том, что статистический аппарат, который необходим в работах по психологической диагностике, не находится вне этой диагностики, это аппарат самой диагностики и ее обслуживания, его назначение состоит в том, чтобы методическая идея была последовательно реализована, чтобы результаты ее истолкования были вполне определенными, чтобы они отличались необходимой доказательностью. Иными словами, статистика есть аппарат доказательства психологической диагностики. Логический смысл самой теории как бы теряет силу с того момента, как методика поступает в руки экспериментаторов, работающих часто изолированно друг от друга по месту и времени. С этого момента вступает в силу аппарат методики, прежде всего «статистика, с ее неукоснительными правилами сбора, обработки и сопоставлений материала, с ее вероятностным подходом к оценке полученных выводов». Психолог, недооценивающий роль статистики, может добиться только того, что его выводы будут поставлены под сомнение.

Статистика применяется для того, чтобы установить меру надежности диагностических методик. Прием, обычно применяемый в этом случае, – это корреляция. Какова же, собственно, доказательная роль статистики в этом случае?