Нужно сказать еще об одном факторе, который при некоторых обстоятельствах сказывается на дисперсии психофизиологического показателя. Квалифицированный научный работник, изучивший методики, в опыте действует так, чтобы своим участием – сообщением инструкции, подготовкой испытуемого, самой процедурой опыта – создать те «прочие равные условия», при наличии которых выявляются изучаемые признаки. Вряд ли можно оспаривать то, что личность экспериментатора накладывает свой отпечаток на результаты опыта. Испытуемый в своем поведении на эксперименте отразит допускаемую небрежность или точность, требовательность, настойчивость, свойственные руководителю опыта, и можно утверждать, что это относится не только к «произвольным», но и «непроизвольным» методикам.

Указанный фактор нельзя недооценивать, в частности, по следующим соображениям. Методика, разработанная в исследовательской лаборатории, не предназначена для того, чтобы вечно оставаться в руках своих создателей. Она должна переходить в другие руки. Поэтому крайне желательно что-то знать о том, в какой мере она поддается влиянию личности экспериментатора. Инструкцию и процедуру описать можно, но передать манеру поведения чрезвычайно трудно, а в некоторых методиках, видимо, это имеет немалое значение.

Напомним, что изложенное выше предполагает, что методика в любом случае находится в руках квалифицированного экспериментатора: его неподготовленность исключается. Дело идет об индивидуальной манере вести эксперимент и о том, что для некоторых психофизиологических исследований этот фактор имеет особое значение. В качестве примера может служить известное исследование Л. А. Шварц о влиянии различных условий тренировки на пороги. В IV серии испытуемым была дана новая инструкция, которая требовала (это слово наиболее подходит в данном случае) от испытуемых «значительного повышения чувствительности зрения до определенного уровня в указанные им сроки» (Шварц Л. А., 1957, с. 150). По данным этого автора, не вызывающим никаких сомнений, у одного из испытуемых чувствительность поднялась с 553 до 1067 % к фону, у другого – с 460 до 800 % и т. д. Совершенно бесспорно, что сообщение такой инструкции имело смысл лишь в том случае, если оно было подкреплено соответствующей манерой поведения экспериментатора, выражавшей твердую уверенность, что он сделает все от него зависящее, чтобы добиться от испытуемого всего требуемого. Действительно, Л. А. Шварц была настойчивым и твердым экспериментатором; все, кто ее знал с этой стороны, могут подтвердить это.

Возможно, что в установлении надежности психофизиологических показателей играют роль и другие факторы, однако нет необходимости доказывать, что те, о которых шла речь выше, имеют немаловажное значение. Как бы ни назвать критерии, устанавливающие влияние того или другого фактора на надежность показателей, они по сравнению с критериями, которые обсуждаются в тестологической литературе, обладают тем преимуществом, что ясно намечают, куда должны быть направлены усилия исследователя, борющегося за повышение надежности. Тестологические критерии такого направления не указывают. В понятия эквивалентности, стабильности без анализа включены критерии, которые связаны с измерительным инструментом, то есть тестом, и критерии, связанные с измеряемым процессом – умственным развитием, специальными способностями и т. п. Трудно представить себе, что тестологи, которые по своей основной специальности являются психологами, не понимали того факта, что выявление умственного развития (что бы ни подразумевалось под этим названием), как и всех других психических процессов, зависит, например, от функционального состояния испытуемого. Однако о нем в интерпретации критериев не упоминается.

Каждый из перечисленных нами факторов способствует, может быть, наряду с некоторыми еще не обозначенными возникновению дисперсии. В том, что дисперсия сопутствует измерениям, еще нет ничего опасного для надежности. Все дело в том, как соотносятся между собой дисперсии внутрииндивидуальных измерений: интериндивидуальная с дисперсией интраиндивидуальной. В иной постановке этот вопрос может быть выражен так: не приведут ли случайные колебания данных любого нашего испытуемого к тому, что он в рамках значительной вероятности может оказаться то в начале, то в середине, то в конце рангового порядка опытной выборки? Один из статистических приемов решения этого вопроса – корреляция.

Остановимся, хотя бы без детализации, на условиях, которые могут повлечь увеличение дисперсии, угрожающее надежности. При измерении зрительных порогов имеет важное значение сохранение на всем протяжении опыта и серии опытов яркости источника света. Но яркость зависит от колебаний напряжения, которые в условиях большого города почти неизбежны. Это обстоятельство может сказаться на разбросе получаемых данных. Скорость движения руки экспериментатора, передвигающего клин, также не может недооцениваться. В методике измерения латентного периода двигательной реакции в качестве причин, увеличивающих дисперсию, могут выступать как регистрирующие устройства, то есть система реле, передающих импульсы включения и выключения от испытуемого к хронометру, так и ключ (или кнопка), на которую реагирует испытуемый: расстояние между контактами может при неотрегулированности пружины то увеличиваться, то уменьшаться, и соответственно будет изменяться путь, проходимый нажимной частью ключа, а следовательно, уменьшаться или увеличиваться латентный период реакции. Эти примеры относятся к конкретной аппаратуре, но нет гарантий, что в аппаратуре совершенно иного типа не может возникнуть подобных же мелких неисправностей. Согласимся называть критерий, характеризующий надежность измерительного инструмента, критерием надежности.

Рассматривая зависимость дисперсии от самой измеряемой функции, постараемся прежде всего поставить перед собой вопрос: в каких условиях заметнее всего проявится степень ее стабильности. По-видимому, лишь в некоторых методиках нестабильность функции может быть выявлена в течение одного опыта. Можно согласиться, что в течение опыта, если он не имел целью специально утомить испытуемого (такие опыты в рамках проблемы надежности нет необходимости рассматривать), его функциональное состояние не изменится. Может сказаться упражнение функции; чтобы избежать этого, прежде чем приступать к собственно измеряющему опыту, обычно доводят испытуемых до условного плато – условного, поскольку в условиях опыта оговаривают, какое количество близких данных принимают за плато. Остается присущая функции флюктуация. Она, несомненно, скажется на дисперсии. При не слишком малом числе измерений в опыте и при не слишком больших амплитудах флюктуации ее действие, возможно, и не повлечет невыгодного соотношения между интер– и интраиндивидуальными дисперсиями. В общем, вероятность совпадения момента измерения с точкой экстремума меньше, чем вероятность совпадения момента измерения с точками, расположенными в других зонах флюктуации.

Из сказанного следует, что по одному опыту судить о нестабильности функции не всегда возможно. Наиболее ясно эта нестабильность или ее степень, очевидно, обнаруживаются при сопоставлении двух опытов, разделенных некоторым интервалом. При измерении этих интервалов, вероятно, удастся заключить, как происходит (если происходит) изменение функции. Критерий, характеризующий стабильность функции, также имеет самое непосредственное отношение к надежности. Его можно назвать критерием стабильности.

Наконец, в предыдущем изложении было обращено внимание на то, как влияет на рассеяние показателей смена экспериментаторов. Подходя к смене экспериментаторов с той же позиции надежности, мы можем сказать, что наиболее важно здесь то, насколько различное действие произведут экспериментаторы на испытуемых. Если допустить, что под воздействием нового экспериментатора все испытуемые и притом в одинаковой мере станут работать немного лучше или хуже, то хотя сам по себе этот факт и заслуживал бы внимания, но он не изменил бы надежности. О надежности нужно говорить только потому, что действие экспериментатора на испытуемых может быть различным: допустим, одни стали бы работать лучше, а другие – хуже, а третьи – так же, как и при первом экспериментаторе. Другими словами, испытуемые при новом экспериментаторе изменили бы свои порядковые места в выборочном распределении. В таком случае следовало бы говорить о том, что исследуемый психофизиологический признак заметно отражает изменение условий. Другой же признак, возможно, этим не отличается. По аналогии с восприятием свойство, которое здесь отмечено, можно назвать константностью и считать, что критерий константности выражает подверженность изучаемого признака влиянию личности экспериментатора. Критерий константности может быть получен путем корреляции двух рядов данных, полученных в двух экспериментах, проведенных двумя экспериментаторами. Некоторые дополнительные данные о сдвиге в случае надобности можно получить, сравнивая ряды с использованием какого-либо критерия значимости различий, например критерия Стьюдента или другого.