Вслед за выявлением потенциальных испытуемых встает вопрос экспериментального плана. Схемой большинства проектов вмешательства является последовательность, которую в главе 3 мы обозначили как «Одна группа претест/пост-тест»: исходная оценка, за которой следует вмешательство, а затем — конечная оценка. Как говорилось в главе 3, существенное различие между результатами пре-и посттестов не всегда свидетельствует о пользе программы; при использовании этого плана часто возникают альтернативные объяснения или искажения валидности выводов о причинно-следственных связях. По этой причине, осуществляя такие проекты, многие исследователи (как и Шейх с коллегами) набирают контрольную группу лиц, не подвергающихся экспериментальному воздействию. Контрольная группа дает возможность оценить вклад посторонних по отношению к экспериментальному воздействию факторов (например, эффект практики или регрессии к среднему) и, таким образом, более точно определить, какая доля улучшения обусловлена вмешательством. Однако, как это часто бывает, когда дело касается исследовательского плана, проведение методологически грамотной процедуры осложняется наличием некоторых проблем практического характера. Испытуемые, к примеру, могут возражать против участия в контрольной группе, тем самым создавая вероятность систематической ошибки при отборе. Есть также и некоторые этические моменты, связанные с отказом нуждающимся людям в потенциально б-лаготворном воздействии ради экспериментального контроля; этот вопрос обсуждается в главе 8 под рубрикой отказ в экспериментальном воздействии. В связи с этими трудностями во многих проектах вмешательства по завершении формального сбора данных контрольной группе предлагается того или иного рода помощь. В исследовании Шейх с соавторами (Shekh et al., 1986), к примеру, по окончании исследования контрольная группа прошла 4-часовой курс обучения мнемоническим стратегиям.
Как отмечалось, точная оценка важна не только для выявления испытуемых по результатам протеста, но и для определения эффекта вмешательства но результатам посттеста. Очевидно, что нас интересует улучшение, следующее за вмешательством — улучшение, выходящие за рамки того, что можно было бы объяснить действием других-факторов (отсюда необходимость контрольной группы), и улучшение, имеющее не просто статистическую, а практическую значимость. Что конкретно имеет смысл ожидать, зависит от характера проекта. Однако при оценке эффективности вмешательства, в том числе и программ тренировки памяти, следует иметь в виду два общих соображения. Первое касается переноса, или генерализации: распространяется ли польза воздействия не только на конкретные задания, стимульный материал и контекст, использовавшийся в программе? В исследовании Шейх с соавторами, например, наблюдается ли перенос навыков запоминания пар «лицо—имя» на другие парные ассоциации или на ситуации запоминания вне лаборатории? (Ответ, кстати, неоднозначен, так как исследование не предусматривало оценку ни одной из этих форм переноса.) Второй общий момент — это стойкость изменений: сохраняется ли достигнутое улучшение и после исследования или исчезает по окончании программы? Здесь, как мы увидели, Шейх и коллеги получили некоторые позитивные данные о том, что спустя 6 месяцев эффект все еще был заметен. Однако в подобного рода исследованиях отнюдь не всегда оценивается стойкость изменений. В действительности, многие проекты вмешательства — в частности, программы тренировки памяти — даже не предусматривают проверку переноса или стойкость изменений. А если такие проверки и предусматриваются, вывод из них однозначен: добиться краткосрочного эффекта легче, чем стойкого, а частных и специфических эффектов — легче, чем общих и неспецифических.
Последнее замечание касается масштабов вмешательства. В принципе, предполагается, что в целом, «чем больше, тем лучше>> (больше времени действия программы вмешательства, больше разнообразных компонентов программы, больше изменений в жизни испытуемых и т. д.); и в основном эти ожидания оправданны, опять-таки не только в отношении тренировок памяти, но и в отношении ряда других программ вмешательства, направленных на другие популяции. Тут, однако, в силу вступает принцип осуществимости. Ресурсы всегда ограничены, и часто просто невозможно сделать все необходимое для достижения улучшения у людей, которым мы пытаемся помочь. Кроме того, чем больше компонентов м ы включаем в программу, тем сложнее определить, какие именно компоненты сыграли решающую роль в успехе. Это проблема