Другие проблемы связаны с характером выборки. Участие в любом долгосрочном исследовании требует от испытуемых (а в случае с детской выборкой еще и от родителей испытуемых) затрат времени и усилий. Поэтому отбор, по крайней мере, частично, должен основываться на таких факторах, как вера испытуемых в ценность исследования или высокая вероятность того, что они не переедут в другую местность. Но в этом случае выборка может оказаться нерепрезентативной в отношении популяции, на которую исследователь хочет перенести свои выводы. Более того, испытуемые из лонгитюдной выборки — это ровесники и составляют одно поколение или когорту, поэтому любые результаты в некоторой степени специфичны для данного конкретного поколения. Нас, к примеру, интересует, как изменяются люди в течение первых 30 лет жизни. Однако если все наши испытуемые родились в 1940 году, тогда с определенной долей уверенности мы сможем сказать, как изменялись люди, рожденные в 1940 году, сталкиваясь с изменениями, происходящими в мире в 1940-х, 1950-х и 1960-х. Если бы наши испытуемые появились на свет раньше или позже, мы получили бы несколько иные результаты.
Хотя лонгитюдные выборки по многим параметрам не соответствуют критерию репрезентативности, они дают возможность избежать систематической ошибки при отборе (Campbell & Stanley, 1966) — то есть отбора для сравнения изначально неэквивалентных групп. Если каждый испытуемый сравнивается сам с собой, никакой систематической ошибки отбора быть не может. Однако есть вероятность избирательного отсева (или выбывания), которое и имеет место на практике. Люди могут выходить из лонгитюдной выборки по ряду причин — в связи с переездом, нежеланием продолжать участие или (особенно в выборке пожилых людей) смертью. Если бы такие выпадения были случайными, тогда единственной неприятностью было бы сокращение размеров выборки и напрасные усилия по сбору данных, которые не будут дополнены. Однако зачастую выпадение не случайно, избирательно, то есть выбывшие из исследования испытуемые закономерно отличаются от тех, кто остался. Например, при лонгитюдном изучении интеллекта у выбывших обычно более низкий IQ при первых тестированиях (например, Siegler & Botwinick, 19/9). Поскольку выпадения в связи с низким уровнем компетентности влияют на общие результаты более молодых испытуемых, следствием является «позитивное искажение» в пользу старших возрастных групп. Конечно, можно ограничить сравнение результатами людей, оставшихся в группе, и таким образом влияющими на итоговые показатели во всех возрастных категориях. Однако в этом случае изначально нерепрезентативная выборка становится еще более нерепрезентативной.
Есть и еще один признак, по которому участники лонгитюдного исследования отличаются от популяции, на которую исследователь хочет перенести свои выводы. Он очевиден: в ходе лонгитюдного исследования его участники в отличие от популяции регулярно проходят психологическое тестирование. Поэтому потенциальное значений имеют две причины искажения валидности (Campbell & Stanley, 1966). Первая — тестирование: влияние на результаты тестирования выполнения такого же или подобного теста прежде. Например, кажется правдоподобным, что регулярное и довольно частое выполнение теста IQ в конечном счете начнет отражаться на ответах испытуемого, и результат исследований действительно подтверждает это предположение (например, Nesselroade & Baltes, 1974). Вторая проблема — более общего характера — проблема реактивности. Осознание человеком того, что его изучают, может повлиять и на его поведение, что особенно выражено у участников долгосрочных лонтитюдных исследований с частым проведением измерений. Поэтому ответы этих испытуемых не всегда отражают типичный процесс развития.
Обратите внимание, что описанные выше проблемы не обязательно характерны для всех лонтитюдных исследований. Они наиболее выражены в тех из них, которые связаны с частым и явным тестированием испытуемых зрелого возраста. С другой стороны, исследователю, изучающему развитие в младенчестве методом наблюдения, нет необходимости слишком волноваться о факторе тестирования или реактивности.