Основным препятствием для достижения внутренней валидности в эксперименте с межгрупповым сравнением является потенциальная возможность влияния на полученные результаты индивидуальных различий испытуемых в каждой из групп. Если группы составлены так, что между ними сохраняется устойчивое различие, то систематическое смешение независимой переменной с индивидуальными особенностями испытуемых неизбежно. А случайные различия между испытуемыми в группе, обусловленные ограниченным размером выборки, будут снижать надежность значений тех зависимых переменных, которые исследуются в эксперименте [4].

По своей внутренней валидности реальные эксперименты не могут быть безупречными. И все же нужно стараться сделать группы как можно больше похожими друг на друга, подбирая их буквально испытуемый к испытуемому. Необходимо привлекать для эксперимента большое число испытуемых. В эксперименте с одним испытуемым для достижения высокого уровня надежности с увеличением разброса данных требуется больше проб. А в эксперименте с межгрупповым сравнением соответствующим требованием будет увеличение количества испытуемых.

Кроме того, надежность индивидуального эксперимента можно повысить путем усреднения изменчивости во времени. Так как часть различий между испытуемыми зависит от субъективных особенностей, этот метод применяется и при межгрупповом сравнении. Эти различия уменьшатся также в том случае, если для всех испытуемых будут обеспечены примерно равные условия проведения эксперимента [6].

Если в эксперименте с испанским языком применение того или другого метода обучения к разным студентам как-то различалось, то нужно ожидать подобных различий и в успешности обучения. В индивидуальных экспериментах соблюдение строгости в отношении всех необходимых аспектов-независимой, зависимой и дополнительных переменных - будет увеличивать надежность, а в новом случае ее можно повысить путем сокращения межгрупповых различий, уравнивая условия работы испытуемых. И если добиться этого, то высокая надежность эксперимента может быть достигнута и не на столь большом количестве испытуемых.

Для того, чтобы повысить внутреннюю валидность, существует ряд стратегий составления экспериментальных групп и схем сравнения. В каждой из схем устраняются препятствия для достижения внутренней валидности эксперимента - систематическое смешение и ненадежность [5].

Эффективность любого эксперимента определяется тем, в какой мере его результаты можно распространить на популяцию. Ясно, что выборка испытуемых из популяции не может представлять последнюю безупречно. С этой точки зрения внешняя валидность реального эксперимента зависит от того, насколько исследователь приближается к идеальному эксперименту благодаря своим способам отбора испытуемых.

Для этого может применяться случайная стратегия, описанная выше, с целью отбора экспериментальных групп из данной популяции. Если популяция хорошо представлена выборкой испытуемых, то внешняя валидность эксперимента удовлетворительна. Однако существует опасность, что при широком распространении результатов внешняя валидность окажется нарушенной [7].

Для достижения внутренней валидности эксперимента, т.е. уравнивания групп испытуемых, участвующих в каждом из условий, вовсе не обязательно, чтобы эти испытуемые были представительной выборкой исследуемой популяции. Подобие групп по индивидуальным характеристикам еще ничего не говорит о представленности популяции. Внешняя валидность эксперимента обеспечивает его внутреннюю валидность, но обратное отношение не сохраняется.

Если выборка испытуемых хорошо представляет популяцию, то достигается высокая внешняя валидность. Однако внутренняя валидность индивидуального эксперимента нарушается главным образом за счет влияний предшествующих проб, различия задач и изменчивости поведения во времени. На представительность выборки эти факторы не влияют. Так что даже если тщательно контролировать их, это все равно не позволит улучшить репрезентативность выборки, т.е. внешнюю валидность эксперимента [8].

Выделение слоев можно применять вместе со случайным отбором испытуемых внутри каждого слоя точно так же, как при случайном распределении слоев. Если основание выделения слоев связано с изучаемым видом деятельности, то данная процедура дает крупное преимущество. При одном и том же количестве испытуемых она обеспечит лучшую представленность популяции, и это повысит внешнюю валидность эксперимента. А поскольку применяется схема эксперимента с межгрупповым сравнением, то внутренняя валидность тоже будет выше.

Если в эксперименте участвуют не случайно отобранные представители популяции, а уже имеющиеся в наличии, то вопрос о репрезентативности выборки становится весьма серьезным [4].

3. Общая оценка межгрупповых схем и преимущества экспериментов на представительных выборках