Тест может оказаться невалидным для данной выборки респондентов, т. е. не измерять то, что он призван измерять, например, из-за культуральных или языковых особенностей выборки. Далее, тестирование является узкоспециализированным инструментом - не все процессы могут быть строго формализованы, стандартизированы и включены в тест. Тестированием сложно объективно измерить какой-либо комплексный навык или процесс, например, интеллект или мотивацию, оно будет давать лишь весьма приблизительную модель исследуемого процесса (но давать ложную уверенность в объективном результате).