В этом видео мы познакомимся с определением психометрики, разберем объект ее изучения, а именно психологические тесты, а также рассмотрим основные критерии качества результатов психологических измерений. И начнем мы наш разговор с неформального определения психометрики. Психометрика — это раздел психологии, изучающий теорию и методику психологических измерений. Давайте рассмотрим это определение, что называется, по словам. Психометрика — это подраздел психологии. Мы знаем, что психология изучает поведение людей. И для систематизации наблюдаемых проявлений в поведении психологи определяют некоторые абстрактные атрибуты, которые присущи людям. Пример такого атрибута — интеллект. Каждый из подобных атрибутов называется конструктом. И конструкты связывают с некими образцами поведения, ему свойственными. Например, интеллект связывают с образцом поведения человека таким, как умение решать логические задачи. И наш эмипирический опыт показывает, что между людьми существуют различия в количестве конструктов. Например, люди могут различаться между собой по уровню интеллекта. Соответственно, нам бы очень хотелось иметь такие измерительные инструменты, которые позволят зафиксировать эти различия. Так вот, наука о том, как создавать такие инструменты, и называется психометрикой. Инструментом для измерения количества конструкта в психологии является психологический тест. Проходя любой тест — например, тест по пройденному материалу или тест на получение водительских прав, — на выходе мы имеем некоторый балл. И вот интерпретируя этот балл, мы можем сделать вывод о текущем уровне владения предметом или текущем уровне знаний правил дорожного движения. То есть, иными словами, сделать вывод о количестве некоторого конструкта у данного человека. Разные психологические тесты направлены на измерение различных конструктов. Но к каждому такому измерению в психометрике мы предъявляем определенный набор требований, а именно мы хотим, чтобы результаты каждого измерения были надежными и валидными. Кроме того, мы должны уметь интерпретировать результаты измерений. Так что давайте разберем каждое из этих требований к результатам измерений, полученным с помощью психологических тестов. Результаты измерений должны быть надежными. Надежность (по-английски — reliability), или, другими словами, воспроизводимость, показывает, как зависят результаты прохождения теста у данной группы испытуемых от изменений условий тестирования. Например, если мы повторим наш тест спустя некоторое время, насколько будут совпадать результаты наших двух измерений? Если мы измеряем что-то с помощью нашего инструмента, а результат измерений каждый раз разный, то, конечно, доверять такому тесту как результату измерения мы не сможем. Из определения надежности следует, что можно надежность определять различным образом. Например, надежность можно определить путем повторения тестирования с помощью выдачи испытуемым двух тестов эквивалентного содержания в один момент времени. С другой стороны, можно провести тестирование с одной и той же версией вашего теста, но спустя просто некоторое время. Итоговая надежность, вообще говоря, отражает разные аспекты воспроизводимости тестовых баллов. Далее в курсе мы подробно обсудим концепт надежности, а пока же перейдем ко второму требованию. Результаты измерений должны быть валидными. Вопрос о валидности результатов измерения можно переформулировать следующим образом: в какой степени интерпретация наших тестовых баллов имеет смысл с точки зрения конкретного приложения? Когда мы создаем тест, например, для определения уровня знания по некоторому предмету, нам нужна уверенность, что наши баллы вообще хоть как-то связаны с реальным уровнем знаний. И валидность — это есть количественная характеристика, отражающая нашу уверенность в том, что наш тест измеряет именно то, ради чего он, собственно, и был создан. А значит, и наши выводы, которые мы делаем, исходя из анализа тестовых баллов, также имеют смысл. Рассмотрим пример, показывающий важность проблемы валидности результатов измерений. Предположим, мы создаем тест на определение уровня знаний правил дорожного движения. В такой ситуации могут быть следующие вопросы касательно валидности тестовых баллов. Отражает ли оценка за тест реальный уровень знаний правил дорожного движения? Или такой вопрос: можем ли мы доверять оценке, полученной за этот тест? Вопросы валидности баллов в этом случае имеют чрезвычайно важное значение. Ведь на основании их человеку выдают права на управление автомобилем. Величина валидности — это ключевой показатель качества наших тестовых баллов. В частности, к проблеме валидности относится следующий вопрос: в какой степени оценка за данный тест по учебной дисциплине обусловлена реальными знаниями слушателей, а в какой мере — угаданными? Как вы помните, задание закрытой формы является одним из основных способов проверки знаний в онлайне. А значит, нам бы хотелось выявлять нечестных слушателей и не выдавать таким слушателям сертификат об успешном прохождении. В противном случае мы просто нивелируем саму идею сертификата как инструмента подтверждения знаний. Соответственно, нам нужно уметь интерпретировать тестовые баллы. Проблема интерпретации также включает вопрос определения некоторого порогового балла, на основании которого можно определить, кто из слушателей МООК получит сертификат. Описанный выше круг вопросов мы с вами обсудим в следующем блоке. А сейчас мы идем дальше, и я хочу остановиться еще на одной важной теме. А конкретнее, на другом, на втором подходе к пониманию психометрического теста. Выше, как вы помните, мы ввели определение психометрического теста как теста, направленного на измерение количества некоторого психологического конструкта. Но когда мы даем тест для проверки уровня овладения образовательной дисциплиной, то какой же психологический конструкт мы измеряем? Так вот, эта проблема определения конструкта, измеряемого тестом, несущественна во втором подходе к психометрике — в функциональном подходе. В этом подходе тест определяется назначением. И какой конструкт измеряется, нам совершенно неважно. Хороший тест по освоению материала лишь должен обладать хорошим психометрическим качеством. Функциональный подход вообще очень удобен при построении образовательных тестов. И далее мы будем как раз работать в функциональном подходе, не заботясь о том, какой психологический конструкт будет измерять наше задание. В завершение давайте кратко пройдемся по содержанию этого видео. Психометрика — это наука о том, как сделать качественный психологический тест. Качественным мы считаем тот тест, который позволяет нам получать надежные и валидные тестовые баллы. И при этом мы должны уметь интерпретировать наши баллы. Итак, на этом мы заканчиваем наше знакомство с концептуальной стороной психометрики. И в следующем видео мы с вами уже поговорим о ключевых шагах построения психологических тестов.
