[БЕЗ_ЗВУКА] Коллеги, здравствуйте. В предыдущем модуле вы увидели, что ключевой проблемой массовых открытых онлайн-курсов является низкий процент их успешного завершения, так называемый Completion Rate. Из тысяч записавшихся на курс успешно завершает его лишь каждый десятый. И я хочу напомнить, что под успешным завершением мы понимаем завершение курса с общим баллом за курс выше проходного. Естественно, подобное положение вещей не может не разочаровывать. Ведь делать массовый курс, который слушатели не могут успешно завершить, — значит делать бесполезную работу. Мы также помним, что одним из факторов, который может влиять на процент успешного завершения, является качество проработки курса — его содержание и система оценивания его усвоения. И тут я неслучайно употребляю слово система. Проверка знаний — это система взаимосвязанных процедур, которые позволяют оценить реальный уровень овладения предметом. Непосредственно в этом видео мы обсудим, в чем же особенность составления заданий в онлайне. Также подберемся к ответу на вопрос, как оценивать качество заданий в МООК. Начнем с того, что обсудим следущий вопрос: а в чем же особенности составления заданий для МООК? Почему бы просто не перенести задания, которые используются для проверки знаний в институте или в школе, в онлайн? И тут есть по меньшей мере три причины, которые препятствуют такому переносу. Во-первых, значительная часть МООК создается специалистами, которые не имеют педагогического образования или же опыта работы в образовательной сфере. А это значит, что они создают свои задания с нуля. Причем, как правило, они основываются на каких-то своих собственных внутренних правилах и представлениях о том, как это нужно делать. И естественно, что эти правила различны, а значит, и качество заданий также различно. Во-вторых, далеко не по каждому МООК можно легко найти аналог в рамках университетских программ различных российских вузов. А это значит, что нет исходников заданий для их переноса в онлайн. И последняя, третья, на самом деле наиболее важная причина: стандартные задания, которые используются в школе или в институте, не допускают простой автоматизированной обработки. Ну, по крайней мере, сейчас. Например, для проверки доказательства теоремы или сочинения все еще необходимо наличие рецензентов. Забегая вперед, скажу, что в МООК могут использоваться задания с развернутым ответом, которые слушатели проверяют друг у друга. Это так называемые задания на взаимопроверку, или по-английски peer review задания. Однако опыт показывает, что количество таких заданий, как правило, не должно превышать одного-трех на курс, и ясно, что с таким небольшим количеством заданий невозможно оценить усвоение контента стандартного пятинедельного МООКа, либо данные задания будут недопустимо затратными с точки зрения времени выполнения. И, естественно, данный факт негативно скажется на проценте завершения курса. Итак, для проверки знаний в МООК нужно использование не только классических заданий с развернутым ответом, но и других типов заданий, допускающих автоматическую обработку: заданий закрытой формы и заданий с коротким ответом. Далее в курсе мы подробнее обсудим, какие типы заданий предлагают современные площадки-агрегаторы МООК, типа EdX или Coursera. А сейчас мы движемся дальше и посмотрим на другую особенность составления заданий для МООК, которая, собственно, связана со слушателями. Все дело в том, что на курсе параллельно могут учиться люди с совершенно разным уровнем. У кого-то может быть даже научная степень в этой области, а кто-то будет совершенным новичком. И, конечно, они будут иметь различный запас знаний, отличаться по культуре, возрасту и многим других параметрам. И в этих условиях особенное значение принимают практики независимой оценки качества заданий. Но какие задания мы считаем качественными? Самый наивный способ определения качества — это использовать метод пристального взгляда. Но, к сожалению, глаз у нас у всех разный, и таким образом выработать правило составления качественных заданий вряд ли получится. А ведь нам бы хотелось оценивать наши задания объективно и измерять их качество количественно. Введение количественных характеристик заданий хорошо тем, что мы сможем объективно сравнивать задания друг с другом, и по этим величинам мы сможем отделить хорошие задания от плохих, а также выработать практики максимизации качества. Наука о том, как же максимизировать качество заданий, называется психометрикой. Она предлагает нам различные способы количественной оценки качества наших заданий и тестов в целом. И в следующем видео мы начнем наше знакомство с этой наукой, разберемся с ее определением, а также познакомимся с показателями, позволяющими судить о качестве тестов.