Как составить психологический тест для человека

Психологические тесты пользуются огромной популярностью, поскольку мало что может быть увлекательнее, чем исследовать самого себя, открывать в себе новые грани или узнавать больше о своем характере. Множество сайтов и книг заполнены тестами разного уровня сложности, где любознательные пользователи находят для себя и своих близких все объясняющие диагнозы. Всего несколько кликов и можно внезапно обнаружить в себе социопата или подтвердить свою интроверсию. Но является ли полезной такая самодиагностика, стоит ли доверять психологическим тестам, и используют ли их сами психотерапевты? Наш сайт взаимопомощи «Люди для людей» разобрался в вопросе и готов поделиться со своими читателями.

Разбор стандартного психологического теста

Стандартные психологические тесты состоят из ряда примитивных вопросов, на которые необходимо ответить, а после подсчитать баллы и прочитать к ним описание.

Стремление человека раскрыть в себе таланты, узнать что-то новое и выявить новые грани — это вполне нормально. Но зачастую люди удивляются, когда пройдя тест, его результат полностью отвечает их характеру и принципам.

Тесты для девушек наиболее популярны, но предпочтительнее всех те, которые отвечают на вопрос: «Нравлюсь ли я мужчинам?». Каждую девушку беспокоит данный вопрос, несмотря на то, что она сама знает на него ответ и применять в этом случае психологические тесты для девушек абсолютно ни к чему. Но все-таки, ответив на вопросы из теста, получаешь средний результат, где написано: «Вы симпатичны некоторым мужчинам, одни без ума от вас, а других немного пугает ваш характер». В целом, все сошлось: каждой женщине приятно осознавать, что она нравится мужчинам, а по поводу характера многие воспринимают это как преимущество. Если боятся, то значит самодостаточная, независимая и сильная. Также любопытно узнать результат с наименьшим количеством баллов: «Вы у мужской половины вызываете интерес, но у вас имеются некоторые комплексы, способные оттолкнуть». Такой ответ тоже является правдивым, ведь у каждого имеются какие-то комплексы. Прочитаем результат с самыми высокими баллами: «Вы способны понравится любому мужчине и покорить его», и видим, что такой ответ тоже подходит любой девушке.

Можно ли доверять психологическим тестам

Можно ли доверять психологическим тестам – вопрос сложный. Дело в том, что отвечая на вопросы, мы получаем лишь общую картину о человеке, которая в целом может применяться к любому.

*Если рассмотреть ситуацию, когда один и тот же психологический тест будет переведен на несколько языков. Исходя из того, что каждая нация имеет свои ценности и привычки, само собой, полученный результат будет значительно отличаться.

Как составляют тесты, используемые в психологии и психотерапии

Психологические тесты, используемые в психотерапии, для выявления скрытых черт характера человека и направленные на оказание помощи людям в тех аспектах, где это требуется, существуют. Конечно, чтобы их составить требуется достаточно много ресурсов и времени.

Составление теста проходит поэтапно и начинается в первую очередь с определения его целевой аудитории – лексика и сложность вопросов должны соответствовать  группе опрашиваемых. Основной трудностью является максимальное раскрытие каждой из характеристик личности при помощи небольшого количества вопросов. Также зачастую помимо вопросов «по существу» в тест добавляют так называемую «шкалу лжи» — вопросы, способные помочь определить, честно и внимательно ли отвечает испытуемый. То есть это повторы одного вопроса с небольшой переформулировкой.

*Получить честные ответы также можно с помощью искаженного описания теста – опрашиваемый рассчитывая, что его проверяют на что-то одно, о другом будет отвечать правдивее.

Составление вопросов для теста, формирование инструкции и определение временных рамок являются основными этапами. Затем тест проходит проверку на надежность, то есть два варианта результата от одного человека должны быть идентичными, и на валидность – насколько тест отражает действительное положение вещей.

Особенности психологических тестов, проработанные на стадии его составления, позволяют в результате сформировать инструмент, с помощью которого можно достоверно оценить те или иные свойства клиентов или пациентов. Неудивительно, что действительно «серьезных» тестов не так много.  Ведь большинство специалистов при их создании забывают или не хотят учитывать многие особенности психологического теста.

Основные характеристики, которые должны присутствовать в психологическом тесте

Психологический тест в науке – стандартизированное испытание, по полученным ответам которого можно судить и психофизиологических и личностных свойствах тестируемого.

Из этого термина стоит выделить ключевое слово – стандартизированное, что значит, что дело касается испытания, для которого имеется понятная, стандартная и строго выполняемая схема осуществления с одной стороны, и критерии оценивания результатов того, что было измерено – с другой.

Основные психометрические характеристики, которыми должен обладать тест:

• Валидность.
• Достоверность.
• Адаптированность.
• Надежность.
• Репрезентативность.

Стоит рассмотреть каждую из вышеперечисленных характеристик более детально.

Валидность теста

Валидность теста указывает нам на то, насколько правильно выбранная методика измеряет конкретно то свойство, для анализа которого она предназначена. Это один из основных критериев оценки эффективности каждого психологического теста, потому как диагностика «не того» абсолютно бессмысленна.

Выделяют несколько видов валидности:

• Содержательная.
• Эмпирическая.
• Прогностическая.
• Концептуальная.

Достоверность психологического теста

Достоверность психологического теста указывает нам на то, насколько он защищен от умышленной фальсификации ответов тестирования испытуемым.

Достоверность психологических тестов является наиболее распространенным вопросом, особенно в случаях, когда результаты оценки свойств личности  касаются стороннего заинтересованного лица, например, руководителя.

Среди факторов достоверности теста выделяют:

• Фактор знания. Показывает, что испытуемый знает о личностных характеристиках, скрытых за суждением, имеется ли такое поведение в реальной жизни, и как такое поведение оценивает общество;
• Фактор социальной желательности. Для получения точной информаций в настоящем психологическом тесте должна присутствовать шкала лжи, а также возможные варианты ответов идентичной эмоциональной направленности;
• Фактор индивидуальной практики. Речь идет о мотивации испытуемого при прохождении теста. Если при тестировании от человека требуется определенное поведение, он может давать не реальные, а желаемые поведенческие реакции, что значительно влияет на результаты.

Адаптированность

Адаптированность – одно из свойств теста, демонстрирующее, насколько его смысл и возможные результаты отвечают аудитории, для которой они предназначаются. То есть, принимаются ли во внимание национальные, культурные и ментальные особенности людей, которые участвуют в конкретном  исследовании. Достаточно часто игнорируется данное свойство. Даже несмотря на то, что адаптация любого иностранного тестирования – главное условие для его проведения в пределах другой страны, этим фактором часто пренебрегает, что вызывает значительные искажения при получении результатов.

Надежность психологического теста

Надежность психологического теста – наиболее важна при составлении общей картины правильного понимания результатов опроса. Она отражает внутреннюю согласованность частей теста, и воспроизводимость его результатов и конкретного испытуемого при повторном прохождение. Это значит, что построение надежных психологических тестов должно быть таким, чтобы вопросы не противоречили друг другу, а результаты определенного человека не менялись в течение некоторого времени.

Само собой, человек может меняться, но, например, если еще вчера ваш IQ составил 120, а спустя неделю – 70, скорее всего, проблема не в вашем интеллекте, а в надежности результативности используемой методики.

Репрезентативность

Репрезентативность или величина выборки стандартизации психологического теста. Такая характеристика определяет возможность применения теста относительно данной популяции опрашиваемых. Например, если тест предназначен для оценивания личностных качеств руководителя, он не подойдет для оценки личностных характеристик студента.

Как проходить психологические тесты

Чтобы сдать тест, необходимо подготовиться на эмоциональном уровне. Тестирование требует внимательности и сосредоточенности. Поэтому крайне важно не торопиться, даже если на тест отведено не слишком много времени. Внимательно вчитайтесь в вопрос, осознайте его, это позволит решить задачу правильно. Многие мужчины утверждают, что тестирование чем-то напоминает азартную игру – нередко оно тоже вызывает выброс адреналина. Именно поэтому так необходима психологическая подготовка.

Психологические тесты сегодня активно применяются в самых различных сферах. Прежде всего, это силовые и смежные с ними ведомства – армия, военкомат, МВД, МЧС, профильные учебные заведения. Здесь тестирование необходимо для выявления уровня психической подготовленности опрашиваемого. Однако в последнее время тестирование предлагают пройти и многие коммерческие компании – особенно на этапе собеседования с претендентами на вакансию.

*Все психологические тесты направлены на выявление тех или иных качеств человека, которые могли бы приходиться в конкретной ситуации. При этом важно помнить общих тестов не бывает, все они рассчитаны на определенную группу людей. Тем не менее тесты нужны далеко не всегда и если вы честный, отзывчивый и благородный человек стремящийся делать добрые дела – судьба и так вам улыбнется. Наши поступки как бумеранг, где хорошее возвращается в двойне!

Как создать психологический тест

В данной статье мы рассмотрим процесс создания психологических тестов с помощью системы тестирования Let’s test.
Составленные с помощью этого инструмента тесты доступны для прохождения прямо на сайте в режиме онлайн.
Конструктор тестирований позволяет не только создавать как простые, так и сложные психологические тесты, он автоматизирует обработку и анализ результатов.

Пройти выбранный для примера тест можно по следующей ссылке: http://letstest.ru/testpanel/exams/start/9932

Пример теста

Чтобы начать процесс создания теста, Вы должны быть зарегистрированы и находиться в панели управления организацией.

В качестве примера мы возьмем «Тест на эмоциональный интеллект (методика Н. Холла на эмоциональный интеллект)» и поэтапно рассмотрим, как добавить его в систему.
Данный тест состоит из тридцати вопросов, каждый из которых имеет шесть вариантов ответов с разным количеством баллов.
Ключ к тесту имеет следующий вид:

• Шкала «Эмоциональная осведомленность» — вопросы 1, 2, 4, 17, 19, 25.
• Шкала «Управление своими эмоциями» — вопросы 3, 7, 8, 10, 18, 30.
• Шкала «Самомотивация» — вопросы 5, 6, 13, 14, 16, 22.
• Шкала «Эмпатия» — вопросы 9, 11, 20, 21, 23, 28.
• Шкала «Управление эмоциями других людей» — вопросы 12, 15, 24, 26, 27, 29.

Подсчет результата теста осуществляется следующим образом: по каждой шкале высчитывается сумма баллов.
Чем больше сумма баллов, тем больше выражено данное эмоциональное проявление.

Создание шкалы оценок

И так, начнем настройку теста на эмоциональный интеллект.
Первым делом необходимо создать шкалу оценок.
Перейдите на страницу «Тесты» -> «Шкалы оценок» и нажмите на кнопку «Создать шкалу».

На странице создания шкалы, на вкладке «Основная информация» укажите название шкалы (например, «Тест на эмоциональный интеллект (Тест EQ)»).
Чтобы результат теста отображался в баллах, а не в процентах выберите в поле «Тип шкалы» значение «Балльная».

Далее необходимо добавить в нашу шкалу уровни.
Для этого перейдите на вкладку «2. Оценки».
Интегративный (сумма по всем шкалам) уровень эмоционального интеллекта с учетом доминирующего знака определяется по следующим количественным показателям:

• 70 и более — высокий;
• 40–69 — средний
• 39 и менее — низкий.

Добавим в шкалу три уровня, так как это показано на рисунке.
Каждый уровень будет показан пользователю, только если он набрал указанное количество баллов.
Таким образом, уровень — это оценка, которую получит пользователь для набранного им количества баллов за весь тест.

Следующим этапом является добавление категорий для каждой шкалы из теста.
Для этого перейдите на вкладку «2. Категории».

Согласно описанию теста, он будет иметь следующие категории: «Эмоциональная осведомленность», «Управление своими эмоциями», «Самомотивация», «Эмпатия», «Распознавание эмоций других людей».
Добавим данные категории с помощью кнопки «Добавить категорию».
Для каждой из них необходимо указать название и сообщение, которое будет пояснять данную категорию.

Включим отображение баллов рядом с категориями, установив соответствующий флажок.
Также мы никак не будем ограничивать отображение категорий, будут показаны все из них.

На этом изменение шкалы оценок завершено, и ее необходимо сохранить.
Чуть позже мы выберем данную шкалу при создании тестирования, таким образом, указав ему, как следует подсчитывать баллы.

Создание вопросов

Следующим этапом является создание вопросов, которые будут использоваться в тесте.
Для этого необходимо перейти на страницу «Тесты» -> «База вопросов».

Создадим в базе директорию «Тест на эмоциональный интеллект (Тест EQ)», в которую будем добавлять вопросы.
Нажатием на кнопку «Создать вопрос» перейдем на страницу создания вопроса.

Для вопроса необходимо выбрать тип «Выбор одного ответа».
Для данного типа можно добавить несколько вариантов ответов, каждый из которых будет иметь свое количество баллов.
Пользователь должен будет выбрать один вариант, и количество баллов за вопрос будет равняться количеству баллов за выбранный ответ.

Укажем название теста как «Вопрос 01» и в дальнейшем будем нумеровать вопросы по порядку (Вопрос 02, Вопрос 03 и т. д.).
Также в качестве родительской директории выберите папку «Тест на эмоциональный интеллект (Тест EQ)», которую мы создали ранее.

На вкладке «Вопрос и ответы» необходимо ввести текст вопроса, а также добавить варианты ответов.
При добавлении варианта ответа необходимо указать его текст и количество баллов (стоимость ответа).
Не забудьте установить номер категории, к которой будут добавлены баллы за выбор данного ответа.

Для этого необходимо обратиться к ключу теста и поставить в поле «Добавлять баллы к категориям (номера через пробел)» номер соответствующей категории из шкалы оценок.
Например, для первого вопроса это будет шкала «Эмоциональная осведомленность» и в поле необходимо поставить число 1.
Добавьте, таким образом, все варианты ответов и сохраните вопрос.

После того, как Вы создадите все вопросы для тестирования (для данного теста нужно создать 30 вопросов), перейдите на страницу «Тесты» -> «Тестирования».

Настройка тестирования

Финальным этапом составления теста является процесс настройки тестирования.
Для перехода на соответствующую страницу нажмите на кнопку «Создать тестирование».

На вкладке «1. Основная информация укажите название тестирования, которое будет показано пользователю.

На вкладке «2. Список вопросов» необходимо нажать на кнопку «Добавить вопросы и в появившемся окне выбрать директорию с вопросами к тесту.

На вкладке «3. Страница запуска» в поле «Стартовое сообщение» напишите текст, который увидит пользователь на странице запуска тестирования. Можно, например, написать описание теста.

На вкладке «5. Шкала оценок» необходимо выбрать шкалу, которая была создана нами ранее.

Далее перейдите на вкладку «6. Страница результатов».

В поле «Финальное сообщение» напишите текст, который увидит пользователь, когда он завершит тестирование. Установите флажки «показывать сообщение о статусе тестирования для шкалы» и «показывать оценку», чтобы пользователь увидел оценку из нашей шкалы в зависимости от количества набранных баллов.

Также необходимо установить флажок «показывать результат», чтобы пользователь увидел количество баллов, которое он набрал.
Обязательно снимите флажки с полей «показывать диаграмму ответов», «показывать количество правильных и неправильных ответов» и «показывать статус тестирования», для нашего типа теста эти данные не имеют значения и пользователь не должен их видеть.

После установки указанных параметров сохраните тестирование. На данном этапе тест можно считать созданным и можно переходить к его проверке.

На странице «Тесты» -> «Тестирования» нажмите на ссылку «получить ссылку» и в появившемся окне щелкните на ссылку для запуска теста.
Пройдите полный путь начиная с запуска теста, ответьте на все вопросы и ознакомьтесь со страницей результата.

Поздравляем, Вы успешно создали и прошли психологический тест с помощью системы тестирования Let’s test.
Но возможности системы не ограничиваются только выбранным нами в качестве примера тестом на эмоциональный интеллект.
С помощью системы тестирования Let’s test можно создать практически любые психологические тесты.

В данной статье описаны основные аспекты составления психологических тестов.
Вы можете менять настройки на свое усмотрение, чтобы реализовать поведение Вашего конкретного теста.
Например, можно настроить шкалу оценок таким образом, чтобы в качестве результата пользователю показывалась только категория с наибольшим количеством баллов.
И оценка для тестирования выставлялась в зависимости от данной категории, а не от общего результата за тест.

Если у Вас возникли трудности при создании психологического теста, напишите нам на [email protected], мы обязательно Вам поможем и дадим полезные рекомендации по созданию тестов.

Мы в Центре защиты прав СМИ* давно искали сервис для создания образовательных тестов, который был бы с одной стороны надежным, а с другой — не очень дорогим. Предыдущий ресурс, на котором мы делали тесты для аудитории нашего сайта, вдруг стал стоить, как крыло самолета, платить огромные деньги за функции, которые нам не особо нужны, мы не очень хотели. Поэтому я очень рада, что коллеги посоветовали Madtest.

Инструмент очень продуманный. В нем есть все, что нам было нужно: начиная от возможности менять оформление, настраивая нужные цвета, и заканчивая возможностью собирать и анализировать статистику. Особо отмечу, что в сервисе можно вставлять призыв к действию, причем не один, а разные, в зависимости от того, какой результат показал пользователь. Мне кажется, что очень удобно, что призыв к действию может содержать как ссылку, так и форму сбора контактов (мы пока выбрали этот вариант).

Интерфейс сервиса — интуитивно понятный, разобраться с первого раза сможет даже человек, который никогда не работал с подобными инструментами. Создать тест можно с нуля (это вообще не трудно), а можно использовать уже готовый шаблон. Можно настроить время прохождения теста, то, как он отображается на сайте, добавить комментарии к правильным и неправильным ответам. В общем, есть все, что нужно, если вы создаете развлекательные или образовательные тесты.

Мы выбрали тариф «Базовый», в нем есть ограничения по числе доменов, на которые можно вставлять тест. Несмотря на это, техподдержка пошла на встречу и убрала это ограничение, разрешив использовать тесты и на некоторых других наших площадках. Кстати, о техподдержке — получить консультацию, если что-то непонятно, можно буквально в течение нескольких минут, не нужно ждать часами, что суперудобно.

Я точно могу рекомендовать конструктор тестов Madtest тем, кто создает тесты для своей аудитории, ищет для этого стильное, но простое решение, не хочет тратить кучу времени на разбор площадки и хочет получать нужную статистику.

*признан НКО, выполняющим функции иностранного агента.

В этой статье речь пойдёт о разработке образовательных тестов — заданий по проверке предметных знаний и навыков. Но в целом описанные правила универсальны: тесты для оценки психологических качеств или софт-скиллов разрабатываются аналогично.

Вы узнаете:

• можно ли с помощью теста, где учащийся выбирает из вариантов ответов, проверить, как он умеет рассуждать;
• можно ли измерить тестом не просто знание фактов, а понимание учебного материала;
• чем трудные задания отличаются от сложных и почему трудным тест может быть, а вот сложным его лучше не делать;
• с каких заданий лучше начинать — простых или трудных;
• какое количество вариантов ответа оптимально;
• как проверить, работает ли тест.

Психометрики называют тестом любой инструмент измерения — и ролевую игру, и эссе, и оценку портфолио. Мы подробно разберём инструмент, за которым в русском языке закрепилось слово «тест» в узком значении, — вопросы с выбором ответа из предложенных вариантов.

У стандартизированных тестов в образовании не лучшая репутация. Но психометрики по-прежнему отстаивают такой способ измерения: тесты с выбором ответа масштабируемы, справедливы и объективны. Это значит, что по одному и тому же тесту можно проверить сколько угодно учащихся, причём все будут в равных условиях, а на результат не повлияет ничьё постороннее мнение.

Но в то же время любой психометрик скажет вам, что тесты с выбором ответа — не универсальный инструмент. Способ проверки знаний выбирают с учётом того, какой именно конструкт необходимо измерить. Конструктом в психометрике называют свойство психики или способность, которые нельзя наблюдать напрямую, но можно измерить по внешним поведенческим признакам.

Для каких конструктов подходят тесты с выбором ответа? Это практически идеальный инструмент для оценки знания фактов и сугубо технических навыков. Например, для проверки знания о том, как отделить команды друг от друга при программировании на определённом языке.

А вот проверить, как учащийся умеет рассуждать, взаимодействовать с коллегами или находить практическое решение в сложной ситуации, тест с выбором ответов не поможет. Чем сложнее природа конструкта, тем более гибким должен быть инструмент измерения.

Такие тесты способны выявить не любые знания. В любой дисциплине есть простые факты, и по ним легко написать вопросы с несколькими вариантами ответа. Например, спросить, в каком году Колумб открыл Америку.

А есть элементы знания, для которых простого запоминания недостаточно. Например, если мы хотим спросить, какие события и явления стали предпосылками для открытия Америки, вопрос с выбором ответа из нескольких уже не так хорош.

Каждый преподаватель хочет, чтобы студенты не только помнили факты, но и понимали материал. Но, увы, понимание как таковое пока невозможно измерить. Может быть, нейронауки в отдалённом будущем дадут возможность следить за всем, что происходит внутри черепной коробки каждого ученика. Но сейчас психометрика работает с тем, что можно наблюдать, с поведенческими проявлениями. У понимания таких универсальных проявлений нет.

Потому в педагогических измерениях, когда нужно оценить более глубокие, не фактологические знания, измеряют не само по себе понимание, а умение интерпретировать или анализировать. И более практичны, чем тесты с выбором из нескольких вариантов, тут задания с открытым ответом или компьютерные симуляции и игры. В таких инструментах среда тестирования будет более гибкой, чем стандартизированные тесты.

Если ваша задача — проверить усвоение фактологических знаний или отдельных навыков, тест с выбором ответов вполне подойдёт. Чтобы составить и распространить такой тест, не нужны сложные цифровые сервисы. Для базовых задач вполне достаточно форм Google или «Яндекса».

В этом разделе статьи разберёмся с основными вопросами о том, как составить хороший тест. А если нужно узнать по этой теме больше, советую книгу: Haladyna T. M., Rodriguez M. C. Developing and validating test items (Routledge, 2013) — и другие работы её авторов. Правда, на русском языке она, к сожалению, не выходила.

К концу теста любой учащийся устаёт. Поэтому последние задания зачастую уже не дают никакой информации о знаниях тестируемого. Получается, делать тест слишком длинным нельзя.

Но и коротким он быть не может — у небольших тестов ниже надёжность. На какой-то вопрос учащийся даст неверный ответ по невнимательности, а где-то, наоборот, случайно угадает правильный вариант. Если тест будет достаточно объёмным, больше шансов, что такого рода ошибки уравновесят друг друга и итоговый результат будет достоверен.

Так как определить, какой длины должен быть тест? Нужно отталкиваться от времени на решение одного задания. Оно зависит от трудности и может составлять от нескольких десятков секунд до пяти минут. Также стоит учитывать возраст учащихся:

• Детям до подросткового возраста нельзя давать задание дольше, чем на 20 минут, — или нужно предусмотреть возможность перерыва в тесте.
• Для старших подростков и студентов, а также взрослых лучше исходить из продолжительности привычного занятия. Например, для старшеклассника нормально посвятить тесту урок в 45 минут (или два урока с переменой между ними). А для студентов уже можно написать тест и на 80 минут.
• В дополнительном образовании взрослых следует учитывать, что взрослый человек уже не считает себя обязанным участвовать ни в каких тестах. Ему нужна дополнительная мотивация. Например, можно пообещать индивидуальную обратную связь по результатам теста (и потом обязательно её предоставить!).

Золотое правило таково: чем больше часов на тему отведено в курсе, тем больше вопросов в финальном тесте. Потому что изначально, когда курс составлялся, большее число часов было запланировано на более важную тему.

Если темы не слишком дробные, хорошо бы поставить минимум три вопроса на каждую. Опять же, потому, что случайные ошибки уравновесят друг друга. Но обратную связь потом лучше давать не только по каждому отдельному заданию, но и по теме в целом.

Небольшое отступление: в психометрике задание может быть трудным, но не сложным. Трудность в этой науке понимают так же, как обычно в русском языке. Чтобы справиться с трудным заданием, нужно обладать высоким уровнем знаний по теме. Скорее всего, немногие ученики решат трудное задание.

А сложность — отдельное психометрическое понятие. Оно характеризует, сколько действий и когнитивных операций нужно выполнить в процессе решения. Возьмём математический пример. Задание разделить 0,219 на 0,365 трудное, но не сложное: оно состоит всего из одного действия.

И начинать тест следует с более лёгких заданий, то есть с нетрудных. В начале теста уровень стресса всегда выше, что искажает результаты. Если вопросы в тесте распределены по тематическим блокам, можно в каждом из них располагать задания от лёгких к трудным.

Кстати, вопрос о распределении по тематическим блокам сам по себе непростой. С одной стороны, правильнее, чтобы тестируемый концентрировался в каждый момент теста на одной теме. С другой стороны, иногда важно проверить, может ли он быстро переключаться с одной проблемы на другую.

Как именно поступить, решают в зависимости от дисциплины и задач теста. Но важно ставить всех тестируемых в одинаковые условия, чтобы результаты были сопоставимы.

В целом делить на блоки тест правильно: так тестируемый увидит, что тест не бесконечен. В ситуации компьютерного тестирования, когда нельзя пролистать задания и понять, сколько ещё осталось, это важно. И, конечно, нужно предупредить, если время на ответы ограничено.

Наиболее привычны сегодня тесты как в ЕГЭ — с четырьмя вариантами ответа. Иногда можно услышать, что это связано с объёмом рабочей памяти: якобы четыре варианта появились, потому что именно такое количество элементов средний человек способен одновременно удерживать в уме.

Психологи-когнитивисты такое обоснование считают ненаучным. Скорее всего, к четырём вариантам ответа практики пришли случайно, и ничего биологически или психологически заданного в этой цифре нет. Вариантов может быть и меньше — например, три.

А вот придумать больше неверных ответов обычно затруднительно.

Создание неправильных вариантов ответа — на самом деле сложное психометрическое мастерство. Не зря их называют дистракторами, то есть отвлекающими внимание от верного варианта.

Суть в том, что неправильные ответы должны быть похожи на правильный и привлекательны. Очевидно неправильных ответов нужно избегать, как и ответов из другой области. Например, если в вопросе стоит формулировка «В каком году?», все ответы должны быть датами примерно из одного диапазона.

Но неверные варианты не должны содержать в себе правильный ответ или какую-то его часть — иначе нужно в вопросе объяснить, что тестируемый должен выбрать самый правильный ответ.

Высший пилотаж — неправильные варианты на основе типичных ошибок студентов. Это позволяет давать более глубокую обратную связь: не просто показывать, где учащийся ошибся, а анализировать, почему он выбрал именно такой неправильный вариант.

Кроме надёжности, у любого теста есть ещё одно важное качество — валидность. По классическому определению, валидность — свойство теста измерять то, на что он направлен. Более современное определение гласит, что результаты валидного теста можно интерпретировать в той логике, в которой он создан.

И иногда на валидность может повлиять просто то, что тестируемый иначе (но не неправильно!) смотрит на ситуацию в задании.

Возьмём пример из теста на критическое мышление, разработанного в ВШЭ. Это тест‑симуляция онлайн-среды, в ней нужно общаться с ботом. Одна из задач — получить недостающую информацию для рецепта торта.

По идее, тестируемый должен задать боту конкретный вопрос, например: «Сколько яиц нужно добавить?» Но человек может начать с приветствия, и не потому, что не понял задание. Сказать «Привет, как дела?» перед тем, как уточнять рецепт, вообще‑то нормально. Но если об этом не подумать при составлении теста, такой ответ будет оцениваться как ошибочный.

Одно из частых опасений по поводу тестов и причин, почему в них предлагают добавлять больше вариантов ответа, — «угадайка». Кажется, что в задании с двумя вариантами ответа вероятность угадать составляет 50%. Но это верно только в случае, когда весь тест состоит из одного вопроса с двумя вариантами ответа.

Если добавить второй вопрос, в котором не будет подсказок к первому и наоборот, вероятности просто перемножатся. И шанс случайно угадать правильные ответы составит уже 25%. В случае с тестом из десяти заданий вероятность ответить на всё правильно случайно пренебрежимо мала.

Но такой расчёт справедлив только для тестов с хорошо написанными неправильными ответами.

На магистерской программе Института образования психометриков учат проверять работоспособность тестов все два учебных года. Попробуем коротко разобрать, что именно они изучают.

Проверить тест можно качественным или количественным методом. Качественный метод представляет собой интервью. Разработчик теста выдаёт задания представителю целевой группы, наблюдает за ним и расспрашивает. Так можно выяснить, всё ли понятно в заданиях, что именно тестируемый делает для решения, какие вопросы ставят его в тупик, а какие кажутся слишком простыми.

Цель качественной проверки — убедиться, что решение теста задействует именно те когнитивные процессы, которые требовалось вовлечь (скажем, тестируемый действительно решает математическую задачу, а не навскидку выбирает из вариантов наиболее подходящий), что варианты-дистракторы не содержат элементов правильного ответа, что все инструкции к тесту понятны и так далее.

Оценка работоспособности теста количественными методами — как раз психометрика в узком смысле слова. Проводится она через статистический анализ, для которого нужно порядка 100 наблюдений.

Понятно, что для каждого курса такую проверку не проведёшь, обычно достаточно интервью. Но количественная оценка обязательна, если по результатам теста принимается какое-либо решение — о зачислении на курс, о сертификации.

В результате разработчик теста получит все те же данные, что и при качественной оценке. К тому же количественная оценка покажет, какие вопросы и утверждения не измеряют то, что должны, а какие вообще избыточны — тест работает и без них.