Как правильно составить тест по тексту

Правило 1

Начните с заголовка

Как только у вас родилась идея теста, сформулируйте черновой заголовок. Во-первых, если короткий и понятный заголовок не будет получаться, то это признак, что с вашей идеей что-то не так или тема для теста слишком сложная, — это повод доработать идею. Во-вторых, так вам будет проще понять, о чем именно будет тест. Это поможет определиться с тем, как лучше всего выстроить тест с точки зрения логики, какие именно нужны вопросы и результаты, и отсечь все лишнее. Лучше всего, когда в заголовке есть вопрос и читатель хочет узнать на него ответ. Еще лучше, когда заголовок касается конкретно человека и мы предлагаем узнать читателю что-то о себе: все любят узнавать себя.

Примеры заголовков:

• Сможете ли вы потратить триллион рублей?
• Умеете ли вы экономить по-настоящему?
• Насколько хорошо вы питаетесь по сравнению с другими россиянами?
• Как низко вы готовы пасть ради денег?
• Экспресс-тест: насколько вы счастливы?

Правило 2

Сформулируйте цель теста

Наверняка вы не хотите делать тест ради теста. А хотите чего-то большего:

1. донести до читателей определенную мысль;
2. достичь своих целей.

С первым все ясно: читатель должен пройти тест и узнать что-то новое или о чем-то задуматься. Например, о своих личных предпочтениях или о том, как на самом деле устроена жизнь вокруг:

Со вторым тоже все просто. Цель может быть прикладной — например, мы хотим ненавязчиво рассказать о нашем курсе по инвестициям. Тут все понятно: на заголовок кликают люди, которые интересуются темой и хотят узнать про себя что-то новое. Получают развлекательный контент и в конце узнают о курсе.

Или, наоборот, цель может быть более призрачной — например, нам важно писать про бизнес. У нас есть целый раздел про это, мы хотим подогревать интерес к теме разными способами: тот, кому пока скучно читать длинный текст, возможно, клюнет на что-то развлекательное. Скорее всего, человеку выпадет хороший результат, мы заложим в его голову идею, и, вероятно, в следующий раз он уже созреет для более серьезных форматов.

Правило 3

Нащупайте логику, на которой будет построен тест

Чтобы результаты теста выглядели убедительно, нужно придумать, на чем именно будут основаны ваши расчеты. Вам может казаться, что вы делаете максимально шуточный тест и придумывать какое-то обоснование необязательно. Но чаще всего это заметно, и у читателей возникнут вопросы:

В некоторых тестах результат можно выдавать рандомно. Подумайте, насколько такое решение уместно в конкретном тесте: оно должно выглядеть как фича, а не баг.

Примеры разных видов логики:

• «Какой вы миллиардер из кино?» — мы взяли список богатейших выдуманных персонажей «Форбса», выбрали из них киногероев, изучили их биографии, нашли пересекающиеся моменты и спрашиваем у человека, какая из описанных ситуаций больше похожа на его. В результатах рассказываем читателю краткую сводку о персонаже, с чьей биографией было больше всего пересечений, сумму его состояния и выделяем положительные свойства характера.
• «Относитесь ли вы к среднему классу?» — лучше всего, когда тест опирается на проверенный источник, будь то соцопрос или список «Форбса». В этом случае мы взяли несколько исследований, посвященных среднему классу, и сделали из них тест. Еще в тестах с такой логикой можно предлагать читателю проверить, насколько хорошо он разбирается в какой-то теме. Например, в зарплатах россиян или их мнениях по самым разным поводам.
• «Знаете ли вы, как супермаркеты нарушают ваши права?» — пример полезного теста на тему конкретной проблемы. Мы собрали случаи супермаркетного произвола, нашли законодательные акты, регулирующие эти ситуации, и предлагаем читателям рассказать, как бы в этих ситуациях они себя повели, и заодно узнать, на чьей стороне закон.
• «Финансовые предсказания: что вас ждет в следующем году?» — здесь результаты как раз распределяются более-менее рандомно, цель таких тестов — порадовать читателя, сказать ему что-то приятное, подбодрить. Но логика в распределении результатов все равно присутствует.

Правило 4

Решите, что в вашем тесте главное

Бывают тесты, в которых главное — результаты. Бывают тесты, в которых главное — вопросы. Здесь важно продумать, как правильно расставить акценты, чтобы и читатель был доволен, и вы рассказали людям все, о чем хотели.

Примеры:

• «Насколько хорошо вы питаетесь по сравнению с другими россиянами?» — в этом тесте важны вопросы. По сути, мы интерактивным способом рассказываем человеку о том, что известно статистике о пищевых пристрастиях россиян. Поэтому после ответа на вопрос мы даем уточняющую расшифровку и ссылку на источник. Обязательно собирайте все пруфы!
• «Какой страны вы достойны?» — а в этом тесте интереснее результат. Мы собрали 5 профайлов разных стран, основываясь на статистике, реальных ценах и культурных особенностях. Спрашиваем читателей об их предпочтениях, вкусах и привычках и делаем вывод, где условия для всего этого благоприятнее.

Правило 5

Старайтесь делать тесты короче

10 вопросов всегда лучше, чем 15, а 7 — лучше, чем 10. Можно пойти еще дальше и сделать тест из двух вопросов — и даже из одного! Все зависит от цели и от того, что в вашем тесте главное, — не стоит прятать это слишком далеко.

Также старайтесь соблюдать баланс: если вопросов много, то пусть и вопросы, и варианты ответов будут максимально короткими. Если вопросов мало, то можно себе позволить сделать вопросы или варианты ответов подлиннее. Варианты с картинками выбирать проще, даже если на этих картинках написан текст. Конечно, это не всегда возможно. Просто помните об этом и стремитесь к идеалу.

Старайтесь формулировать вопросы емко, убирайте лишние подробности. Избегайте длинных придаточных и громоздких фраз. Ваш вопрос должен быть понятным и конкретным.

Правило 6

Согласуйте заголовок с результатами

В идеальном мире текст результата всегда должен отвечать на вопрос в заголовке. Человек заинтересовался вопросом в заголовке и хочет получить на него ответ. А если ответа нет, то, вполне вероятно, человека постигнет разочарование. Это не те эмоции, которые нужно получать от тестов.

Правило 7

Не скупитесь на результаты

Желание увидеть результат — это главное, почему человек проходит наш тест. Проходить тест трудно. Нужно думать, читать и нажимать на кнопки. Кнопок бывает много: узнать правильный ответ, перейти к следующему вопросу, узнать результат. Это активное потребление контента. Поэтому в тестах результат — это награда. Если человек получит слишком короткий или неинтересный результат, он также будет разочарован. У него останется ощущение, что результат не стоил затраченных усилий. Поэтому к результатам надо отнестись внимательно и сделать их с любовью.

Правило 8

Добавьте дополнительную стоимость результатам

Если человек получил удовольствие от прохождения теста и от его результата, он становится довольно лояльным пользователем и благосклонно отнесется к нашему предложению продолжить вечеринку. Поэтому при создании теста мы сразу думаем о том, что еще предложить читателю. Мы можем предложить пройти еще один тест или прочитать текст по теме. В каждом результате может быть что-то уникальное: например, если человек показал слабый уровень знаний по какому-то предмету, мы можем отправить его читать про азы, а если высокий — проходить более сложный тест. Или во всех результатах может быть ссылка на что-то одно. Все зависит от цели.

Примеры:

• «Какой ваш финансовый возраст?» — здесь в каждом из восьми вариантов результатов читателю предлагаются разные тесты в зависимости от контекста.
• «В какую теплую страну вам пора переехать?» — здесь мы сопроводили каждый результат ссылкой на статью про конкретную страну.
• «Какой вы модератор Т—Ж?» — здесь тоже восемь вариантов результатов, но в рекомендациях — один и тот же тест.

Правило 9

Не расстраивайте читателей, а дарите им радость

Тесты — это развлекательный формат. Возможно, читателю скучно и он хочет развлечь себя. Возможно, у читателя был тяжелый день и он хочет отвлечься. Но он точно не хочет прочитать что-то неприятное про себя. Поэтому старайтесь даже в самых плохих результатах описывать недостатки мягко, упоминайте возможные сильные стороны и добавляйте во все это самоиронии и дружеского подмигивания.

Правило 10

Избегайте конкретных примеров в результатах

Помните, что и механики тестов, и сама концепция таких тестов построены на допущениях — мы даем очень приблизительный результат. Кроме того, продумать абсолютно все довольно тяжело и весьма вероятно, что где-то в вашей логике найдется слабое место. Поэтому нужно максимально застраховать себя от провалов. Если вы сами чувствуете, что халтурите или чересчур притягиваете нечто за уши, убирайте: это однозначно заметят.

Используйте слова: «возможно», «вероятно», «кажется» и так далее. Старайтесь не упоминать в результатах конкретные вещи, если механика теста не гарантирует вам, что читатель выбрал определенный результат. Зачастую бывает так: один из вариантов ответа — «обожаю хот-доги», читатель фыркает про себя, выбирает другой ответ, но по ответам в других вопросах оказывается, что он должен основать компанию по производству сосисок. Поэтому результат нужно завуалировать таким образом, чтобы даже тем, кто не любит хот-доги, было понятно, почему им выпал такой результат. Добавляйте в описание результата примеры не из вопросов, а другие, из жизни, которые расширяют картину.

Помните, что правила созданы, чтобы их нарушать. Если вы понимаете, что какое-то правило противоречит вашей идее или цели, и вы знаете, как сделать лучше, — делайте. Но сначала согласуйте все с редактором: возможно, он уже сталкивался с подобным и знает, как поступить, или просто поможет найти решение.

Виды тестов

Тесты-квизы: с правильными и неправильными ответами:

1. С одним верным вариантом ответа. Например, тест «Знаете ли вы, чем лечат себя россияне?».
2. С несколькими верными вариантами ответа. Например, тест «Какие финансовые вопросы россияне решают с помощью поисковика?».
3. Со счетчиком: он считает заработанное или штрафы. Например, тест «Сможете ли вы избежать штрафов в другой стране?».

Тесты-стратегии: без правильных и неправильных вариантов ответов:

1. С возможностью выбрать один вариант ответа. Например, тест «Насколько хорошо вы спите по сравнению с другими россиянами?».
2. Экспресс-тесты: собирают статистику. Пример: тест «Как низко вы готовы пасть ради денег?».
3. Со счетчиком: считает потраченное. Пример: тест «Сможете ли вы потратить 10 млрд юаней?».
4. С возможностью выбрать несколько вариантов ответа. Эта механика пока в разработке.

Квесты: тесты с разветвленной системой ответов. Формат пока в разработке.

Форматы вопросов и ответов

В вопросах могут быть заголовок, текст, картинка. Что-то одно из этого или все вместе.

Ответы бывают следующие.

Радиокнопки:

1. С текстом и картинкой. Например, тест «Угадайте, о каком товаре этот отзыв с „Алиэкспресса“».
2. С тайлами. Например, тест «Сколько могла бы стоить ваша самая безумная свадьба?».
3. С видео. Например, тест «В какой богатейшей российской семье вы могли бы родиться?».
4. С аудио. Например, тест «В какую теплую страну вам пора переехать?».

Тайлы:

1. С текстом. Например, тест «Насколько вы типичный читатель Тинькофф-журнала?».
2. С картинками. Например, тест «Угадайте, кто из российских звезд зарабатывает больше».

Чекбоксы:

1. С текстом.
2. С тайлами.
3. С аудио.
4. С видео.

Ползунок. Например, тест «Угадайте, сколько стоит отдых в российских отелях этим летом».

Механики подсчета результатов

Подсчет баллов:

1. Сумма правильных ответов. Каждый вопрос содержит верные и неверные ответы. Если пользователь выбрал верный ответ, то счетчик увеличивается на единицу или любое другое количество баллов. Если неверный — счетчик не меняется. Результат зависит от количества правильных ответов. Примеры: «Кто вы в мире госзакупок?» и «Угадайте, сколько стоят эти вещи из СССР».
2. Сумма набранных баллов. Каждому ответу присваивается стоимость, результат теста зависит от набранной суммы. Примеры: «Поборы в школе: сдать или затаиться?», «Сколько стоят похороны вашей мечты?» и «Сколько вы зарабатывали в прошлой жизни?».

Частотность ответов. Каждый ответ в вопросе принадлежит одной из групп. После прохождения теста отображается результат, у которого группа была выбрана наибольшее количество раз: если больше А, то один результат, если больше Б — другой. Баллы могут быть в виде букв или цифр.

Пример: «В какой европейской стране вам будет комфортно жить?».

Квест. Каждый следующий вопрос зависит от выбранного ответа. Результат выдается в зависимости от последовательности вариантов ответов.

Пример: «Имущественный вычет: сколько вам вернут при покупке квартиры?».

В результатах могут быть:

1. Счет — потраченного, заработанного, штрафов. Например, тест «Сможете ли вы разбогатеть на акциях?».
2. Видео. Например, тест «Собери их все: смогли бы вы работать в налоговой?».
3. Перечисление особенностей. Например, тест «Какое ваше финансовое тотемное животное?».

Рубрики

1. «Психология» — тесты в формате «Какой вы?..» про людей и их предпочтения.
2. «Безумие» — развлекательные тесты, гороскопы, странное.
3. «ЕГЭ» — тесты на знания и финансовую грамотность.
4. «Микротесты» — тесты из одного вопроса.
5. «Финансовое чутье» — тесты на тему чужих зарплат и стоимости чего бы то ни было.
6. «Форумы и новости» — тесты на тему фольклора, россиян и того, как они живут.
7. «Другое» — все, что не подходит под вышеперечисленное.

Подборки

1. Тесты для тех, кто хочет узнать себя.
2. Тесты для тех, кому нечем заняться.
3. Тесты для эрудированных.
4. Тесты из одного вопроса.
5. Тесты на финансовое чутье.
6. Беспощадные тесты о жизни в России.
7. Тесты для тех, кто ищет место для жизни.
8. Тесты для тех, кто хочет сохранить деньги.

Шаблоны

Если вы хотите сделать тест, приходите с идеями. У вас должен быть черновой заголовок и описание на абзац, в чем ваша идея и как вы хотите ее реализовать: в каком формате, на каких источниках, что будет в результатах.

Если тест готов и вы хотите показать его редактору, то самый беспроигрышный способ оформления — шрифт Arial, 11-й кегль. Обратите внимание на обязательные пункты, которые вам нужно учесть. Например, заголовки и подзаголовки для шеров результата теста в соцсетях. Вот примеры, как все может быть оформлено:

• шаблон теста с вариантами ответов;
• шаблон теста с ползунком.

Наверняка вы сами хоть раз в жизни составляли тесты и уж точно неоднократно проходили разнообразное тестирование – от серьезного до совсем шуточного из серии «Какой ты овощ во время карантина?».

Очень часто, за неимением нужных знаний и подготовки, разработчики придумывают тесты, опираясь исключительно на свой опыт, интуицию и здравый смысл (за исключением «овоща на карантине»). Многие, приступая к разработке собственных тестов, поначалу думают: что тут может быть сложного? Составить вопросы, придумать к ним ответы — вот и вся недолга! Это очень глубокое заблуждение. Создание хорошего задания в тестовой форме – настоящее искусство. 

Существуют разработанные учеными методики составления тестовых заданий. В этой статье я хочу рассказать об одной из таких методик, которую используют в системе общего и профессионального образования. В частности, ее нередко применяем и мы в учебном центре «Сетевая Академия ЛАНИТ» для разработки проверочных тестов и систем аттестации сотрудников.

Источник

Вместо предисловия

Почему я решила, что вам это может пригодиться? Во-первых, потому что многим из вас – людям, совсем далеким от педагогики, приходится проводить разнообразные обучающие мероприятия, разрабатывать учебные курсы и т.п., а все это требует проверки усвоения учебного материала. А какой еще способ, кроме тестирования, способен проверить знания быстро, надежно и объективно?

Во-вторых, потому что использование педагогических тестов актуально не только для образования, но и для областей, весьма далеких от него. Тесты – очень полезный инструмент для решения многих задач: и для аттестации сотрудников, и для первичной проверки соответствия знаний и навыков соискателей вакансии, и для оценки степени информированности аудитории о какой-либо проблеме, и много для чего еще. 

Сразу оговорюсь, что эта статья в первую очередь рассчитана на людей, не имеющих большого опыта в составлении тестовых заданий. Ее цель – предоставить новичкам достаточный объем материала, который помог бы им научиться составлять качественные педагогические тесты разных видов.

Да простят меня «продвинутые» в вопросах тестовой теории читатели, речь пойдет о базовых сведениях. Хотя, как показывает практика, вспомнить основы тоже никогда не вредно. 

Методику, о которой пойдет речь, разработали ведущие отечественные специалисты в области тестологии: В. С. Аванесов, М. Б. Челышкова, А.Н. Майоров и другие. 

В качестве примеров приводятся тестовые задания из открытого банка заданий ЕГЭ, размещенного на официальном сайте ФГБНУ «Федеральный институт педагогических измерений», из книги М. Б. Челышковой «Теория и практика конструирования педагогических тестов», из книги В. С. Аванесова «Композиция тестовых заданий», а также задания, составленные автором статьи и преподавателями разных образовательных организаций.

Сначала немного теории

Говоря о тестах в разных сферах деятельности, подразумевают разное. Например, в вычислительной технике тест – это задача с известным решением, с помощью которой проверяется правильность работы системы, а в медицине тестом будет называться метод исследования, заключающийся в пробном воздействии на организм. В общем понимании, тест – это объективное и стандартизированное измерение, которое легко поддается количественной оценке, статистической обработке и анализу. 

В рамках наших целей нас интересует педагогический тест со своей спецификой. Это система тестовых заданий различной трудности, созданная для качественного и эффективного измерения структуры и качества подготовленности испытуемых. Тестовое задание является одним из элементов педагогического теста, включает в себя инструкцию, тестовую задачу и эталон ответа.

Преподаватели используют тесты, чтобы:

1. оценить исходные знания учащихся перед началом обучения и скорректировать план и содержание занятия; 
2. сделать срез знаний во время курса, чтобы вовремя внести изменения в процесс обучения, если слушатели недостаточно хорошо усваивают учебный материал;
3. проверить финальный результат обучения.

Наиболее часто используются закрытые тесты, в которых ответы уже есть, как в игре «Кто хочет стать миллионером?». Но встречаются и открытые тестовые задания, требующие самостоятельно сконструировать или дополнить ответ.

Итак, выполняя закрытые тесты, обычно надо:

• выбрать один или несколько ответов среди заданных вариантов;
• установить соответствие между элементами двух множеств; 
• установить правильный порядок действий или процессов, перечисленных автором теста.

Открытые тесты требуют:

• дополнить имеющийся ответ;
• полностью сконструировать ответ самостоятельно.

Какой материал следует включить в тест

Содержание теста зависит от того, какие цели вы перед собой ставите и зачем вам вообще нужен этот тест. Прежде всего, нужно самому себе ответить на вопрос, можно ли с помощью составленных вами заданий проверить подготовленность аудитории. 

Вот такое тестовое задание предложил своим ученикам преподаватель анатомии по теме «Скелет грудной клетки». Одна из целей занятия – знать количество ребер у человека. 

Инструкция

: Выберите один правильный ответ.
Количество ребер 

1. у мужчин больше, чем у женщин
2. у женщин больше, чем у мужчин
3. индивидуально у каждого человека
4. зависит от жизненных обстоятельств

Как вы понимаете, при помощи этого задания невозможно проверить, знают испытуемые, сколько у человека ребер или нет. Поэтому, строго говоря, нет смысла включать такой тест в материалы контроля. Отдельный разговор о качестве подобранных автором вариантов ответа. Особенно интересно влияние жизненных обстоятельств на количество ребер. Но правила подбора неправильных ответов (дистракторов) к тестовым заданиям мы рассмотрим позже.

Основные правила подбора материала для теста следующие:

1. Материал, заложенный в тест, должен соответствовать содержанию темы тестирования и программы учебного курса.
2. В тест включается только то содержание темы, которое является признанным, объективно истинным и поддается рациональной аргументации. Спорные точки зрения в тестовые задания включать не рекомендуется. Суть тестовых заданий заключается как раз в том, что они требуют четкого, заранее известного преподавателям ответа, признанного ими в процессе разработки заданий объективно истинным.
3. Уровень детализации содержания теста зависит от целей тестирования. Если вы планируете использовать тесты для сравнения уровня подготовки тестируемых в какой-то области (например, для конкурсного отбора соискателей вакансии или кандидатов на обучение), то уровень детализации материала должен быть низким. В заданиях такого теста достаточно отобразить только наиболее значимые элементы содержания.
4. Если же тесты предназначены для выяснения, насколько успешно испытуемый освоил учебный материал (курс, раздел, тему) и освоил ли он его вообще, то уровень детализации области содержания должен быть довольно подробным. Это позволит сделать вывод о знаниях каждого испытуемого, при необходимости аттестовать его, а также проанализировать, какой материал лучше или хуже освоили испытуемые.
5. Вместе с тем в тест необходимо включать те элементы содержания, которые можно отнести к наиболее важным, без которых знания по заявленной теме становятся несущественными. Нет смысла перегружать тест второстепенными деталями, не имеющими большого значения. 
6. Если с помощью тестовых заданий планируется оценивать знания по всему учебному курсу, следует равномерно включить в итоговый тест задания по всем изучаемым темам курса, убедившись в том, что они охватывают все самые важные аспекты предметной области и в правильной пропорции.

   Например, если вы составляете тесты по курсу «Microsoft Excel» и включаете в него задания, посвященные исключительно созданию сводных таблиц и диаграмм, то при помощи этих тестов вы явно не сможете полноценно оценить уровень знаний по всему курсу в целом. 

7. Не всякое содержание можно выразить в форме тестового задания, то есть тесты – не универсальная форма для проверки знаний. 

Сколько времени нужно выделить для тестирования

Сидеть над тестом невозможно бесконечно долго: начало и завершение тестирования должны быть фиксированными. К сожалению, довольно часто временной интервал для этого процесса выбирается спонтанно. И если ошибиться – дать слишком мало времени или слишком много, эффективность теста снизится.

Тестирование в спешке приведет к тому, что как «слабые», так и «сильные» испытуемые не успеют выполнить все задания, и мы не поймем – тестируемый не выполнил задание, поскольку не знал ответа, или вообще не успел к нему обратиться.

Если времени вагон и маленькая тележка, «сильные» испытуемые, успевшие быстро пройти тестирование, начинают отвлекать других, подсказывать ответы, что нарушает процедуру тестирования (мы не соблюдаем правило равных условий для всех испытуемых). 

Если человек проходит тестирование в одиночестве или тестируется онлайн, при избытке времени он будет долго сидеть над заданиями, не решаясь выбрать ответ. Это вызовет утомление, снижение концентрации внимания, расслабление, что также снижает точность тестирования.

Всегда нужно иметь в виду, что испытуемые устают. А значит, тестирование не должно занимать слишком много времени, что напрямую связано с объемом самого теста. Практика показывает, что объем осознанно воспринимаемой информации начинает существенно снижаться примерно через 40-45 минут с начала тестирования (Ким В. С. Тестирование учебных достижений. – Уссурийск, 2007, стр. 29-35). 

Общее время тестирования определяется количеством и сложностью заданий. Некоторые преподаватели используют, например, такие методики расчета времени тестирования: 

1. Время, затраченное преподавателем на выполнение составленного им теста, умножить на 3.
2. Суммировать время, необходимое для выполнения каждого задания:

   • задание закрытой формы с выбором одного правильного ответа – примерно 10 секунд;
   • задание более сложных форм – в среднем от 30 секунд до 1 минуты.

Однако бывает, что теоретически рассчитать время тестирования невозможно, поэтому рекомендуется использовать эмпирические данные по результатам первичной апробации теста.

Составление тестовых заданий закрытой формы 

А теперь давайте рассмотрим конкретные примеры и поймем, как составлять свои тесты. В фокусе нашего внимания – тестовые задания закрытой формы.

В таких тестовых заданиях выделяют следующие элементы:

• инструкцию (содержит общие требования к выполнению задания – рис. 1);
• основную часть (задание, постановка проблемы – рис. 2);
• варианты ответа (верный ответ(ы) и ответы-обманки – рис. 3).

Рекомендуется, чтобы задания в тесте представляли собой не вопросы, а утверждения, которые в зависимости от ответов могут превращаться в истинные или ложные высказывания. 

Среди готовых ответов правильным чаще всего бывает только один, хотя не исключаются и варианты с выбором нескольких правильных ответов.

Неправильные, но похожие на правильные (и поэтому правдоподобные) ответы называются дистракторами (от англ. distract – отвлекать). Они используются для отвлечения внимания от правильного ответа тех, кто либо совсем не знает правильный ответ, либо пытается угадать его во время тестирования. Сделать неправильные ответы правдоподобными – одна из самых сложных задач разработчика теста.

Отдельно от тестовых заданий в программу тестирования вводится эталон выполнения заданий и разрабатываются критерии оценки.

Если вы проводите тестирование по старинке, в письменном виде, то вам потребуется ответник, трафарет для проверки ответника и эталон выполнения тестового задания. 

Как оформить тестовые задания

Тестовое задание должно быть оформлено таким образом, чтобы облегчить тестируемому работу над ним. 

Существует несколько вариантов дизайна тестовых заданий закрытой формы, но все сходятся в одном: все элементы тестового задания тем или иным образом должны быть графически выделены.

Как написать инструкцию к тестам 

Инструкция – это общие требования к выполнению тестового задания. Она должна устранить все вопросы испытуемых об оформлении своих ответов. Кроме того, в тексте инструкции оговаривают специфику задания, например, указывают количество правильных ответов в тесте (один/несколько).

При написании инструкции используют стандартные формулировки. Формулировка инструкции зависит от формы тестового задания, количества правильных ответов и пр.

Для тестовых заданий с выбором одного правильного ответа в зависимости от способа проведения тестирования можно предложить следующие варианты инструкций.

• Выберите один правильный ответ.
• Внимательно прочитайте текст задания и выберите верный ответ из списка.
• Выпишите номер тестового задания и индекс правильного ответа. 
• Обведите кружком букву (номер) правильного ответа.
• Для ответа нажмите клавишу с буквой (номером) правильного ответа.

Иногда, по замыслу автора, при разработке задания закладываются несколько правильных ответов, среди которых есть более и менее предпочтительные. В этом случае задание может сопровождаться следующей инструкцией: «Выберите наиболее правильный ответ».

Для тестовых заданий с выбором нескольких правильных ответов в зависимости от способа проведения тестирования можно предложить следующие варианты инструкций.

• Выберите несколько правильных ответов.
• Выберите все правильные ответы.
• Отвечая на задание теста, нажимайте на клавиши с буквами (номерами) всех правильных ответов.

Для тестовых заданий на выбор неправильного ответа инструкция может быть такой: «Выберите неправильный ответ».

Для группы однотипных заданий допускается делать одну инструкцию, которая помещается в начале теста или данной группы заданий в тесте.

Как правильно сформулировать основную часть задания 

Эффективность и технологичность теста во многом зависят от того, насколько грамотно сформулированы задания. Если тестируемый не поймет смысл вопроса, ему придется отвечать наугад. А это уже минус к объективности конечного результата. Потому важно тщательно проработать каждое задание. Вот несколько рекомендаций.

1. Рекомендуется, чтобы задания в тесте были формулированы в форме утверждений, которые после ответов испытуемых естественным образом превратятся в истинные или ложные высказывания (рис. 1).

Если продолжить утверждение из основной части этого задания правильным ответом (в данном случае это вариант Б), получится истинное высказывание: Признаком протекания химической реакции между оксидом меди и водородом является изменение цвета. При «подстановке» неправильного ответа высказывание получится ложным. 

По мнению многих отечественных тестологов (В.С. Аванесова, М.Б. Челышковой, В.С. Кима и др.), смысл тестового утверждения улавливается всегда лучше, чем смысл вопроса, потому что в тестовых утверждениях нет ни одного лишнего слова и даже знака, в то время как вопрос требует ряда дополнительных слов и знаков для выражения требуемого смысла, значения и интонации. Вопросы и ответы на них иногда бывают столь неопределенными и многословными, что для выявления их истинности требуются большие затраты времени и сил, в то время как технологичная методика тестирования предполагает четкую и быструю дифференцируемость ответов.

Действительно, если трансформировать задание, составленное в форме вопроса, в логическое утверждение, мы увидим, что задание уж точно не стало хуже, а даже выиграло – стало более кратким, понятным, лаконичным. После выбора ответа такое утверждение превратится в законченное высказывание, истинность или ложность которого легко поддается пониманию и оценке. 

Пример 1. Задание в вопросительной форме:

Инструкция

: Выберите один правильный ответ.
С каким из названных событий связано окончание периода разрядки международной напряженности в 1970-е гг.?

1. начало Корейской войны
2. разрыв отношений с Югославией
3. конфликт с Китаем
4. ввод советских войск в Афганистан

То же задание в виде логического утверждения:

Окончание периода разрядки международной напряженности в 1970-е гг. связано c

1. началом Корейской войны
2. разрывом отношений с Югославией
3. конфликтом с Китаем
4. вводом советских войск в Афганистан

Пример 2. Задание в вопросительной форме:

Инструкция

: Выберите несколько правильных ответов.
Какие из перечисленных примеров относят к ароморфозам?

1. возникновение теплокровности у позвоночных
2. развитие трехкамерного сердца у земноводных
3. формирование торпедообразного тела у акул
4. развитие зародыша внутри матки
5. появление рогов у копытных
6. формирование крыльев у летучих мышей

То же задание в виде логического утверждения:

К ароморфозам относят

1. возникновение теплокровности у позвоночных
2. развитие трехкамерного сердца у земноводных
3. формирование торпедообразного тела у акул
4. развитие зародыша внутри матки
5. появление рогов у копытных
6. формирование крыльев у летучих мышей

Подобной трансформации легко поддается большинство заданий, сформулированных в вопросительной форме. Иногда возникают ситуации, когда, казалось бы, задание формулируется только в виде вопроса. Однако после тщательного анализа цели задания и его содержания все же удается подобрать утвердительную форму задания.

Конечно, утверждение об использовании в заданиях исключительно утвердительной формы не категорично. К тому же иногда встречаются задания, в которых вопросительная форма выглядит удобнее и короче. 

Вопросительная форма заданий по-прежнему используется при составлении тестов и в России, и за рубежом, и имеет много сторонников. Выбор остается за вами. Главное – не забывать, что выбранная вами форма задания должна быть максимально понятна для испытуемых.

Лично я являюсь сторонником формулировки заданий в виде утверждений, считаю эту форму наиболее удачной, использую только ее и ничего с собой поделать не могу.   

2. Текст задания должен содержать достаточную, недвусмысленную и релевантную информацию для ответа. 

3. Формулировка задания должна быть грамотной, согласованной с формой вариантов ответа (простите за капитанство).

4. Формулировка задания должна быть предельно лаконичной, но не в ущерб пониманию сути задания. Необходимо исключить повторы слов и, тем более, целых фраз. Чем лаконичнее задание, тем лучше оно воспринимается. 

5. Рекомендуется, чтобы основная часть задания состояла из одного предложения (не более 7-8 слов), а во всем задании было не более одного придаточного предложения. Эта рекомендация подходит, конечно, не ко всем случаям. Например, тестовое задание может представлять собой кейс/ситуационную задачу, тогда одним предложением точно не обойтись.

6. Если задание сформулировано в вопросительной форме, предпочтительнее применять прямые вопросы, представляющие собой полное предложение с вопросительным знаком в конце.

7. В основной части задания не должна присутствовать дополнительная информация, не существенная для поставленной проблемы.

8. Из текста задания нужно исключить все вербальные ассоциации, по которым можно догадаться о правильном ответе.

9. Стоит исключить из формулировки задания частицу «не». А если НЕ получается, ее надо выделить прописными буквами (как в этом предложении).

10. Исключаются задания, содержащие оценочные суждения тестируемого: «на ваш взгляд», «по вашему мнению», «что вы думаете…», «согласны ли вы с …», «как бы вы сформулировали…» и т.п. 

11. Рисунки, графики, схемы, используемые в задании, должны соответствовать тексту (рис. 2). И, конечно же, присутствие графических объектов в задании должно быть оправдано. Не стоит «добавлять картинку» просто для красоты. 

12. Элементы рисунка, графика, схемы рекомендуется обозначать по часовой стрелке (рис. 3).

13. В большинстве случаев варианты ответов замыкают задания (так было и в примерах выше), образуя завершенное истинное или ложное высказывание. Но иногда ответы приходится ставить в середине или за одно-два слова от конца содержательной основы задания теста. Тогда можно использовать такой вариант:

Инструкция

: Выберите один правильный ответ.
Невская битва произошла в … году.

1. 1198
2. 1240
3. 1242
4. 1245

14. Ответ на одно тестовое задание не должен служить ключом к правильным ответам на другие задания теста. Это нарушает условие локальной независимости заданий. В этом случае невозможно сделать корректный вывод о том,  знает ли испытуемый ответ на второе и последующие задания, или он не справился с ними потому что неправильно ответил на первый вопрос. 

Как подобрать дистракторы

К каждому тестовому заданию нужно подобрать правдоподобные неправильные варианты ответа (дистракторы). Это одна из самых сложных задач, стоящих перед составителем тестов. Перед вами основные рекомендации по подбору дистракторов: 

1. Все предложенные в задании дистракторы должны быть правдоподобными, теоретически вероятными.

Наиболее хороши дистракторы, подобранные на основе типичных ошибок, которые допускают тестируемые, или на основе распространенных заблуждений.

2. Все дистракторы к заданию должны быть одинаково привлекательными для тестируемых, не знающих правильного ответа.

Дистрактор, который никто не выбирает в качестве правильного ответа, обычно называют неработающим. Если в задании имеется хотя бы один неработающий дистрактор, удалите его, и вы сразу увидите реальное, а не формальное число ответов к заданию теста. 

Если все дистракторы в задании не работают, все испытуемые выполнят даже сложное задание верно, выбрав единственный правдоподобный ответ. Например, такое задание: 

Инструкция

: Выберите один правильный ответ.
Во вращении предплечья наружу участвует

1. двуглавая мышца плеча
2. двуглавая мышца бедра 
3. икроножная мышца
4. прямая мышца живота
5. собственно жевательная мышца

Даже не будучи знатоком данной предметной области, нетрудно догадаться, что мышцы, расположенные на нижней конечности, животе или черепе, не могут приводить в движение предплечье. Получается, что в тесте нет ни одного работающего дистрактора. Имеется всего один работающий вариант ответа, его и выберут испытуемые как единственно правильный. 

Вы спросите: «А что же здесь плохого»? Как мы писали выше, педагогические тесты создаются для объективной оценки структуры и качества знаний. А о какой объективной оценке можно говорить, если правильный ответ можно просто угадать, не имея совсем никакого представления о предмете? Конечно, если целью тестирования было узнать, отличает ли испытуемый живот или бедро от предплечья, то можно сказать, что все прошло успешно. Но все же перед тестами обычно ставятся более серьезные задачи.    

Если в предложенном задании мы заменим неработающие дистракторы на правдоподобные, теоретически вероятные (все перечисленные мышцы тем или иным образом двигают предплечье), справиться с ним так просто будет нельзя:

Во вращении предплечья наружу участвует

1. плечевая мышца
2. двуглавая мышца плеча
3. трехглавая мышца плеча
4. локтевая мышца
5. круглый пронатор

3. Дистракторы должны быть однородными, подобранными по общему (единому) основанию. 

Пример 1: Задание с однородными дистракторами

Инструкция

: Выберите один правильный ответ.
Телиоспоры возникают из

1. урединиоспор
2. эциоспор
3. базидиоспор
4. пикниоспор

Здесь все дистракторы подобраны по одному основанию, т.к. все они отвечают на вопрос «из чего?» и характеризуют то, из чего могут возникнуть телиоспоры.  

А в следующем задании дистракторы подобраны неудачно. 

Пример 2: Задание с неоднородными дистракторами

Инструкция

: Выберите несколько правильных ответов.
Телиоспоры возникают

1. из урединиоспор
2. из эциоспор
3. поздней осенью на том же мицелии, на котором летом формировались урединиоспоры
4. весной в результате слияния дикариона и последующего мейоза

В этом задании два первых ответа выбраны по одному основанию т.к. все они отвечают на вопрос «из чего?». Третий ответ подобран по другому основанию, поскольку соответствует вопросам «когда?» и «где?». 

Последний ответ не совпадает по основанию выбора ни с одним из предыдущих, он отвечает на вопросы «когда?» и «в результате чего?».

Самая частая причина появления в заданиях неоднородных дистракторов понятна – при невозможности подобрать нужное число дистракторов по одному основанию автор теста увеличивает их число, включая дополнительные, выбранные по другому основанию ответы. 

Иногда причиной является желание автора проверить с помощью одного задания как можно больше знаний испытуемых. Возможно, это оправдано спецификой предмета, однако некорректно с точки зрения требований тестовой технологии. 

Тестовое задание должно проверять один элемент знания. Если это не так, то становится неясным, с каким именно элементом знания тестируемый не справляется, в чем заключена причина невыполнения задания.

4. Все ответы должны быть параллельными по конструкции и грамматически согласованными с основной частью задания теста.

5. Все повторяющиеся в вариантах ответа слова (как в примере ниже) следует перенести в формулировку заданий.

Инструкция

: Выберите один правильный ответ.
Заштрихованная территория на карте России показывает районы

1. газовых месторождений
2. нефтяных месторождений
3. месторождений каменного угля
4. месторождений калийной соли

Вот что получится после небольшой правки этого примера:

Инструкция

: Выберите один правильный ответ.
Заштрихованная территория на карте России показывает районы месторождений

1. газовых
2. нефтяных
3. каменного угля
4. калийной соли

6. Рекомендуется использовать длинные задания и короткие ответы. В противоположном случае на прочтение и анализ ответов тратится слишком много времени.

7. Из числа неправильных исключаются ответы, вытекающие один из другого.

8. Ни один из дистракторов не должен быть частично правильным ответом, который при определенных условиях превратится в правильный ответ.

9. Ответы не должны отрицать смысл самого задания. «Почему? – спросите вы, – ведь так часто делают». Давайте разберемся на примере следующего задания:

Инструкция

: Выберите один правильный ответ.
PDF-файл можно преобразовать в документ Word, если на вкладке «Файл» выбрать команду

1. Открыть
2. Сохранить как 
3. Экспорт
4. PDF-файл нельзя преобразовать в документ Word

В этом примере четвертый ответ прямо противоречит основной части, утверждающей существование возможности преобразовать PDF-файл в документ Word. Налицо явная логическая ошибка. В задании же не спрашивается, можно ли преобразовать, а утверждается, что можно, а варианты ответов представляют собой перечисление способов преобразования.   

Если четвертый ответ – дистрактор, то в качестве правдоподобного ответа его вряд ли выберет хотя бы один тестируемый. Тогда этот ответ как неработающий дистрактор необходимо удалить из теста.

Если именно четвертый ответ является верным, все задание будет нерабочим, т.к. большинство тестируемых увидят логическую несообразность формулировок и пропустят задание, посчитав его ошибкой разработчика теста.

Если цель задания – выяснить, знает ли испытуемый, можно ли вообще преобразовать PDF-файл в документ Word или нет, лучше сформулировать вопрос по-другому, без нарушения логики: 

Преобразовать PDF-файл в документ Word

1. можно
2. нельзя

10. Не следует использовать в заданиях ответы типа «все вышеперечисленные», «ни один из вышеперечисленных» или, того хуже, – «все ответы неправильные» и «правильного ответа нет». Эта рекомендация, кстати, так же часто вызывает вопросы и несогласие аудитории, как и предыдущая. 

С точки зрения большинства тестологов, применение подобных ответов не оправдано по следующим причинам:

• повышение вероятности угадывания правильного ответа, так как чаще всего это будет неработающий дистрактор, добавленный составителем «для количества» при трудностях с подбором качественных дистракторов;
• нарушение логического закона исключенного третьего – если инструкция предписывает выбрать один верный ответ, то в задании он должен быть. Это придает однозначность замыслу самого задания и не допускает противоречивых толкований у испытуемых.

11. Не рекомендуется использовать слова «всегда», «никогда», «ни одного» и т.п., так как в отдельных случаях они способствуют угадыванию.

12. Частота выбора одного и того же номера места для правильного ответа в различных заданиях теста должна быть примерно одинакова или номер места для правильного ответа выбирается в случайном порядке.

13. Дистракторы из одного задания не используются в качестве ответов к другим заданиям теста.

14. Все ответы к одному заданию должны быть примерно одной длины. Если это трудновыполнимо, возможен вариант, когда в задании половина длинных ответов, половина коротких. Это нужно для того, чтобы исключить вероятность угадывания правильного ответа по признаку его полноты или краткости. Многие разработчики тестов грешат тем, что в их заданиях правильные ответы почти всегда или длиннее, или короче неправильных. Эта тенденция очень быстро «считывается» испытуемыми и делает общий результат теста необъективным. Следующая рекомендация имеет такое же обоснование.

15. Правильный ответ не должен быть длиннее других.

16. Дистракторы располагаются в логической последовательности: числа – по возрастанию, буквы – по алфавиту. Это удобнее при поиске тестируемым правильного ответа.

17. Количество дистракторов к заданию подбирается таким образом, чтобы задание не было слишком громоздким, но и чтобы исключить большую вероятность угадывания правильного ответа. Поэтому чаще всего в заданиях бывает три или четыре дистрактора и один правильный ответ.

В отдельных случаях, например, в заданиях с выбором нескольких правильных ответов, количество дистракторов может достигать шести–семи.

18. Число дистракторов и правильных ответов в разных заданиях может быть разным. Оно не должно быть одинаковым во всех заданиях теста.

Источник

По какому принципу придумывают тестовые задания

Из десяти принципов разработки тестовых заданий закрытой формы, которые выделяет В. С. Аванесов, предлагаю рассмотреть основные. Для наглядности будем это делать на примерах.

1. Принцип противоречия применяется при создании заданий с двумя вариантами ответов. Здесь один ответ отрицает другой. Например:

Инструкция

: Выберите один правильный ответ.
Поощрения в трудовую книжку

1. записываются
2. не записываются

2. Принцип противоположности ответов близок по смыслу к принципу противоречия, но при противоречии используется отрицание, а при противоположности один ответ заменяется другим, антонимичным по смыслу. Например:

Инструкция

: Выберите один правильный ответ.
С увеличением заряда ядра активность щелочных металлов

1. возрастает
2. убывает

Возможность промежуточных состояний при использовании принципа противоречия позволяет увеличить число ответов, например, до трех. Например:

Инструкция

: Выберите один правильный ответ.
При движении тягового органа конвейера реле скорости

1. включено
2. выключено
3. заблокировано

3. Тесты, основанные на принципе однородности, содержат ответы, относящиеся к одному роду, виду, или отображают основные стороны, грани явления. Например:

Инструкция

: Выберите один правильный ответ.
Основателем андрагогики как науки является

1. Ноулз
2. Джарвис
3. Холтон
4. Ушинский

Инструкция

: выберите несколько правильных ответов.
Буква «о» пишется в словах

1. пл_вец
2. пок_рить вершину
3. распол_гать 
4. осн_щенный
5. ум_лять значение

4. Принцип кумуляции означает, что второй ответ вбирает в себя (аккумулирует) содержание первого, третий – содержание второго и т.д.

Пример:

Инструкция

: Выберите один правильный ответ.
Чтобы задать движение точки естественным способом, надо знать

1. траекторию
2. траекторию и закон движения
3. траекторию, закон движения, начало отсчета
4. траекторию, закон движения, начало отсчета, скорость

Тестируемые, привыкшие давать полные и правильные ответы, выбирают обычно последний ответ в таких заданиях, ошибочно полагая, что он всегда самый правильный. Поэтому при разработке заданий по принципу кумуляции полезно иметь большую часть правильных ответов не на последнем месте. 

5. Принцип сочетания. Используется сочетание слов (знаков) по два или по три, реже четыре, в каждом ответе.

Пример 1: сочетание более или менее однородных и правдоподобных пар ответов

Инструкция

: Выберите один правильный ответ.
Ф. Шопен писал

1. оперы и симфонии
2. балеты и оратории
3. мазурки и ноктюрны

Пример 2: сочетание одного слова (понятия) с несколькими другими

Инструкция

: Выберите один правильный ответ.
НЕ имеют ядра клетки крови

1. эритроциты и лейкоциты
2. эритроциты и тромбоциты
3. эритроциты и лимфоциты
4. эритроциты и базофилы

Пример 3: сочетание ответов по правилу цепочки, когда последнее слово в первом ответе становится первым во втором ответе, последнее во втором – первым в третьем и т.д.)

Инструкция

: Выберите один правильный ответ.
Служебными частями речи являются

1. предлоги, союзы, частицы
2. частицы, союзы, местоимения
3. местоимения, частицы, предлоги

6. При использовании принципа градуирования ответы располагаются по возрастанию (увеличению) или по убыванию (уменьшению). Этот принцип применим для заданий с тремя и большим числом ответов. Например:

Инструкция

: Выберите один правильный ответ.
Растворимость газов при повышении температуры

1. увеличивается
2. остается без изменений
3. уменьшается

Согласно ч. 3 ст. 5.63 КоАП РФ, нарушение должностным лицом порядка или сроков рассмотрения жалобы влечет наложение административного штрафа в размере … рублей.

1. от трех тысяч до пяти тысяч 
2. от пяти тысяч до десяти тысяч 
3. от десяти тысяч до пятнадцати тысяч 
4. от двадцати тысяч до тридцати тысяч 

7. Принцип формулирования заданий с ответами, правильными в различной мере, требует изменения инструкции, содержания задания и логики подбора ответов.

Инструкция, как мы уже говорили, обычно пишется так: Выберите наиболее правильный ответ.

Задача таких заданий – проверить сопоставительные знания, а ответы формулируются так, чтобы был реальный выбор между ответами, правильными в разной степени. Например:

Инструкция

: Выберите наиболее правильный ответ.
Зигота – это

1. одна яйцеклетка
2. оплодотворенная яйцеклетка
3. диплоидная клетка, образующаяся в результате оплодотворения
4. одноклеточная стадия развития многоклеточного организма млекопитающих

В этом задании наиболее правильным считается третий ответ (он наиболее емко и точно описывает все характеристики зиготы), следующий по степени правильности – второй ответ (он содержит совершенно правильное, но менее полное определение зиготы), затем четвертый (потому что зиготы образуются не только у млекопитающих). На последнем месте по степени правильности находится первый ответ – он самый неполный, ведь одной яйцеклетки для образования зиготы явно недостаточно.

Задания на выбор наиболее правильного ответа разрабатывать довольно сложно: наиболее правильный ответ далеко не всегда должен быть самым полным. В противном случае тестируемый при выполнении задания будет выбирать правильный ответ только по признаку полноты. 

Составили тест? Не поленитесь и пройдите по этому чек-листу.

Проверка качества тестовых заданий

• Соответствует ли задание целям тестирования?
• Все высказывания логичны?
• Все формулировки однозначны и лаконичны?
• Технологичен ли тест? (Задания становятся технологичными, если их содержание точно и быстро понимается испытуемыми, и если форма заданий способствует процессу компьютеризации тестирования)
• Правильно ли выбрана форма задания?
• Содержание корректно?
• Правила оценки ответов разработаны заранее и соответствуют форме теста?
• Правильно ли расположены элементы задания?
• Инструкции одинаковы для всех тестируемых?
• Инструкция соответствует форме и содержанию задания?

В этой статье мы обсудили основные аспекты составления тестовых заданий закрытой формы с одним или несколькими правильными ответами. Благодарю вас за внимание и терпение и надеюсь, что эта статья будет полезной для вас. 

Если вы считаете, что стоит продолжить цикл подобных статей и поговорить о методике составления тестовых заданий других видов, напишите, пожалуйста, об этом в комментариях. А если вам нужны готовые инструменты оценки качества обучения, обращайтесь к нам в «Сетевую Академию ЛАНИТ». Будем рады помочь.

МЕТОДИЧЕСКИЕ
РЕКОМЕНДАЦИИ

по
составлению и оформлению тестовых заданий

ВВЕДЕНИЕ

 Один из
элементов системы оценки качества – тестирование учебных достижений обучающихся.
Система тестирования – универсальный инструмент определения уровня обученности обучающихся
на всех этапах образовательного процесса, в том числе для оценки уровня
остаточных знаний.

Тест обладает
способностью сравнивать индивидуальный уровень знания каждого обучающегося с
некими эталонами, уровень знания отражается в тестовом балле испытуемого.
Индивидуальные результаты тестирования можно сравнить с результатами других обучающихся
этой же группы и проранжировать их, можно сравнить результаты тестирования
нескольких групп и т.д.

С помощью теста можно
оценить структуру знаний, то есть установить наличие последовательности
в усвоенных обучающимися знаниях, отсутствие пробелов.

Методические
рекомендации по составлению и оформлению тестовых заданий имеют целью
определить единые требования к составлению тестов по учебным дисциплинам/МДК,
предназначенных для проверки уровня и структуры знаний обучающихся техникума.

Объективность
результатов тестирования, в первую очередь, зависит от качества тестовых материалов,
поэтому при разработке необходимо учитывать комплекс требований, диктуемых
положениями теории и практики тестирования.

Методические
рекомендации помогут унифицировать тестовые материалы. Тестирование —
лишь один из способов оценки качества подготовки обучающихся. Тестирование
не заменяет, а дополняет другие формы диагностики, контроля и оценки уровня
обученности.

Методические
рекомендации призваны способствовать:

— формированию культуры тестирования в
системе оценки качества обученности обучающихся;

— повышению объективности процессов и
результатов оценки учебных достижений обучающихся;

— созданию необходимых предпосылок и
условий для совершенствования содержания и структуры образовательного процесса;

—
повышению уровня квалификации педагогов, непосредственно разрабатывающих и
применяющих тестовые материалы.

1. СЛОВАРЬ ТЕРМИНОВ

Тестирование —
один из наиболее эффективных методов выявления и оценки уровня учебных
достижений обучающихся, осуществляемый посредством стандартизированных
материалов — тестовых заданий; технологический процесс, реализуемый в форме
алгоритмически упорядоченного взаимодействия студента с системой тестовых
заданий и завершающийся оцениванием результатов.

Тестовое задание (ТЗ)
— варьирующаяся по элементам содержания и по трудности единица контрольного
материала, сформулированная в утвердительной форме предложения с неизвестным.
Подстановка правильного ответа вместо неизвестного компонента превращает
задание в истинное высказывание, подстановка неправильного ответа приводит к
образованию ложного высказывания, что свидетельствует о незнании студентом
данного учебного материала.

Тест —
система заданий возрастающей трудности специфической формы, позволяющая
качественно и эффективно определить уровень и оценить структуру
подготовленности тестируемого.

Контролирующий тест
— тест, выступающий в качестве метода или способа измерения уровня и структуры
знаний обучающихся.

Банк тестовых заданий
– логически упорядоченный набор тестовых заданий, позволяющих генерировать
множество тестов.

Спецификация теста
— система характеристик теста, отражающая его содержание и структуру.

Надежность теста –
характеристика теста, свидетельствующая о постоянстве эмпирических измерений,
то есть многократном повторении.

Валидность теста —
действительная способность теста измерять ту характеристику, для диагностики
которой он заявлен.

Дистрактор —
близкий искомому по своему смыслу вариант ответа, но не являющийся таковым.

Эталон – это
правильный и полный ответ или метод выполнения заданной деятельности.

II. ФОРМЫ
ТЕСТОВЫХ ЗАДАНИЙ

По
классификации тестов, предложенной Аванесовым В.С., можно выделить тестовые
задания четырех основных форм:

·        
задания
закрытой формы, в которых испытуемый выбирает один или несколько
вариантов ответов из списка предложенных;

·        
задания
открытой формы, требующие от испытуемого самостоятельного ответа (в
текст задания вписывается слово, вставляется формула и т.д.);

·        
задания
на установление соответствия, выполнение которых связано с выявлением
соответствия между элементами двух множеств;

·          
задания
на установление правильной последовательности, в которых требуется
указать правильный порядок действий или процессов.

Задания закрытой
формы:

—       задания с
выбором одного правильного ответа (предлагается
несколько ответных альтернатив, но только один ответ – правильный);

—       задания с
выбором наиболее правильного ответа (предлагается несколько
ответных альтернатив, в числе которых могут быть и неправильные, и правильные,
но в разной степени. От испытуемого требуется выбрать наиболее правильный
ответ);

—       задания с
выбором всех правильных ответов (предлагается несколько ответных
альтернатив, в числе которых может быть несколько правильных. Испытуемый должен
выбрать все правильные ответы).

 Задания закрытой формы
сопровождаются инструкцией: «Запишите номер/-а (цифру/-ы, букву/-ы)
правильного/-ых ответа/-ов».

Задания
открытой формы

В
заданиях открытой формы готовые ответы не даются, их должен получить или
придумать сам испытуемый. Задания открытой формы бывают двух типов:

—       задания на
дополнение;

—       задания со
свободно конструируемым ответом.

Для
задания открытой формы рекомендуется использовать инструкцию, состоящую из
слов: «Дополните фразу», «Дайте определение..» и т.п..

Задания
на установление соответствия

Они могут быть
двух типов:

—       Соответствия
взаимно-однозначные: любому элементу из левого столбца соответствует только
один элемент из правого столбца и наоборот;

—       Соответствия
не взаимно-однозначные: различным элементам из левого столбца может
соответствовать один и тот же элемент из правого столбца.

К
заданиям предлагается стандартная инструкция, состоящая из двух слов:
«Установите соответствие».

Задания
на установление правильной последовательности

Эта
форма заданий проверяет определенные знания: алгоритмические, процессуальные,
процедурные, технологические.

Стандартная инструкция к заданиям этой формы имеет вид
«Установите правильную последовательность».

Сопоставительный
анализ характеристик тестовых заданий

 

Характеристики	Задания закрытой формы	Задания открытой формы	Задания на установление соответствия	Задания на установление последовательности
Проверка знания фактов	Годны	Годны	Годны	Годны
Применение знаний по образцу	Годны	Годны	Годны	Годны
Применение знаний в нестандартных ситуациях	Негодны	Годны	Негодны	Годны
Простота конструирования	Есть	Есть	Нет	Нет
Исключение угадывания	Не исключено	Исключено	Не исключено	Не исключено
Объективность оценки	Да	Нет	Да	Да
Исключение описок	Нет	Да	Нет	Нет
Возможность оригинального ответа	Нет	Да	Да/Нет	Нет

III. Уровни сложности тестовых заданий

ТЗ должны быть различного уровня сложности
(классификация тестов по В.С. Беспалько).

Первый
уровень
– ознакомительный (узнавание ранее изученных объектов, свойств): тесты
на узнавание, т.е. отождествление объекта и его обозначения (задания на
опознание, различение или классификацию объектов, явлений и понятий,
соотнесение). Вопросы задаются в открытой и закрытой формах по основным дидактическим
единицам дисциплины («да» — «нет», «выбрать один или несколько правильных
ответов», «соотнести объекты и их характеристики, свойства»).

Второй
уровень
— репродуктивный (выполнение деятельности по образцу, инструкции):
тесты-подстановки, в которых намеренно пропущено слово, фраза,
формула или другой какой-либо существенный элемент текста, и конструктивные
тесты, в которых обучающимся в отличие от теста-подстановки не
содержится никакой помощи даже в виде намеков и требуется дать определение
какому-либо понятию, указать случай действия какой-либо закономерности и т.д. В
качестве тестов второго уровня могут использоваться и типовые задачи,
условия которых позволяют «с места» применять известную разрешающую их
процедуру (правило, формулу, алгоритм) и получать необходимый ответ на
поставленный в задаче вопрос.

Третий
уровень
– продуктивный (планирование и самостоятельное выполнение
деятельности, решение проблемных задач): нетиповые задачи на
применение знаний в реальной практической деятельности и тест «Черный
ящик».

Условия нетиповой задачи формулируются близкими к тем,
которые имели место в реальной жизненной обстановке. Решение такой  задачи
состоит в сведении ее к типовой путем преобразования известных формул или
нахождения алгоритма решения. Проверяется деятельность в нестандартной ситуации
по аналогии, сходству между изученными и не изучавшимися ранее элементами.

Тест «Черный ящик»
представляет собой проблемную ситуацию, решение которой содержится в известных
обучающимся знаниях и умениях. Опираясь на них, обучающиеся
решают предложенное задание. («Определите то, что находится в чёрном ящике:
Через него пропускают переменный ток. Чем меньше его частота, тем меньше
сопротивление того. Что в чёрном ящике?» Эталон: конденсатор).

IV.
ТРЕБОВАНИЯ К ТЕСТОВЫМ ЗАДАНИЯМ

Общие требования

1.      Соответствие
ФГОС и рабочей программе учебной дисциплины.

2.      Содержание
ТЗ должно отражать знания, умения, практический опыт, которые необходимо
проверить.

3.      Содержание
каждого ТЗ должно охватывать какую-либо одну смысловую единицу, то есть должно
оценивать что-то одно.

4.      Наличие
ТЗ различной формы и уровня сложности.

5.      Формулировка
задания должна быть не в форме вопроса, а в форме утверждения. Предложение
должно быть сформулировано грамотно, коротко, четко, ясно, без повторов,
малопонятных слов и символов, без использования отрицательных частиц. Не
рекомендуется начинать ТЗ с предлога, союза, частицы.

6.      Наличие
правильного ответа к разработанному заданию.

7.      Среднее время,
отводимое на выполнение одной задачи (вопроса) теста обучающимся,  должно быть
минимум 1 минута, а максимум – 3-5 минут.

8.      Соблюдение
единого стиля оформления заданий, входящих в один тест.

В дополнение к 
общим требованиям существует еще ряд других, обусловленных  спецификой
выбранной тестовой формы.

Требования к заданиям закрытой формы:

—      Основная
часть задания формулируется в форме утверждения, которое обращается в истинное
или ложное высказывание после подстановки одного из вариантов ответа.

—      Задание
формулируется предельно кратко, как правило, в форме предложения, состоящего из
7-8 слов. В основную часть задания следует включать как можно больше слов,
оставляя для ответа не более 2-3 наиболее важных, ключевых для данной проблемы
понятий.

—      Из текста
задания необходимо исключать все ассоциации, способствующие выбору правильного
ответа с помощью догадки.

—      ТЗ
закрытой формы должны содержать не более пяти вариантов ответов на каждый
вопрос (оптимально – 4 варианта).

—      Среди
предложенных вариантов ответа может быть как один, так и несколько верных.

—      В ответах
не рекомендуется использовать слова «все», «ни одного», «никогда», «всегда» и
т.п., так как в отдельных случаях они способствуют угадыванию правильного
ответа.

Примеры (уровень
сложности  — 1):

1. Преобразование
электрических колебаний в звуковые происходит в …

а) микрофоне;

б) динамике;

в) детекторе
радиоприёмника;

г) приёмной
антенне.

2.
В данном списке найдите два региона России, в которых нет
городов-миллионеров:

Требования
к тестовым заданиям открытой формы:

—    
Текст
задания должен обладать предельно простой синтаксической конструкцией. В тексте
задания не должно быть повторов и двойного отрицания.

—    
Место
пропущенного понятия обозначается точками или нижним подчеркиванием. Точки/подчеркивание
ставятся на месте ключевого элемента, знание которого является наиболее
существенным для контролируемого материала. Если это возможно, то после точек/подчеркивания
указываются единицы измерения. Все точки/подчеркивания
в заданиях для одного теста рекомендуется делать равной длины.

—    
Обычно
ответом служит одно слово или словосочетание, состоящее не более чем из двух
слов.

—    
При
указании составителем теста правильного ответа должны быть перечислены все
возможные варианты написания слова-ответа.

Примеры (уровень
сложности 2):

1. Конституцией
определено, что забастовка – это временный … отказ работников от выполнения
обязанностей в целях разрешения спора.

Ответ:
добровольный.

2.
Низменность – это вид ______, с ____ высотой до __ метров.

Ответ:
равнины, абсолютной, 2000.

Требования
к тестовым заданиям на установление соответствия

—    
Группы
объектов, между которыми устанавливается соответствие, могут быть одинакового
размера, но предпочтительнее, чтобы одна была больше другой (допускается одна
лишняя позиция).

—    
Соответствие
между объектами групп должно быть однозначным, одному элементу первого
множества должен соответствовать один элемент второго множества.

—     К
заданиям предлагается стандартная инструкция, состоящая из слов: «Установите
соответствие».

Пример
(уровень сложности 1):

Установите
соответствие между видами конфликтов и их характеристикой.

Столкновение между личностью и группой	Внутригрупповой
Внутреннее противоборство человека	Внутриличностный
Столкновение между подразделениями организации	Межгрупповой
Столкновение взаимодействующих лиц	Межличностный

Требования
к тестовым заданиям на установление правильной последовательности

—     
Последовательность
устанавливаемых объектов должна быть однозначной, не рекомендуется составлять
последовательность, требующую повторения одного из объектов.

—     
В
основном тексте задания должно быть указание на направление последовательности.

—      Стандартная
инструкция к заданиям четвертой формы имеет вид «Установите правильную
последовательность».

Пример
(уровень сложности  2):

Установите
последовательность этапов переговорного процесса:

o    Подготовительный
этап

o    Взаимное
уточнение позиций участников

o    Выдвижение
аргументов и обоснование своих взглядов

o    Согласование
позиций и выработка договоренностей

o    Анализ
результатов переговоров

Примеры заданий 3 уровня сложности:

1.
Составьте алгоритм трудовых действий продавца по продаже сыра в молочном
отделе.

2.
Группа обучающихся  выполняла облицовку стен  в столовой керамической плиткой.
После окончания работы оказалось, что ширина швов на облицованной поверхности —
неодинаковая. Раствор был качественный, поверхность была подготовлена
правильно.         Отчего это произошло?

V. Структура теста

Основными структурными
компонентами теста являются:

·       
Спецификация
теста

·       
Инструкция
для тестируемых

·       
Основной
текст

·       
Эталон ответов и критерии оценки

Спецификация
теста

В
спецификации теста описываются основные характеристики теста. К характеристикам
теста относятся: название дисциплины, по которой составлен тест; название темы,
по которой составлен тест; цель теста; содержание теста, критерии оценки.

Возможные цели тестов: для контролирующих тестов
основной целью является проверка (контроль) усвоенных обучающимися знаний и
навыков по конкретной учебной дисциплине.

Целью текущего контроля является проверка знаний и навыков по
одной или нескольким темам учебной дисциплины, по одному разделу.

Целью итогового контроля является проверка знаний и навыков по
всей учебной дисциплине в целом.

Целью может быть проверка уровня остаточных знаний по дисциплине.

Инструкция
для тестируемых

Инструкция должна содержать указания на то, что и как обучающийся
должен сделать, какое количество времени дается на его выполнение, какой
стратегии должен придерживаться испытуемый (например, если не знаете ответ на
задание, приступайте к выполнению следующего), что надо сделать, чтобы записать
правильный ответ.

Перед группой однотипных заданий можно поместить общую инструкцию.
Очень важно указать, каким образом нужно делать отметки при выполнении заданий:
например, для тестовых заданий открытой формы – вписать ответ в отведенное
место.

Если тест включает различные формы заданий, то при смене форм,
перед каждой частью теста можно дать дополнительную инструкцию по выполнению
данной формы задания.

Эталон ответов и
критерии оценки

Данный
компонент является обязательной составной частью теста, который предназначен
преподавателям, которые должны проверить тест.

VI. Этапы составления тестов

Для облегчения процедуры
составления тестов учебный материал должен быть достаточно формализован, т.е.
каждый раздел, тему учебной дисциплины (МДК) необходимо представить в виде
таких задач и (или) вопросов, которые наиболее полно отображают содержание дисциплины
(МДК). При этом важно выделить главные (проблемные) вопросы, не увлекаясь
второстепенными.

На втором этапе, в зависимости
от цели тестирования (текущий контроль знаний, итоговый контроль знаний, оценка
остаточных знаний и др.) и формы теста, разрабатывается план раскладки задач и
вопросов в тестовые задания. Формализация учебного материала и составление
тестовых заданий — наиболее ответственные и сложные этапы составления тестов.

Рекомендуемое время
тестирования и количество вопросов (из расчёта 1-3 минуты  — на выполнение
одного тестового задания):

—        
тест для текущего контроля на 12-15 мин может содержать 6-7
тестовых заданий,

—        
тесты для промежуточной аттестации на 90 мин должны включать не
менее 30 тестовых заданий,

—        
тесты для промежуточной аттестации на 45 мин – не менее 15
тестовых заданий.

После составления тестовых
заданий педагог оформляет эталон ответов (Приложение 2), инструкцию для
тестируемых, определяет критерии оценки.

VII. методика оценивания ответов

 Методика
оценивания ответов обучающихся должна быть проста, объективна и удобна для
обработки результатов тестирования.

Пример системы оценивания для разноуровневых заданий:

—       ТЗ
1 уровня: правильный ответ – 1 балл; неправильный ответ – 0 баллов.

—       ТЗ
2 уровня: правильный ответ – 2 балла; частично правильный ответ – 1 балл;
неправильный ответ – 0 баллов.

—       ТЗ
3 уровня: правильный ответ – 3 балла; правильный ответ, но сопровождающие
записи с ошибками, или неправильный ответ, но записи свидетельствуют о
правильности хода размышлений – 2 балла; частичное решение или частичный ответ,
который не доведен до логического завершения – 1 балл; в остальных случаях – 0
баллов.

Суммируя
количество баллов за каждое задание, получаем максимальное количество баллов –
100%. Затем рассчитываем количество баллов на «4» и «3».

ЗАКЛЮЧЕНИЕ

Рассмотрим достоинства и недостатки тестовой
проверки знаний.

Достоинства

От традиционных оценок
 контроля знаний обучающихся тесты отличаются объективностью измерения
результатов обучения, поскольку они ориентируются не на субъективное мнение преподавателя,
а на объективные эмпирические критерии; быстротой получения результата, установления
связи с обучающимся и обсуждения результатов. Тест позволяет охватить большее
число обучающихся на уроке, экономя время на контроле. Эта форма контроля дисциплинирует
обучающихся, приучая их постоянно готовиться к систематическому тестовому
контролю, а так же улучшает психологическую атмосферу учебного процесса, преподаватель
перестаёт быть источником отрицательных эмоций при оценивании знаний.

Недостатки

Одним из недостатков тестовой формы
является возможность угадывания в заданиях закрытого типа.  Если тестовое
задание содержит всего два варианта ответа, то половину ответов на такое
тестовое задание можно угадать. Так же существует возможность списать ответы на
тесты закрытого типа. Преподаватель не видит хода решения (хода мыслительной
деятельности обучающегося), если результаты своей работы обучающийся
представляет только в виде номера ответа, гарантии наличия знаний у  обучающегося
нет. В тестах трудно выявить степень овладения умениями проводить наблюдения,
опыты, определять объекты, не развивается речь обучающегося.

На основании сказанного, можно
сделать вывод о преимуществе тестовой проверки знаний по сравнению с
традиционными формами контроля. Тестовые задания удобно использовать при организации
самоконтроля, при повторении учебного материала, при подготовке к уроку. Тесты
с успехом можно использовать наряду с другими формами контроля. Главное
достоинство тестовой проверки – в ее скорости, а традиционной проверки – в её
основательности.

Тесты выполняют одновременно целый ряд функций:
1. Контролирующую;
2. Обучающую;
3. Развивающую;
4. Воспитывающую;
5. Диагностическую;
6. Прогностическую.

Тесты можно использовать как на любом этапе урока, так и так и при изучении
нового материала, его закреплении и обобщении и при итоговом контроле.

При изучении нового материала тесты применяются для организации
самостоятельной работы учащихся, при этом тестовое задание может не только
опираться на знания, полученными учащимися на предыдущих уроках, но иметь
поисковый, эвристический, проблемный характер.

При закреплении или проверки текущего материала используются тесты-минутки
рассчитанные на 10–15 мин урока и содержащие 5–10 вопросов.

При итоговом контроле тестирование проводится довольно часто, при этом тесты
охватывают материал по крупным блокам (определенную тему, раздел). Их выполнение
рассчитано на целый урок. Экзаменационный тест должен охватывать материал всего
курса географии России в 9 классе или экономической и социальной географии мира
в 10–11-х классах. Школьные экзаменационные тесты проводятся, как правило, в
течении 2 часов и содержат от 25 до вопросов и заданий.

Тесты пригодны как для фронтальной, так и для групповой и индивидуальной
работе учащихся. С помощью тестовых заданий и вопросов значительно проще
подобрать материал, для каждого конкретного ученика, соответствующий уровню его
развития, возрастным мотивационным особенностям.

Тесты можно использовать не только на уроке в классе, но и в качестве
домашнего Задания, в отдельных случаях можно предложить учащимся составить
тестовые задания, что научит ребят правильно формулировать вопросы, будет
способствовать формированию умений обобщать и анализировать полученные знания
применять их на практике.

Методика составления и проведения тестов.

Основными этапами любого тестирования являются:

1. Целеполагание т.е постановка конкретных целей перед тестированием и
   понятных учащимся.
2. Подготовка и сбор информации для составления теста, соответствующей
   школьной программе, учебникам и пройденному материалу.
3. Разработка и конструирование теста, т.е. выбор определенных видов
   тестовых вопросов и заданий с учетом определенных требований:
   надежность, точность, лаконичность;
   недопустимость применения двусмысленных вопросов;
   использование дополнительной литературы, энциклопедий, справочников для
   составления тестов и их решения допустимо лишь для специализированных
   классов и школ, а также для индивидуальной работы с сильными учащимися.
4. Подготовка участников тестирования заключается в мотивации, настрое и
   тренинге.
5. Непосредственно тестирование должно стать одним из видов учебной
   деятельности учащихся.
6. После проведения тестирования наступает обработка теста, т.е. проверка с
   помощью ключа
7. Итогом результатов тестирования должен стать анализ результатов.
8. Публикация результатов тестирования. Учащиеся должны быть ознакомлены с
   результата тестирования, они должны быть допущены к просмотру выполненных
   работ и имеют право на апелляцию.

При всем многообразии тестовых задании можно выделить всего четыре основных
группы тестов:

1. задание на выбор правильного ответа;
2. приведение в соответствие или классификацию объектов;
3. расположение объектов в определенном порядке;
4. “открытые” тесты, где необходимо вписать “пропущенные” слова.

Виды тестов по форме.

Наиболее простыми при составлении и самыми распространенными видами тестовых
заданий являются тесты-определители, составленные по принципу вопрос – ответ.

1. Тесты – определители с одним правильным ответом.

Сложность данного типа тестового задания зависит, от количества указанных
ответов: два, три и т. д. Например: выделите страну, господствующей религией в
которой является ислам: 1. Ангола, 2. Италия, 3. Пакистан, 4. Канада, 5. Перу,
6. Фиджи.

Кооперирование – это:

а) выпуск предприятием соответствующей продукции;
6) сосредоточение на одном предприятии технологически последовательно связанных
производств;
в) сосредоточение предприятий на одной территории;
г) объединение предприятий с целью производства единой конечной продукции.

Ли6о наоборот: вопросом является определение, а ответом – само понятие.
Объединение предприятий с целью производства единой конечной продукции – это:

1. специализация;
2. комбинирование;
3. кооперирование;
4. концентрация.

2. Тесты – определители, где ответы идут с увеличением участвующих объектов,
причем обходимо назвать их максимальное количество.

Летом тропические ВМ господствуют:

1) в тропическом климатическом поясе;
2) в тропическом и субтропическом климатических поясах;
3) в тропическом, субтропическом и субэкваториальном климатических поясах.

3. Тесты – определители, где все ответы правильные.

Крупными производителями автомобилей являются:

1) Япония;
2) Западная Европа;
3)США;
4 )все указанные регионы.

4. Тесты – определители, имеющий несколько правильных ответов и указано их
количество (один, два, три и т. д.).

В данном списке выделите два региона России, в которых нет городов –
миллионеров:

1. Центральный;
2. Дальневосточный;
3. Западно-Сибирский;
4. Центрально-Черноземный;
5. Волго-Вятский;
6. Северо-Кавказский.

5. Тесты – определители, имеющие несколько правильных ответов, построенные по
принципу выделения неправильных ответов, но неуказанно их количество.

Выделите объекты, относящийся к формам рельефа:

1) холм;
2) ветер;
3) песок;
4) равнина;
5) овраг;
6) гранит.

6. Тесты – определители построенные по принципу выделения неправильных
ответов, имеют, как правило, в задании какие – либо отрицания.

Выделите объект, не относящийся к Средней Сибири:

1) траппы;
2) Саяны;
3) Таймыр;
4) лиственница;
5) Путорана.

7. Тесты – определители с использованием рисунков, графиков, схем или
диаграмм.

На какой из приведенных диаграмм верно указано соотношение суши и воды на
Земле:

 

8. Альтернативные тесты формулируются в виде вопроса – утверждения и требует
однозначного ответа “да” или “нет”. Альтернативный тест может содержать один или
несколько заданий.

В развитых капиталистических странах ввиду высокого уровня жизни наблюдается
высоки естественный прирост населения.

1)да; 2)нет.

9. Опознавательные тесты, т.е. определение объекта по краткой характеристике,
где названы примеры объектов, один из которых правильный.

Определите физико-экономический район России по данной характеристике:
занимает большую площадь территории, большая часть которой занята древней
платформой, преобладают плоскогорья, особенностью геологического строения
являются траппы, на большей части территории климат резко – континентальный, на
территории района находится “полюс холода; широко распространены мерзлотно –
таежные почвы и лиственничные леса.

1) Русская равнина;
2) Горы Южной Сибири;
3) 3аподно – Сибирская равнина;
4) Средняя и Севере – Восточная Сибирь.

10. Определение объекта по краткой характеристике, ответ необходимо вписать
самостоятельно.

По данной характеристике определите страну Европы: внутриконтинентальная
страна, федеративная республика, член ЕС, проводит политику постоянного
нейтралитета, столица является крупнейшим городом страны.

———————————————————————————————————

Ответ: Австрия

11. Определение объекта по списку других объектов, где указаны варианты
ответов.

По списку типичных животных определите природную зону Африки (Горилла,
шимпанзе леопард, карликовый бегемот, окапи, птица – носорог):

1) влажные экваториальные леса;
2) средиземноморская;
3) саванны;
4) пустыни.

12. Определение объекта по списку других объектов без вариантов ответа.
По списку приграничных государств определите страну Азии (Исламабад, Пекин,
Дакка, Катманду).Ответ:

————————————————————————————————————-

Ответ: Индия

13. Приведение в соответствие, причем количество вариантов первого первого
столбика совпадает с количеством вариантов второго столбика.

Приведите в соответствие горные системы и их геологический возраст:

1)Гималаи 2)Уральские горы 3)Кордильеры

а) древняя складчатость б) средняя складчатость в) новая складчатость

Ответ: 1-в; 2-а; З-б

14. Приведение в соответствие, причем количество ответов первого столбика не
совпадает количеством вариантов второго столбика.

Приведите в соответствие формы рельефа и тектонические структуры:

1)Урал 2)Хибины 3)3аподно-Сибирская равнина 4)Сихоте-Алинь

а) щит б) молодая платформа в) герцинская складчатость г) мезозойская складчатость

Ответ: 1-в;2-а;3-б;4-д

15. Приведите в соответствие, подразумевающее вариативность правильных
ответов.
Приведите в соответствие климатические пояса и характерные для них ВМ:

1 .экваториальный 2. субэкваториальный 3. тропический 4. субтропический

а) тропические б) умеренные в) субэкваториальные г) экваториальные

Ответ: 1– а;2-а;3-а;4-а,б

16. Тесты на приведение в соответствие. В одном из столбиков есть “лишний”
вариант. Приведите в соответствие отрасли промышленности и факторы их
размещения:

1. гидроэнергетика 2. металлургия алюминия 3. судостроение 4. сахарная промышленность

а) потребительский б) сырьевой в) энергетический

Ответ: 1-б;2-г;3-а;4-б

17. “Открытые” (или перспективные) тесты.

В отличие от тестовых заданий, предполагающих необходимость самостоятельно
вписать верный ответ, в “открытых” тестах в отдельных случаях не “связан” одним
верным ответом, а имеет право самостоятельного выбора объектов, отвечающим
названным требованиям.

Вставить пропущенные слова. При данной постановке вопроса у тестируемого, как
правило нет самостоятельного выбора – необходимо вписать конкретные слова.
Вставьте пропущенные слова: Низменность – это вид ______, с ____ высотой до __
метров, (равнины, абсолютной, 2000.)

Самостоятельно вписать примеры – данный вид тестового задания подразумевает
полную свободу действий тестируемого.

Назовите три основных государства Азии:

————————————————————————————————

—————————————————————————————————-

на выбор: Бахрейн, Бруней, Кипр, Мальдивские о-ва, Сингапур, Тайвань, Шри –
Ланка, Филиппины, Япония.

18. Тесты связанные с заполнением таблицы без вариантов ответа.

Заполните таблицу:

Воздушные массы	Район формирования	Температура и влажность
		Жаркая и влажная
тропические
	Умеренные широты над океаном	Лето: Зима:
антарктические

19. Тесты, связанные с заполнением таблицы с вариантами ответов.

Заполните таблицу, используя предложенные варианты ответов:

Страна	Столица	Форма правления	Административно-территориальное устройство
Канада
	Прага
		Конституционная монархия
Оман
			Конфедерация

Варианты ответов: Чехия, Швейцария, Норвегия, Маскат, Оттава, Берн, Осло,
республика, абсолютная монархия, государство Британского Содружества, унитарное,
федеративное.

20. Тесты связанные с заполнением схемы с вариантами ответов.

Заполните схему, используя следующие слова:

1. Мировой океан;
2. болота;
3. ледники;
4. горные;
5. подземные воды;
6. реки;
7. покровные.
8. моря;
9. заливы.

21. Тесты, связанные с заполнением схемы без вариантов ответов.

Заполните схему:

22. Тестовые задания, требующие выполнение расчетов, с вариантами ответов.

Используя рисунок 60 на странице 96 (Суханов В.П. Физическая география. 6
класс.) или рисунок 80 на странице 144 (Герасимова Т.П. и Неклюкова Н.П.
География. Начальный курс.).
Определите, сколько выделится воды, если температура воздуха снизится с 20 С до
10 С при условии, что относительная влажность воздуха равнялась 100%: 1) 9 г; 2)
8 г; 3) 17 г.

23. Тесты, требующие выполнение расчетов без вариантов ответов.

Определите коэффициент увлажнения, если известно, что в городе Н испаряемость
равна 31 мм. и в течении года выпадает 488 мм. осадков:

Ответ 1,3

Тесты – классификаторы.

Тесты – классификаторы формулируются в виде набора определенных объектов,
и тестируемый должен провести их классификацию по указанному критерию или
выбрать критерий классификации самостоятельно. Данный вид теста наиболее удобен
для установления внутрипредметных или межпредметных связей.

24. Тесты – классификаторы с указанием классификации.

Разделите горные породы, приведенные в данном списке, на три группы:
а) известняк; б) гранит; в) мрамор; г) базальт; д) туф; е) ракушечник; ж) гнейс;
з)галька; и) уголь; к) обсидиан; л) графит; м) доломит.

Осадочные: ————— ————— —————

Метаморфические: ——————- ——————- ——————-

Магматические: —————— —————— ——————

Проклассифицируйте указанные объекты по природным зонам России и результаты
занесите в таблицу: Лиственница, лемминг, ковыль, бурундук, ягель, песец,
соболь, дрофа, кедр, кролик.

25. Тесты на самостоятельную классификацию.

Сгруппируйте по языковым семьям народы России:

Русские, карелы, татары, осетины, якуты, украинцы, коми, буряты, башкиры,
удмурты.

А	Б	В	Г
———— ———— ————	———- ———- ———-	———- ———- ———-	———- ———- ———-

26. Тесты, проверяющие знания географической карты и географического
пространства построенные по принципу альтернативного теста.

В каждой паре подчеркните страну, расположенную севернее:

Норвегия – Дания;
Испания – Бельгия;
Чехия – Венгрия;
Швейцария – Германия.

27. Расставить по порядку.

Распределите горные страны по мере увеличения их высоты:

Гималаи – _____ 4
Уральские –____ 1
Альпы – ________2
Кордильеры – ____3

28. Тесты на установление причинно – следственных связей.

Укажите правильную последовательность причинно – следственных связей:

Развитие земледелия – __________ 4
Агроклиматические ресурсы – ___1
Географическая широта – _______2
Плодородие почв – ____________ 3

29. Тесты по нахождению “лишнего” объекта, где даны критерии ответа.

В данном списке выделите народ, отличающийся от остальных по религиозному
признаку: Русские, сербы, грузины, греки, поляки

30. “Лишний” объект – нет критериев ответа.

В данном списке выберите ответ отличающийся от остальных: Гранит, базальт,
пемза, обсидиан, мрамор.

Прежде чем мы перейдем к принципам разработки тестов, необходимо сделать ряд замечаний.

Различия между тестом и заданиями в тестовой форме

В обыденном сознании постоянно смешиваются понятия теста и системы заданий в тестовой форме (или предтестовых заданий).

Тест только тогда может считаться тестом, когда были произведены необходимые статистические расчеты – выявлены показатели трудности, надежности, валидности и ряд других.

Как правило, тест разрабатывается коллективом исследователей и апробируется в течении определенного времени. После апробации в тест вносятся коррективы. Тест состоит из тестовых заданий. В англоязычной литературе для обозначения теста употребляется термин «Quiz» (но не «Test»!).

Таким образом, преподаватель (учитель) не может создавать тесты. Вместо этого, он разрабатывает задания в тестовой форме, которые внешне похожи на тест, но не проходят статистической и иной апробации. Такие задания можно использовать в образовательном процессе для решения определенных педагогических задач.

Из этого следует принципиальная невозможность использования ряда характеристик теста. Например, трудность тестового задания определяется экспериментально, исходя из результатов большого объема выборки учащихся. На практике учитель не располагает как временем для проведения эксперимента, так и необходимым объемом выборки. Поэтому часто трудность определяется «на глазок».

В общем виде задания в тестовой форме (как и тестовые задания) отвечают следующим требованиям:

• краткость;
• технологичность;
• определённость цели;
• логическая форма высказывания;
• определенность места для ответов;
• одинаковость правил оценки ответов;
• правильность расположения элементов задания;
• одинаковость инструкции для всех испытуемых;
• адекватность инструкции форме и содержанию задания.

Так, краткость заданий в тестовой форме обеспечивается тщательным подбором слов, символов, графиков, позволяющих минимумом средств добиваться максимума ясности смыслового содержания задания. Технологичность заданий определяется как свойство, которое позволяет вести процесс тестирования с помощью технических средств, и делать это точно, быстро, экономично и объективно.  Логическая форма высказывания – это средство упорядочения и эффективной организации содержания задания.

Формы тестовых заданий

Кроме того, принципы разработки тестовых заданий (заданий в тестовой форме) связаны с их формами. Разные авторы по-разному классифицируют формы тестовых заданий. Положение усугубляется тем, что каждая автоматизированная система для проведения тестирования называет одни и те же формы по-разному. Обобщим все многообразие форм тестовых заданий следующей классификацией.

1. Верно/Неверно (Правда или Ложь, от анг. True or False) – содержит утверждение, с которым обучающийся должен либо согласиться, либо нет.

Например:

Первым президентом США был Джордж Вашингтон

1. Верно
2. Неверно

В ЕГЭ подобные задания встречаются в КИМах по иностранным языкам в заданиях на аудирование: учащиеся слушают текст, далее переходят к заданиям типа Правда или Ложь.

Данная форма тестовых заданий самая простая как для составления преподавателем, так и для ответа обучающимся. Такие формы задания характеризуются высокой степенью угадывания правильного ответа.

2. Множественный выбор (задания с выбором одного или нескольких правильных ответов). Эта самая распространённая форма тестовых заданий. Она содержит утверждение (вопрос) и альтернативные ответы.

Для заданий с выбором одного правильного ответа рекомендуется не менее 4 (если меньше, то вероятность угадывания правильного ответа увеличивается) и не более 6 (трудно придумать правдоподобные альтернативы).

Для заданий с выбором нескольких правильных ответов рекомендуется не менее 6 альтернатив.

3. Задания на установление соответствия. Оно представляет собой набор элементов в двух столбцах – обучающемуся нужно установить соответствие между элементами левого и правого столбцов. Наличие заголовка для каждого набора столбцов является обязательным – он позволяет учащемуся не тратить время на обобщение элементов в столбцах и сразу перейти к упражнению.

Сравните:

1. a) Ярлык
2. b) Улус
3. c) Волостень
4. d) Порок
5. e) Плинфа

1. Стенобитное сооружение
2. Кирпич
3. Ханская грамота
4. Правитель волости
5. Владение

Тоже задание, переформатированное с учетом специфических требований:

Древнерусские названия	Современные аналоги
a) Ярлык	1. Стенобитное сооружение
b) Улус	2. Кирпич
c) Волостень	3. Ханская грамота
d) Порок	4. Правитель волости
e) Плинфа	5. Владение

Как мы видим, во втором случае задание более читабельно, его смысл легко улавливается. Обратите внимание, что, например сервис OnlineTestPad и некоторые другие позволяют добавлять такие заголовки. Другие (как Moodle) не обладают таким функционалом. В этом случае необходимо писать полную инструкцию, например, «Установите соответствие между ….и….»

В бумажных тестах такой формы заданий для правильного ответа предлагается заполнить специальную табличку. Вариант со стрелочками считается менее технологичным для проверки, поэтому его следует избегать.

1	2	3	4	5

Также желательно устанавливать нечетное количество элементов левого и правого столбца, чтобы последний элемент выбирался не методом исключения.

Посмотрите на это задание:

Расположите имена русских полководцев в хронологической последовательности (по возрастанию) их деятельности

Дмитрий Пожарский

Алексей Ермолов

Михаил Скобелев

Алексей Орлов

Это тоже задание на установление соответствия, точнее, его разновидность – задание на установление правильной последовательности. Ряд зарубежных исследователей склонны к такому объединению. Именно поэтому, например в Moodle мы не найдем такой формы. Но ее легко можно сконструировать из задания на установление соответствия. Для наглядности немного переформатируем предыдущее задание:

Хронологическая последовательность (по возрастанию) их деятельности	Полководцы
1	a. Дмитрий Пожарский
2	b. Алексей Ермолов
3	c. Михаил Скобелев
4	d. Алексей Орлов

Мы видим классическое задание на соответствие, просто левый столбец представляет собой числовой порядок. Правильные ответы обучающийся также заносить в специальную таблицу.

Иногда описанные выше задания верно-неверно, множественного выбора и соответствия объединяют в группу заданий закрытого типа, которые обладают следующими общими чертами:

• Присутствует в явном виде правильный ответ, его нужно просто выбрать тем или иным способом;
• Ответы на вопросы можно угадать (вероятность угадывания вырастает с уменьшением количества альтернатив);
• Ответы можно припомнить
• Ответы можно подобрать логически, откинув явно неправильные альтернативы.   

5. Дополнение (краткий ответ). В этих заданиях учащемуся необходимо дописать правильный ответ. Иногда такой тип заданий называют заданиями открытого типа. В отличие от рассмотренных выше форм тестовых заданий, такие стратегии как угадывание, припоминание правильного ответа и др. «не работают». Поэтому данный тип задания считается более трудным для обучающихся.

6. Эссе – краткий ответ учащегося по сути вопроса. Строго говоря эссе не является формой тестового задания, т.к. он не соответствует необходимым критериям краткости, технологичности и прочее. По нашему мнению, эссе было введено для преодоления известных трудностей при составлении типичных тестовых заданий, главные из которых – невозможность представить весь учебный материал в тестовом виде и репродуктивный характер типичных тестовых заданий.

Тем не менее в заданиях эссе должны быть предложен(ы)  эталон(элементы) оптимального ответа вместе со стандартизованными правилами оценки результатов его выполнения.

Пример:

При каких значениях х соответственные значения функций f(х)=log2x и g(х) = log2(3 – х) будут отличаться меньше, чем на 1?

Критерии для оценивания правильного ответа

Баллы	Критерии оценки выполнения задания 9
2	Приведена верная последовательность шагов решения: 1) составление неравенства, содержащего модуль; 2) решение неравенства. Все преобразования и вычисления проведены правильно, получен верный ответ
1	Приведена верная последовательность шагов решения. При решении неравенства в шаге 2 допущена описка и/или негрубая вычислительная ошибка, не влияющая на правильность дальнейшего хода решения. В результате этой описки и/или ошибки может быть получен неверный ответ
0	Все случаи решения, не соответствующие указанным выше критериям выставления оценок в 1 или 2 балла

Принципы разработки заданий в тестовой форме

Следующее, на чем нас стоит остановиться – на принципах разработки заданий в тестовой форме.

Долгое время существовала убеждённость, что тест сам по себе является объективным средством контроля. Однако затем пришло понимание, что тест обеспечивает, в первую очередь процедурную объективность. Для оценки же качества теста существует ряд смежных направлений – надежность (гарантия отсутствия в тесте случайных ошибок), валидность (гарантия, что тест измеряет именно то, что он должен измерять), трудность и т.д. Как мы указывали выше, все эти параметры разрабатываются на основе различных математических моделей в ходе экспериментальной работы авторского коллектива и недоступны для учителей, преподавателей. Поэтому мы лишь остановимся на ряде теоретических требований к разработке заданий в тестовой форме.

1. Начинайте конструировать задание с правильного ответа. Часто так случается, что задание формально содержит больше правильных ответов, чем запланировано. Встречаются и обратные случаи – задание вообще не содержит правильного ответа.
2. Содержание задания опирается на требования программы и отражает предметное (метапредметное) содержание. Иногда в тест пытаются включить вопросы, правильного ответа на которые просто не существует.

Например:

Мы будем изучать латинский язык потому, что…

1. На нем говорят во многих странах мира
2. Хотим лучше понимать родной язык, так как в нём много слов, заимствованных из латыни
3. Хотим лучше понимать историю и культуру древнего мира

Это хорошее задание. Но его следует использовать в социологическом опросе, а не в заданиях на проверку учебных достижений.

1. Вопрос должен быть направлен на выявление одного элемента знания, одной законченной мысли. В противном случае трудно диагностировать причину невыполнения задания.

Конфуций ..

1. жил в Африке
2. жил в Китае
3. был врачом
4. был правителем
5. был философом

Данное задание направленно на выявление сразу двух элементов – где жил Конфуций и кем он был. Необходимо разделить эти два вопроса.

1. При составлении вопросов следует избегать слов «иногда», «часто», «всегда», «мало», «больше» и т.д. Подобные слова имеют субъективное значение и могут приводить к ошибочным ответам. Тестовые задания (задания в тестовой форме) должны иметь четкий однозначный ответ.
2. Избегайте вводных фраз или предложений, имеющих мало связи с основной мыслью, не следует прибегать к пространным утверждениям.

Например:

«Анадырская впадина. Очень плоско, и Анадырь по ней виляет огромным удавом… «Анадырь – жёлтая река», – можно так назвать потом очерк. Тундра и озёра по всей впадине. Трудно понять, чего больше: или озёр, или земли» (О. Куваев). В какое море впадает эта река?

Вполне понятно желание авторов разнообразить задание в тестовой форме, сделать его более поэтичным. Однако прочтение вводной части занимает много времени и размывает суть задания.

1. Правильные ответы должны быть правдоподобны, умело подобраны, не должно быть явных неправильных ответов (они являются своеобразной подсказкой – данный ответ уж точно является ошибочным). Неправильные ответы, очень похожие на правильные, называют дистракторами. Например:

Родина Карла Маркса:

1. Трир
2. Карл-Маркс-Штадт
3. Штургард
4. Мюнхен

Здесь можно предположить, что город Карл-Маркс-Штадт получил свое название потому, что в именно в нем родился Карл Маркс. Однако правильный ответ – Трир.

1. Не следует задавать вопросы с подвохом – скорее всего в заблуждение будут введены наиболее способные или осведомленные учащиеся, которые знают достаточно для того, чтобы попасться в ловушку, а также это противоречит цели – определению уровня знаний и понимания.
2. Следует использовать более длинные вопросы и более короткие ответы, грамматически согласованные с основной частью задания.

Например:

Какое суждение верно?

1. Неполные предложения ‒ это предложения, в которых пропущен один из главных членов
2. Неполные предложения ‒ это предложения, в которых пропущен один из второстепенных членов
3. Неполные предложения ‒ это предложения, в которых пропущен какой-либо член предложения ‒ главный или второстепенный

Нетрудно увидеть, что здесь есть повторяющееся словосочетание, которое и следует вынести в формулировку задания:

Неполные предложения ‒ это предложения, в которых пропущен

1. один из главных членов
2. один из второстепенных членов
3. какой-либо член предложения ‒ главный или второстепенный

1. Не используйте отрицание в основной части вопроса. Во-первых, это приводит к непониманию сути задания. Во-вторых, объектом контроля должны быть элементы знания, а не элементы незнания.

Например:

Жили ли или нет эти люди в реальности в Древней Греции?

1. Гомер
2. Ахилл
3. Зевс
4. Перикл
5. Фидий
6. Аристотель
7. Сократ

В данном случаи не ясно как отвечать – да жили, или да не жили. Поэтому вопрос нужно сформулировать более точно, например: Назовите мифологических персонажей Древней Греции.

1. При чередовании правильных ответов в вопросах не должно быть явной системы – например, всегда только 1 варианты правильные, или правильными вариантами являются последовательно первый, второй, третий, четвертый вариант. В компьютерном тестировании обычно такой проблемы не существуют, потому что компьютер автоматические перетасовывает альтернативы.
2. Если ставится вопрос количественного характера, то необходимо указать последовательность (от меньшего к большему или наоборот) выбора правильных ответов.

Например:

Удаленность от Солнца

a) Сатурн

b) Меркурий

c) Земля

d) Уран

e) Венера

f) Марс

В данном пример существуют как бы два набора правильных вариантов ответов – одна последовательность от наиболее близкой планеты от Солнца, другая – от наиболее удаленной.

1. Вопрос и ответ должны отличаться шрифтовым и пространственным оформлением. Например, вопрос (задание) выделяется жирным шрифтом, ответ – обычным. Для записи ответов используются дополнительные отступы. Но это правило касается только бумажных тестов – в компьютерных автоматизированных системах оформление задается программное, которое изменять не целесообразно.

И помните – не каждое задание можно представить в виде тестового контроля.

При написании статьи использовались примеры http://koi.tspu.ru/koi_books/samolyuk/

Изображение с сайта Freepik