Как составить результаты теста

Правило 1

Начните с заголовка

Как только у вас родилась идея теста, сформулируйте черновой заголовок. Во-первых, если короткий и понятный заголовок не будет получаться, то это признак, что с вашей идеей что-то не так или тема для теста слишком сложная, — это повод доработать идею. Во-вторых, так вам будет проще понять, о чем именно будет тест. Это поможет определиться с тем, как лучше всего выстроить тест с точки зрения логики, какие именно нужны вопросы и результаты, и отсечь все лишнее. Лучше всего, когда в заголовке есть вопрос и читатель хочет узнать на него ответ. Еще лучше, когда заголовок касается конкретно человека и мы предлагаем узнать читателю что-то о себе: все любят узнавать себя.

Примеры заголовков:

• Сможете ли вы потратить триллион рублей?
• Умеете ли вы экономить по-настоящему?
• Насколько хорошо вы питаетесь по сравнению с другими россиянами?
• Как низко вы готовы пасть ради денег?
• Экспресс-тест: насколько вы счастливы?

Правило 2

Сформулируйте цель теста

Наверняка вы не хотите делать тест ради теста. А хотите чего-то большего:

1. донести до читателей определенную мысль;
2. достичь своих целей.

С первым все ясно: читатель должен пройти тест и узнать что-то новое или о чем-то задуматься. Например, о своих личных предпочтениях или о том, как на самом деле устроена жизнь вокруг:

Со вторым тоже все просто. Цель может быть прикладной — например, мы хотим ненавязчиво рассказать о нашем курсе по инвестициям. Тут все понятно: на заголовок кликают люди, которые интересуются темой и хотят узнать про себя что-то новое. Получают развлекательный контент и в конце узнают о курсе.

Или, наоборот, цель может быть более призрачной — например, нам важно писать про бизнес. У нас есть целый раздел про это, мы хотим подогревать интерес к теме разными способами: тот, кому пока скучно читать длинный текст, возможно, клюнет на что-то развлекательное. Скорее всего, человеку выпадет хороший результат, мы заложим в его голову идею, и, вероятно, в следующий раз он уже созреет для более серьезных форматов.

Правило 3

Нащупайте логику, на которой будет построен тест

Чтобы результаты теста выглядели убедительно, нужно придумать, на чем именно будут основаны ваши расчеты. Вам может казаться, что вы делаете максимально шуточный тест и придумывать какое-то обоснование необязательно. Но чаще всего это заметно, и у читателей возникнут вопросы:

В некоторых тестах результат можно выдавать рандомно. Подумайте, насколько такое решение уместно в конкретном тесте: оно должно выглядеть как фича, а не баг.

Примеры разных видов логики:

• «Какой вы миллиардер из кино?» — мы взяли список богатейших выдуманных персонажей «Форбса», выбрали из них киногероев, изучили их биографии, нашли пересекающиеся моменты и спрашиваем у человека, какая из описанных ситуаций больше похожа на его. В результатах рассказываем читателю краткую сводку о персонаже, с чьей биографией было больше всего пересечений, сумму его состояния и выделяем положительные свойства характера.
• «Относитесь ли вы к среднему классу?» — лучше всего, когда тест опирается на проверенный источник, будь то соцопрос или список «Форбса». В этом случае мы взяли несколько исследований, посвященных среднему классу, и сделали из них тест. Еще в тестах с такой логикой можно предлагать читателю проверить, насколько хорошо он разбирается в какой-то теме. Например, в зарплатах россиян или их мнениях по самым разным поводам.
• «Знаете ли вы, как супермаркеты нарушают ваши права?» — пример полезного теста на тему конкретной проблемы. Мы собрали случаи супермаркетного произвола, нашли законодательные акты, регулирующие эти ситуации, и предлагаем читателям рассказать, как бы в этих ситуациях они себя повели, и заодно узнать, на чьей стороне закон.
• «Финансовые предсказания: что вас ждет в следующем году?» — здесь результаты как раз распределяются более-менее рандомно, цель таких тестов — порадовать читателя, сказать ему что-то приятное, подбодрить. Но логика в распределении результатов все равно присутствует.

Правило 4

Решите, что в вашем тесте главное

Бывают тесты, в которых главное — результаты. Бывают тесты, в которых главное — вопросы. Здесь важно продумать, как правильно расставить акценты, чтобы и читатель был доволен, и вы рассказали людям все, о чем хотели.

Примеры:

• «Насколько хорошо вы питаетесь по сравнению с другими россиянами?» — в этом тесте важны вопросы. По сути, мы интерактивным способом рассказываем человеку о том, что известно статистике о пищевых пристрастиях россиян. Поэтому после ответа на вопрос мы даем уточняющую расшифровку и ссылку на источник. Обязательно собирайте все пруфы!
• «Какой страны вы достойны?» — а в этом тесте интереснее результат. Мы собрали 5 профайлов разных стран, основываясь на статистике, реальных ценах и культурных особенностях. Спрашиваем читателей об их предпочтениях, вкусах и привычках и делаем вывод, где условия для всего этого благоприятнее.

Правило 5

Старайтесь делать тесты короче

10 вопросов всегда лучше, чем 15, а 7 — лучше, чем 10. Можно пойти еще дальше и сделать тест из двух вопросов — и даже из одного! Все зависит от цели и от того, что в вашем тесте главное, — не стоит прятать это слишком далеко.

Также старайтесь соблюдать баланс: если вопросов много, то пусть и вопросы, и варианты ответов будут максимально короткими. Если вопросов мало, то можно себе позволить сделать вопросы или варианты ответов подлиннее. Варианты с картинками выбирать проще, даже если на этих картинках написан текст. Конечно, это не всегда возможно. Просто помните об этом и стремитесь к идеалу.

Старайтесь формулировать вопросы емко, убирайте лишние подробности. Избегайте длинных придаточных и громоздких фраз. Ваш вопрос должен быть понятным и конкретным.

Правило 6

Согласуйте заголовок с результатами

В идеальном мире текст результата всегда должен отвечать на вопрос в заголовке. Человек заинтересовался вопросом в заголовке и хочет получить на него ответ. А если ответа нет, то, вполне вероятно, человека постигнет разочарование. Это не те эмоции, которые нужно получать от тестов.

Правило 7

Не скупитесь на результаты

Желание увидеть результат — это главное, почему человек проходит наш тест. Проходить тест трудно. Нужно думать, читать и нажимать на кнопки. Кнопок бывает много: узнать правильный ответ, перейти к следующему вопросу, узнать результат. Это активное потребление контента. Поэтому в тестах результат — это награда. Если человек получит слишком короткий или неинтересный результат, он также будет разочарован. У него останется ощущение, что результат не стоил затраченных усилий. Поэтому к результатам надо отнестись внимательно и сделать их с любовью.

Правило 8

Добавьте дополнительную стоимость результатам

Если человек получил удовольствие от прохождения теста и от его результата, он становится довольно лояльным пользователем и благосклонно отнесется к нашему предложению продолжить вечеринку. Поэтому при создании теста мы сразу думаем о том, что еще предложить читателю. Мы можем предложить пройти еще один тест или прочитать текст по теме. В каждом результате может быть что-то уникальное: например, если человек показал слабый уровень знаний по какому-то предмету, мы можем отправить его читать про азы, а если высокий — проходить более сложный тест. Или во всех результатах может быть ссылка на что-то одно. Все зависит от цели.

Примеры:

• «Какой ваш финансовый возраст?» — здесь в каждом из восьми вариантов результатов читателю предлагаются разные тесты в зависимости от контекста.
• «В какую теплую страну вам пора переехать?» — здесь мы сопроводили каждый результат ссылкой на статью про конкретную страну.
• «Какой вы модератор Т—Ж?» — здесь тоже восемь вариантов результатов, но в рекомендациях — один и тот же тест.

Правило 9

Не расстраивайте читателей, а дарите им радость

Тесты — это развлекательный формат. Возможно, читателю скучно и он хочет развлечь себя. Возможно, у читателя был тяжелый день и он хочет отвлечься. Но он точно не хочет прочитать что-то неприятное про себя. Поэтому старайтесь даже в самых плохих результатах описывать недостатки мягко, упоминайте возможные сильные стороны и добавляйте во все это самоиронии и дружеского подмигивания.

Правило 10

Избегайте конкретных примеров в результатах

Помните, что и механики тестов, и сама концепция таких тестов построены на допущениях — мы даем очень приблизительный результат. Кроме того, продумать абсолютно все довольно тяжело и весьма вероятно, что где-то в вашей логике найдется слабое место. Поэтому нужно максимально застраховать себя от провалов. Если вы сами чувствуете, что халтурите или чересчур притягиваете нечто за уши, убирайте: это однозначно заметят.

Используйте слова: «возможно», «вероятно», «кажется» и так далее. Старайтесь не упоминать в результатах конкретные вещи, если механика теста не гарантирует вам, что читатель выбрал определенный результат. Зачастую бывает так: один из вариантов ответа — «обожаю хот-доги», читатель фыркает про себя, выбирает другой ответ, но по ответам в других вопросах оказывается, что он должен основать компанию по производству сосисок. Поэтому результат нужно завуалировать таким образом, чтобы даже тем, кто не любит хот-доги, было понятно, почему им выпал такой результат. Добавляйте в описание результата примеры не из вопросов, а другие, из жизни, которые расширяют картину.

Помните, что правила созданы, чтобы их нарушать. Если вы понимаете, что какое-то правило противоречит вашей идее или цели, и вы знаете, как сделать лучше, — делайте. Но сначала согласуйте все с редактором: возможно, он уже сталкивался с подобным и знает, как поступить, или просто поможет найти решение.

Виды тестов

Тесты-квизы: с правильными и неправильными ответами:

1. С одним верным вариантом ответа. Например, тест «Знаете ли вы, чем лечат себя россияне?».
2. С несколькими верными вариантами ответа. Например, тест «Какие финансовые вопросы россияне решают с помощью поисковика?».
3. Со счетчиком: он считает заработанное или штрафы. Например, тест «Сможете ли вы избежать штрафов в другой стране?».

Тесты-стратегии: без правильных и неправильных вариантов ответов:

1. С возможностью выбрать один вариант ответа. Например, тест «Насколько хорошо вы спите по сравнению с другими россиянами?».
2. Экспресс-тесты: собирают статистику. Пример: тест «Как низко вы готовы пасть ради денег?».
3. Со счетчиком: считает потраченное. Пример: тест «Сможете ли вы потратить 10 млрд юаней?».
4. С возможностью выбрать несколько вариантов ответа. Эта механика пока в разработке.

Квесты: тесты с разветвленной системой ответов. Формат пока в разработке.

Форматы вопросов и ответов

В вопросах могут быть заголовок, текст, картинка. Что-то одно из этого или все вместе.

Ответы бывают следующие.

Радиокнопки:

1. С текстом и картинкой. Например, тест «Угадайте, о каком товаре этот отзыв с „Алиэкспресса“».
2. С тайлами. Например, тест «Сколько могла бы стоить ваша самая безумная свадьба?».
3. С видео. Например, тест «В какой богатейшей российской семье вы могли бы родиться?».
4. С аудио. Например, тест «В какую теплую страну вам пора переехать?».

Тайлы:

1. С текстом. Например, тест «Насколько вы типичный читатель Тинькофф-журнала?».
2. С картинками. Например, тест «Угадайте, кто из российских звезд зарабатывает больше».

Чекбоксы:

1. С текстом.
2. С тайлами.
3. С аудио.
4. С видео.

Ползунок. Например, тест «Угадайте, сколько стоит отдых в российских отелях этим летом».

Механики подсчета результатов

Подсчет баллов:

1. Сумма правильных ответов. Каждый вопрос содержит верные и неверные ответы. Если пользователь выбрал верный ответ, то счетчик увеличивается на единицу или любое другое количество баллов. Если неверный — счетчик не меняется. Результат зависит от количества правильных ответов. Примеры: «Кто вы в мире госзакупок?» и «Угадайте, сколько стоят эти вещи из СССР».
2. Сумма набранных баллов. Каждому ответу присваивается стоимость, результат теста зависит от набранной суммы. Примеры: «Поборы в школе: сдать или затаиться?», «Сколько стоят похороны вашей мечты?» и «Сколько вы зарабатывали в прошлой жизни?».

Частотность ответов. Каждый ответ в вопросе принадлежит одной из групп. После прохождения теста отображается результат, у которого группа была выбрана наибольшее количество раз: если больше А, то один результат, если больше Б — другой. Баллы могут быть в виде букв или цифр.

Пример: «В какой европейской стране вам будет комфортно жить?».

Квест. Каждый следующий вопрос зависит от выбранного ответа. Результат выдается в зависимости от последовательности вариантов ответов.

Пример: «Имущественный вычет: сколько вам вернут при покупке квартиры?».

В результатах могут быть:

1. Счет — потраченного, заработанного, штрафов. Например, тест «Сможете ли вы разбогатеть на акциях?».
2. Видео. Например, тест «Собери их все: смогли бы вы работать в налоговой?».
3. Перечисление особенностей. Например, тест «Какое ваше финансовое тотемное животное?».

Рубрики

1. «Психология» — тесты в формате «Какой вы?..» про людей и их предпочтения.
2. «Безумие» — развлекательные тесты, гороскопы, странное.
3. «ЕГЭ» — тесты на знания и финансовую грамотность.
4. «Микротесты» — тесты из одного вопроса.
5. «Финансовое чутье» — тесты на тему чужих зарплат и стоимости чего бы то ни было.
6. «Форумы и новости» — тесты на тему фольклора, россиян и того, как они живут.
7. «Другое» — все, что не подходит под вышеперечисленное.

Подборки

1. Тесты для тех, кто хочет узнать себя.
2. Тесты для тех, кому нечем заняться.
3. Тесты для эрудированных.
4. Тесты из одного вопроса.
5. Тесты на финансовое чутье.
6. Беспощадные тесты о жизни в России.
7. Тесты для тех, кто ищет место для жизни.
8. Тесты для тех, кто хочет сохранить деньги.

Шаблоны

Если вы хотите сделать тест, приходите с идеями. У вас должен быть черновой заголовок и описание на абзац, в чем ваша идея и как вы хотите ее реализовать: в каком формате, на каких источниках, что будет в результатах.

Если тест готов и вы хотите показать его редактору, то самый беспроигрышный способ оформления — шрифт Arial, 11-й кегль. Обратите внимание на обязательные пункты, которые вам нужно учесть. Например, заголовки и подзаголовки для шеров результата теста в соцсетях. Вот примеры, как все может быть оформлено:

• шаблон теста с вариантами ответов;
• шаблон теста с ползунком.

В этой статье речь пойдёт о разработке образовательных тестов — заданий по проверке предметных знаний и навыков. Но в целом описанные правила универсальны: тесты для оценки психологических качеств или софт-скиллов разрабатываются аналогично.

Вы узнаете:

• можно ли с помощью теста, где учащийся выбирает из вариантов ответов, проверить, как он умеет рассуждать;
• можно ли измерить тестом не просто знание фактов, а понимание учебного материала;
• чем трудные задания отличаются от сложных и почему трудным тест может быть, а вот сложным его лучше не делать;
• с каких заданий лучше начинать — простых или трудных;
• какое количество вариантов ответа оптимально;
• как проверить, работает ли тест.

---

Психометрики называют тестом любой инструмент измерения — и ролевую игру, и эссе, и оценку портфолио. Мы подробно разберём инструмент, за которым в русском языке закрепилось слово «тест» в узком значении, — вопросы с выбором ответа из предложенных вариантов.

У стандартизированных тестов в образовании не лучшая репутация. Но психометрики по-прежнему отстаивают такой способ измерения: тесты с выбором ответа масштабируемы, справедливы и объективны. Это значит, что по одному и тому же тесту можно проверить сколько угодно учащихся, причём все будут в равных условиях, а на результат не повлияет ничьё постороннее мнение.

Но в то же время любой психометрик скажет вам, что тесты с выбором ответа — не универсальный инструмент. Способ проверки знаний выбирают с учётом того, какой именно конструкт необходимо измерить. Конструктом в психометрике называют свойство психики или способность, которые нельзя наблюдать напрямую, но можно измерить по внешним поведенческим признакам.

Для каких конструктов подходят тесты с выбором ответа? Это практически идеальный инструмент для оценки знания фактов и сугубо технических навыков. Например, для проверки знания о том, как отделить команды друг от друга при программировании на определённом языке.

А вот проверить, как учащийся умеет рассуждать, взаимодействовать с коллегами или находить практическое решение в сложной ситуации, тест с выбором ответов не поможет. Чем сложнее природа конструкта, тем более гибким должен быть инструмент измерения.

Такие тесты способны выявить не любые знания. В любой дисциплине есть простые факты, и по ним легко написать вопросы с несколькими вариантами ответа. Например, спросить, в каком году Колумб открыл Америку.

А есть элементы знания, для которых простого запоминания недостаточно. Например, если мы хотим спросить, какие события и явления стали предпосылками для открытия Америки, вопрос с выбором ответа из нескольких уже не так хорош.

Каждый преподаватель хочет, чтобы студенты не только помнили факты, но и понимали материал. Но, увы, понимание как таковое пока невозможно измерить. Может быть, нейронауки в отдалённом будущем дадут возможность следить за всем, что происходит внутри черепной коробки каждого ученика. Но сейчас психометрика работает с тем, что можно наблюдать, с поведенческими проявлениями. У понимания таких универсальных проявлений нет.

Потому в педагогических измерениях, когда нужно оценить более глубокие, не фактологические знания, измеряют не само по себе понимание, а умение интерпретировать или анализировать. И более практичны, чем тесты с выбором из нескольких вариантов, тут задания с открытым ответом или компьютерные симуляции и игры. В таких инструментах среда тестирования будет более гибкой, чем стандартизированные тесты.

Если ваша задача — проверить усвоение фактологических знаний или отдельных навыков, тест с выбором ответов вполне подойдёт. Чтобы составить и распространить такой тест, не нужны сложные цифровые сервисы. Для базовых задач вполне достаточно форм Google или «Яндекса».

В этом разделе статьи разберёмся с основными вопросами о том, как составить хороший тест. А если нужно узнать по этой теме больше, советую книгу: Haladyna T. M., Rodriguez M. C. Developing and validating test items (Routledge, 2013) — и другие работы её авторов. Правда, на русском языке она, к сожалению, не выходила.

К концу теста любой учащийся устаёт. Поэтому последние задания зачастую уже не дают никакой информации о знаниях тестируемого. Получается, делать тест слишком длинным нельзя.

Но и коротким он быть не может — у небольших тестов ниже надёжность. На какой-то вопрос учащийся даст неверный ответ по невнимательности, а где-то, наоборот, случайно угадает правильный вариант. Если тест будет достаточно объёмным, больше шансов, что такого рода ошибки уравновесят друг друга и итоговый результат будет достоверен.

Так как определить, какой длины должен быть тест? Нужно отталкиваться от времени на решение одного задания. Оно зависит от трудности и может составлять от нескольких десятков секунд до пяти минут. Также стоит учитывать возраст учащихся:

• Детям до подросткового возраста нельзя давать задание дольше, чем на 20 минут, — или нужно предусмотреть возможность перерыва в тесте.
• Для старших подростков и студентов, а также взрослых лучше исходить из продолжительности привычного занятия. Например, для старшеклассника нормально посвятить тесту урок в 45 минут (или два урока с переменой между ними). А для студентов уже можно написать тест и на 80 минут.
• В дополнительном образовании взрослых следует учитывать, что взрослый человек уже не считает себя обязанным участвовать ни в каких тестах. Ему нужна дополнительная мотивация. Например, можно пообещать индивидуальную обратную связь по результатам теста (и потом обязательно её предоставить!).

Золотое правило таково: чем больше часов на тему отведено в курсе, тем больше вопросов в финальном тесте. Потому что изначально, когда курс составлялся, большее число часов было запланировано на более важную тему.

Если темы не слишком дробные, хорошо бы поставить минимум три вопроса на каждую. Опять же, потому, что случайные ошибки уравновесят друг друга. Но обратную связь потом лучше давать не только по каждому отдельному заданию, но и по теме в целом.

Небольшое отступление: в психометрике задание может быть трудным, но не сложным. Трудность в этой науке понимают так же, как обычно в русском языке. Чтобы справиться с трудным заданием, нужно обладать высоким уровнем знаний по теме. Скорее всего, немногие ученики решат трудное задание.

А сложность — отдельное психометрическое понятие. Оно характеризует, сколько действий и когнитивных операций нужно выполнить в процессе решения. Возьмём математический пример. Задание разделить 0,219 на 0,365 трудное, но не сложное: оно состоит всего из одного действия.

И начинать тест следует с более лёгких заданий, то есть с нетрудных. В начале теста уровень стресса всегда выше, что искажает результаты. Если вопросы в тесте распределены по тематическим блокам, можно в каждом из них располагать задания от лёгких к трудным.

Кстати, вопрос о распределении по тематическим блокам сам по себе непростой. С одной стороны, правильнее, чтобы тестируемый концентрировался в каждый момент теста на одной теме. С другой стороны, иногда важно проверить, может ли он быстро переключаться с одной проблемы на другую.

Как именно поступить, решают в зависимости от дисциплины и задач теста. Но важно ставить всех тестируемых в одинаковые условия, чтобы результаты были сопоставимы.

В целом делить на блоки тест правильно: так тестируемый увидит, что тест не бесконечен. В ситуации компьютерного тестирования, когда нельзя пролистать задания и понять, сколько ещё осталось, это важно. И, конечно, нужно предупредить, если время на ответы ограничено.

Наиболее привычны сегодня тесты как в ЕГЭ — с четырьмя вариантами ответа. Иногда можно услышать, что это связано с объёмом рабочей памяти: якобы четыре варианта появились, потому что именно такое количество элементов средний человек способен одновременно удерживать в уме.

Психологи-когнитивисты такое обоснование считают ненаучным. Скорее всего, к четырём вариантам ответа практики пришли случайно, и ничего биологически или психологически заданного в этой цифре нет. Вариантов может быть и меньше — например, три.

А вот придумать больше неверных ответов обычно затруднительно.

Создание неправильных вариантов ответа — на самом деле сложное психометрическое мастерство. Не зря их называют дистракторами, то есть отвлекающими внимание от верного варианта.

Суть в том, что неправильные ответы должны быть похожи на правильный и привлекательны. Очевидно неправильных ответов нужно избегать, как и ответов из другой области. Например, если в вопросе стоит формулировка «В каком году?», все ответы должны быть датами примерно из одного диапазона.

Но неверные варианты не должны содержать в себе правильный ответ или какую-то его часть — иначе нужно в вопросе объяснить, что тестируемый должен выбрать самый правильный ответ.

Высший пилотаж — неправильные варианты на основе типичных ошибок студентов. Это позволяет давать более глубокую обратную связь: не просто показывать, где учащийся ошибся, а анализировать, почему он выбрал именно такой неправильный вариант.

Кроме надёжности, у любого теста есть ещё одно важное качество — валидность. По классическому определению, валидность — свойство теста измерять то, на что он направлен. Более современное определение гласит, что результаты валидного теста можно интерпретировать в той логике, в которой он создан.

И иногда на валидность может повлиять просто то, что тестируемый иначе (но не неправильно!) смотрит на ситуацию в задании.

Возьмём пример из теста на критическое мышление, разработанного в ВШЭ. Это тест‑симуляция онлайн-среды, в ней нужно общаться с ботом. Одна из задач — получить недостающую информацию для рецепта торта.

По идее, тестируемый должен задать боту конкретный вопрос, например: «Сколько яиц нужно добавить?» Но человек может начать с приветствия, и не потому, что не понял задание. Сказать «Привет, как дела?» перед тем, как уточнять рецепт, вообще‑то нормально. Но если об этом не подумать при составлении теста, такой ответ будет оцениваться как ошибочный.

Одно из частых опасений по поводу тестов и причин, почему в них предлагают добавлять больше вариантов ответа, — «угадайка». Кажется, что в задании с двумя вариантами ответа вероятность угадать составляет 50%. Но это верно только в случае, когда весь тест состоит из одного вопроса с двумя вариантами ответа.

Если добавить второй вопрос, в котором не будет подсказок к первому и наоборот, вероятности просто перемножатся. И шанс случайно угадать правильные ответы составит уже 25%. В случае с тестом из десяти заданий вероятность ответить на всё правильно случайно пренебрежимо мала.

Но такой расчёт справедлив только для тестов с хорошо написанными неправильными ответами.

На магистерской программе Института образования психометриков учат проверять работоспособность тестов все два учебных года. Попробуем коротко разобрать, что именно они изучают.

Проверить тест можно качественным или количественным методом. Качественный метод представляет собой интервью. Разработчик теста выдаёт задания представителю целевой группы, наблюдает за ним и расспрашивает. Так можно выяснить, всё ли понятно в заданиях, что именно тестируемый делает для решения, какие вопросы ставят его в тупик, а какие кажутся слишком простыми.

Цель качественной проверки — убедиться, что решение теста задействует именно те когнитивные процессы, которые требовалось вовлечь (скажем, тестируемый действительно решает математическую задачу, а не навскидку выбирает из вариантов наиболее подходящий), что варианты-дистракторы не содержат элементов правильного ответа, что все инструкции к тесту понятны и так далее.

Оценка работоспособности теста количественными методами — как раз психометрика в узком смысле слова. Проводится она через статистический анализ, для которого нужно порядка 100 наблюдений.

Понятно, что для каждого курса такую проверку не проведёшь, обычно достаточно интервью. Но количественная оценка обязательна, если по результатам теста принимается какое-либо решение — о зачислении на курс, о сертификации.

В результате разработчик теста получит все те же данные, что и при качественной оценке. К тому же количественная оценка покажет, какие вопросы и утверждения не измеряют то, что должны, а какие вообще избыточны — тест работает и без них.

Тесты выполняют одновременно целый ряд функций:
1. Контролирующую;
2. Обучающую;
3. Развивающую;
4. Воспитывающую;
5. Диагностическую;
6. Прогностическую.

Тесты можно использовать как на любом этапе урока, так и так и при изучении
нового материала, его закреплении и обобщении и при итоговом контроле.

При изучении нового материала тесты применяются для организации
самостоятельной работы учащихся, при этом тестовое задание может не только
опираться на знания, полученными учащимися на предыдущих уроках, но иметь
поисковый, эвристический, проблемный характер.

При закреплении или проверки текущего материала используются тесты-минутки
рассчитанные на 10–15 мин урока и содержащие 5–10 вопросов.

При итоговом контроле тестирование проводится довольно часто, при этом тесты
охватывают материал по крупным блокам (определенную тему, раздел). Их выполнение
рассчитано на целый урок. Экзаменационный тест должен охватывать материал всего
курса географии России в 9 классе или экономической и социальной географии мира
в 10–11-х классах. Школьные экзаменационные тесты проводятся, как правило, в
течении 2 часов и содержат от 25 до вопросов и заданий.

Тесты пригодны как для фронтальной, так и для групповой и индивидуальной
работе учащихся. С помощью тестовых заданий и вопросов значительно проще
подобрать материал, для каждого конкретного ученика, соответствующий уровню его
развития, возрастным мотивационным особенностям.

Тесты можно использовать не только на уроке в классе, но и в качестве
домашнего Задания, в отдельных случаях можно предложить учащимся составить
тестовые задания, что научит ребят правильно формулировать вопросы, будет
способствовать формированию умений обобщать и анализировать полученные знания
применять их на практике.

Методика составления и проведения тестов.

Основными этапами любого тестирования являются:

1. Целеполагание т.е постановка конкретных целей перед тестированием и
   понятных учащимся.
2. Подготовка и сбор информации для составления теста, соответствующей
   школьной программе, учебникам и пройденному материалу.
3. Разработка и конструирование теста, т.е. выбор определенных видов
   тестовых вопросов и заданий с учетом определенных требований:
   надежность, точность, лаконичность;
   недопустимость применения двусмысленных вопросов;
   использование дополнительной литературы, энциклопедий, справочников для
   составления тестов и их решения допустимо лишь для специализированных
   классов и школ, а также для индивидуальной работы с сильными учащимися.
4. Подготовка участников тестирования заключается в мотивации, настрое и
   тренинге.
5. Непосредственно тестирование должно стать одним из видов учебной
   деятельности учащихся.
6. После проведения тестирования наступает обработка теста, т.е. проверка с
   помощью ключа
7. Итогом результатов тестирования должен стать анализ результатов.
8. Публикация результатов тестирования. Учащиеся должны быть ознакомлены с
   результата тестирования, они должны быть допущены к просмотру выполненных
   работ и имеют право на апелляцию.

При всем многообразии тестовых задании можно выделить всего четыре основных
группы тестов:

1. задание на выбор правильного ответа;
2. приведение в соответствие или классификацию объектов;
3. расположение объектов в определенном порядке;
4. “открытые” тесты, где необходимо вписать “пропущенные” слова.

Виды тестов по форме.

Наиболее простыми при составлении и самыми распространенными видами тестовых
заданий являются тесты-определители, составленные по принципу вопрос – ответ.

1. Тесты – определители с одним правильным ответом.

Сложность данного типа тестового задания зависит, от количества указанных
ответов: два, три и т. д. Например: выделите страну, господствующей религией в
которой является ислам: 1. Ангола, 2. Италия, 3. Пакистан, 4. Канада, 5. Перу,
6. Фиджи.

Кооперирование – это:

а) выпуск предприятием соответствующей продукции;
6) сосредоточение на одном предприятии технологически последовательно связанных
производств;
в) сосредоточение предприятий на одной территории;
г) объединение предприятий с целью производства единой конечной продукции.

Ли6о наоборот: вопросом является определение, а ответом – само понятие.
Объединение предприятий с целью производства единой конечной продукции – это:

1. специализация;
2. комбинирование;
3. кооперирование;
4. концентрация.

2. Тесты – определители, где ответы идут с увеличением участвующих объектов,
причем обходимо назвать их максимальное количество.

Летом тропические ВМ господствуют:

1) в тропическом климатическом поясе;
2) в тропическом и субтропическом климатических поясах;
3) в тропическом, субтропическом и субэкваториальном климатических поясах.

3. Тесты – определители, где все ответы правильные.

Крупными производителями автомобилей являются:

1) Япония;
2) Западная Европа;
3)США;
4 )все указанные регионы.

4. Тесты – определители, имеющий несколько правильных ответов и указано их
количество (один, два, три и т. д.).

В данном списке выделите два региона России, в которых нет городов –
миллионеров:

1. Центральный;
2. Дальневосточный;
3. Западно-Сибирский;
4. Центрально-Черноземный;
5. Волго-Вятский;
6. Северо-Кавказский.

5. Тесты – определители, имеющие несколько правильных ответов, построенные по
принципу выделения неправильных ответов, но неуказанно их количество.

Выделите объекты, относящийся к формам рельефа:

1) холм;
2) ветер;
3) песок;
4) равнина;
5) овраг;
6) гранит.

6. Тесты – определители построенные по принципу выделения неправильных
ответов, имеют, как правило, в задании какие – либо отрицания.

Выделите объект, не относящийся к Средней Сибири:

1) траппы;
2) Саяны;
3) Таймыр;
4) лиственница;
5) Путорана.

7. Тесты – определители с использованием рисунков, графиков, схем или
диаграмм.

На какой из приведенных диаграмм верно указано соотношение суши и воды на
Земле:

 

8. Альтернативные тесты формулируются в виде вопроса – утверждения и требует
однозначного ответа “да” или “нет”. Альтернативный тест может содержать один или
несколько заданий.

В развитых капиталистических странах ввиду высокого уровня жизни наблюдается
высоки естественный прирост населения.

1)да; 2)нет.

9. Опознавательные тесты, т.е. определение объекта по краткой характеристике,
где названы примеры объектов, один из которых правильный.

Определите физико-экономический район России по данной характеристике:
занимает большую площадь территории, большая часть которой занята древней
платформой, преобладают плоскогорья, особенностью геологического строения
являются траппы, на большей части территории климат резко – континентальный, на
территории района находится “полюс холода; широко распространены мерзлотно –
таежные почвы и лиственничные леса.

1) Русская равнина;
2) Горы Южной Сибири;
3) 3аподно – Сибирская равнина;
4) Средняя и Севере – Восточная Сибирь.

10. Определение объекта по краткой характеристике, ответ необходимо вписать
самостоятельно.

По данной характеристике определите страну Европы: внутриконтинентальная
страна, федеративная республика, член ЕС, проводит политику постоянного
нейтралитета, столица является крупнейшим городом страны.

——————————————————————————————————–

Ответ: Австрия

11. Определение объекта по списку других объектов, где указаны варианты
ответов.

По списку типичных животных определите природную зону Африки (Горилла,
шимпанзе леопард, карликовый бегемот, окапи, птица – носорог):

1) влажные экваториальные леса;
2) средиземноморская;
3) саванны;
4) пустыни.

12. Определение объекта по списку других объектов без вариантов ответа.
По списку приграничных государств определите страну Азии (Исламабад, Пекин,
Дакка, Катманду).Ответ:

–———————————————————————————————————-

Ответ: Индия

13. Приведение в соответствие, причем количество вариантов первого первого
столбика совпадает с количеством вариантов второго столбика.

Приведите в соответствие горные системы и их геологический возраст:

1)Гималаи 2)Уральские горы 3)Кордильеры

а) древняя складчатость б) средняя складчатость в) новая складчатость

Ответ: 1-в; 2-а; З-б

14. Приведение в соответствие, причем количество ответов первого столбика не
совпадает количеством вариантов второго столбика.

Приведите в соответствие формы рельефа и тектонические структуры:

1)Урал 2)Хибины 3)3аподно-Сибирская равнина 4)Сихоте-Алинь

а) щит б) молодая платформа в) герцинская складчатость г) мезозойская складчатость

Ответ: 1-в;2-а;3-б;4-д

15. Приведите в соответствие, подразумевающее вариативность правильных
ответов.
Приведите в соответствие климатические пояса и характерные для них ВМ:

1 .экваториальный 2. субэкваториальный 3. тропический 4. субтропический

а) тропические б) умеренные в) субэкваториальные г) экваториальные

Ответ: 1– а;2-а;3-а;4-а,б

16. Тесты на приведение в соответствие. В одном из столбиков есть “лишний”
вариант. Приведите в соответствие отрасли промышленности и факторы их
размещения:

1. гидроэнергетика 2. металлургия алюминия 3. судостроение 4. сахарная промышленность

а) потребительский б) сырьевой в) энергетический

Ответ: 1-б;2-г;3-а;4-б

17. “Открытые” (или перспективные) тесты.

В отличие от тестовых заданий, предполагающих необходимость самостоятельно
вписать верный ответ, в “открытых” тестах в отдельных случаях не “связан” одним
верным ответом, а имеет право самостоятельного выбора объектов, отвечающим
названным требованиям.

Вставить пропущенные слова. При данной постановке вопроса у тестируемого, как
правило нет самостоятельного выбора – необходимо вписать конкретные слова.
Вставьте пропущенные слова: Низменность – это вид ______, с ____ высотой до __
метров, (равнины, абсолютной, 2000.)

Самостоятельно вписать примеры – данный вид тестового задания подразумевает
полную свободу действий тестируемого.

Назовите три основных государства Азии:

———————————————————————————————–

—————————————————————————————————-

на выбор: Бахрейн, Бруней, Кипр, Мальдивские о-ва, Сингапур, Тайвань, Шри –
Ланка, Филиппины, Япония.

18. Тесты связанные с заполнением таблицы без вариантов ответа.

Заполните таблицу:

Воздушные массы	Район формирования	Температура и влажность
		Жаркая и влажная
тропические
	Умеренные широты над океаном	Лето: Зима:
антарктические

19. Тесты, связанные с заполнением таблицы с вариантами ответов.

Заполните таблицу, используя предложенные варианты ответов:

Страна	Столица	Форма правления	Административно-территориальное устройство
Канада
	Прага
		Конституционная монархия
Оман
			Конфедерация

Варианты ответов: Чехия, Швейцария, Норвегия, Маскат, Оттава, Берн, Осло,
республика, абсолютная монархия, государство Британского Содружества, унитарное,
федеративное.

20. Тесты связанные с заполнением схемы с вариантами ответов.

Заполните схему, используя следующие слова:

1. Мировой океан;
2. болота;
3. ледники;
4. горные;
5. подземные воды;
6. реки;
7. покровные.
8. моря;
9. заливы.

21. Тесты, связанные с заполнением схемы без вариантов ответов.

Заполните схему:

22. Тестовые задания, требующие выполнение расчетов, с вариантами ответов.

Используя рисунок 60 на странице 96 (Суханов В.П. Физическая география. 6
класс.) или рисунок 80 на странице 144 (Герасимова Т.П. и Неклюкова Н.П.
География. Начальный курс.).
Определите, сколько выделится воды, если температура воздуха снизится с 20 С до
10 С при условии, что относительная влажность воздуха равнялась 100%: 1) 9 г; 2)
8 г; 3) 17 г.

23. Тесты, требующие выполнение расчетов без вариантов ответов.

Определите коэффициент увлажнения, если известно, что в городе Н испаряемость
равна 31 мм. и в течении года выпадает 488 мм. осадков:

Ответ 1,3

Тесты – классификаторы.

Тесты – классификаторы формулируются в виде набора определенных объектов,
и тестируемый должен провести их классификацию по указанному критерию или
выбрать критерий классификации самостоятельно. Данный вид теста наиболее удобен
для установления внутрипредметных или межпредметных связей.

24. Тесты – классификаторы с указанием классификации.

Разделите горные породы, приведенные в данном списке, на три группы:
а) известняк; б) гранит; в) мрамор; г) базальт; д) туф; е) ракушечник; ж) гнейс;
з)галька; и) уголь; к) обсидиан; л) графит; м) доломит.

Осадочные: ————– ————– ————–

Метаморфические: ——————- ——————- ——————-

Магматические: —————— —————— ——————

Проклассифицируйте указанные объекты по природным зонам России и результаты
занесите в таблицу: Лиственница, лемминг, ковыль, бурундук, ягель, песец,
соболь, дрофа, кедр, кролик.

25. Тесты на самостоятельную классификацию.

Сгруппируйте по языковым семьям народы России:

Русские, карелы, татары, осетины, якуты, украинцы, коми, буряты, башкиры,
удмурты.

А	Б	В	Г
———– ———– ———–	———- ———- ———-	———- ———- ———-	———- ———- ———-

26. Тесты, проверяющие знания географической карты и географического
пространства построенные по принципу альтернативного теста.

В каждой паре подчеркните страну, расположенную севернее:

Норвегия – Дания;
Испания – Бельгия;
Чехия – Венгрия;
Швейцария – Германия.

27. Расставить по порядку.

Распределите горные страны по мере увеличения их высоты:

Гималаи – _____ 4
Уральские –____ 1
Альпы – ________2
Кордильеры – ____3

28. Тесты на установление причинно – следственных связей.

Укажите правильную последовательность причинно – следственных связей:

Развитие земледелия – __________ 4
Агроклиматические ресурсы – ___1
Географическая широта – _______2
Плодородие почв – ____________ 3

29. Тесты по нахождению “лишнего” объекта, где даны критерии ответа.

В данном списке выделите народ, отличающийся от остальных по религиозному
признаку: Русские, сербы, грузины, греки, поляки

30. “Лишний” объект – нет критериев ответа.

В данном списке выберите ответ отличающийся от остальных: Гранит, базальт,
пемза, обсидиан, мрамор.

На моём канале “Домобуч” по будням выходят тесты по школьным предметам. В этом году, в основном, это программа 6 класса. Просто дочь учится в 6 классе и я с помощью тестов систематизирую пройденный материал, раскладываю всё по полочкам.

Тесты помогают быстро повторить пройденное, выяснить, что уже забылось и принять меры. Да и взрослым полезно освежить свои знания.

Я очень рада людям, которые отвечают на вопросы моих тестов, указывают на ошибки, спорят. Некоторых узнаю по никам, радуюсь, как хорошим знакомым, жду ответной реакции. В тест легко может закрасться опечатка или фактическая ошибка.

По моему опыту, даже в школьных учебниках ошибки встречаются регулярно, а по некоторым вопросам грамматики разнятся данные филологов и словарей. Как же правильно? Вот, разбираемся вместе.

В результате я уверена, что в опубликованных тестах не ошибок и двусмысленностей, поэтому их можно использовать без опаски.

Но что делать, если вам неинтересны тесты для 6 класса, а нужны, например, для девятого или вы совсем другую тему сейчас изучаете? Можно составить нужный тест самостоятельно.

Вот – подробная инструкция по составлению теста для начинающих.

Видео на эту тему, по принятой в Дзене традиции, размещаю внизу статьи.

Шаг № 1. Где находятся Яндекс-формы?

Первым делом ищем заветный плюсик, который находится рядом со значком фотоаппарата.

Нажимаем на этот плюсик (я его обвела) и попадаем на вкладку “Виджеты”. Нам нужны “Формы”.

Кликаем на них и попадаем туда, куда нам и надо. А, нет, всё поменялось.

Попадаем вот на такую вкладку.

Это облегчённая форма конструктора. Я ею не пользуюсь, поэтому приглашаю сразу нажать на Я_Формы, те самые, что обведены красненьким.

И вот мы попадаем туда, куда нужно.

Шаг № 2. Создаём новую форму

Неважно, как у вас выглядит открывшаяся страница. Нам нужен вот этот жёлтый прямоугольник в правом верхнем углу, который так и называется “Создать форму”.

У меня эта страница в закладках, поэтому я работать начинаю сразу отсюда.

Нажимаем на прямоугольник, и во оно – наше поле деятельности.

Шаг № 3. Даём название новой форме

Сделать это просто. Наведите курсор мышки на текст “Название формы”, справа от надписи увидите карандашик.

Нажимаете на карандаш и открывается поле для ввода текста.

Называете форму так, чтобы её легко можно было найти. У меня создано уже так много тестов, что найти конкретный простым перелистыванием сложно. Я пользуюсь поиском. А для этого надо помнить, как я называла тест.

Этот тест у меня будет по технологии, поэтому я так и назову:

Чтобы название сохранилось, нужно кликнуть мышкой, выведя курсор за пределы строки, которую вы только что заполняли.

Шаг № 4. Делаем обложку теста

Мы работаем в конструкторе сейчас. На предыдущем слайде можно заметить, что слово “конструктор” выделено красным.

Обложку можно и не делать. Тогда в статье сразу будет виден первый вопрос. Если статья будет состоять только из “первых вопросов”, как, к примеру, ТУТ, то обложка не нужна.

Если же тест состоит из нескольких вопросов, то я делаю обложку.

Выбираю кнопку “Текст без вопроса”.

Сразу открывается вот такая форма:

В ней я пишу “приветственную фразу”. Обычно вот такую. И не забудьте поставить “птичку”.

Далее жмите кнопку “Сохранить”. Вот, мы создали первую страницу теста. Но одной нам мало, поэтому кликаем на кнопку “Добавить страницу”.

Появилась вторая страница теста. Пока она ещё пустая.

Шаг № 5. Создаём вопрос теста с однозначным выбором

Сейчас мы создадим вопрос, к которому есть только один ответ. Для этого нажимаем кнопку “Один вариант”.

Сразу открывается форма создания вопроса с одним вариантом ответа.

Заполняем все поля. В широком пишем сам вопрос. В маленьком, где сейчас написано “Вариант 1” – пишем первый ответ. Затем кликаем на поле “Добавить вариант” и пишем второй вариант ответа. Так можно много вариантов написать, хоть десять. Но обычно достаточно 2-4.

Правильный ответ помечаем птичкой. И можем назначить за него сколько угодно баллов, по умолчанию будет 1 балл.

Вот так получается:

Очень удобно, что справа видно, как этот вопрос будет выглядеть в статье. Если что-то не нравится, можно сразу подкорректировать.

Теперь опускаемся чуть ниже с помощью бегунка, расположенного слева. Там есть ещё формы для заполнения.

Если поставить “птичку”, что это обязательный вопрос, то тест не даст читателю пропустить его. Это полезная опция, потому что иногда случайно можно дважды кликнуть и пролистнуть вопрос, потерять балл и не заметить этого.

Я активирую опцию “сортировка ответов” в случайном порядке для каждого пользователя или, когда это нужно, по алфавиту.

Теперь можно нажать кнопку “Сохранить”. И у нас готова вторая страница теста.

Шаг № 6. Создаём вопрос с несколькими верными ответами

Добавляем страницу (вы это уже умеете делать).

Кстати, если страницу не добавить, то следующий вопрос будет у вас на одной странице с предыдущим. Иногда это тоже интересный вариант – видны сразу все вопросы теста. Но мне нравится, когда каждый вопрос располагается на отдельной странице.

Теперь нажимаем на кнопку “Несколько вариантов”.

Появляется форма, очень похожая на предыдущую. Но обратите внимание на предупреждение – текст на голубом фоне. Сумма баллов засчитается, если будут выбраны все верные ответы без неверных.

Я заполнила страницу вопроса. У меня здесь три верных ответа и один неверный. Отвечающий получит целых три балла, если выберет все верные ответы (они помечены тут птичками). Но если он выберет один, два или 4 варианта, то не получит ни одного балла. И это очень печально. Но я пока не нашла другой формы, которая бы устраняла эту несправедливость.

Дальше делаем всё также, как и в вопросе с одним вариантом ответа.

По этому принципу составляем все остальные вопросы.

Шаг № 7. Вкладка “Тема”

Здесь вы можете выбрать цвет кнопки. По умолчанию он жёлтый, но я вот поставила голубой.

Тут всё просто – выбираете цвет и нажимаете внизу кнопку “Сохранить”.

Можно выбрать и цвет поля текста. Вот, к примеру, пусть будет зелёным. В окне предварительного просмотра вы можете видеть все изменения.

Вкладка “Интеграция” мне не нужна пока, я с ней не разбиралась.

Шаг № 8. Настройки

Переходим на вкладку “Настройки”. Здесь нужно нажать на кнопку “Тесты и квизы”.

Это важная страница. Здесь вы заполняете обратную связь для пользователя.

Нужно обязательно поставить птичку “Показывать результат прохождения теста”, иначе человек ответит на вопросы теста, а результат посмотреть не сможет.

И я активирую ещё “Показывать правильные и неправильные ответы в результатах теста”. Эта опция появилась не так давно и периодически подглючивает. Но это очень удобно: пройти тест, узнать результат и сразу увидеть, где ошибся.

Количество сегментов можно поставить любое, я обычно ставлю 5, так как тесты у меня по школьной программе, вот и привязалась к пятибалльной системе.

Получается примерно так.

И вот так. Все поля заполнены. Нажимаем кнопку “Сохранить”.

Тест готов!

Шаг № 9. Публикация

Нажимаем на кнопку “Поделиться”. Копируем тот код, который нужен. Для Дзена – верхний.

А затем вставляем в тело статьи на Дзене просто нажав горячие клавиши Ctrl +V.

Вот и всё.

Как выглядит готовая статья с этим тестом Вы можете посмотреть ЗДЕСЬ.

____

Я постаралась рассказать подробно. Если есть вопросы – пишите, отвечу.

Для тех, кто не любит читать – видео.