Базовые требования к тестовым заданиям. Нужно ли тестовое задание в игровой индустрии и что оно должно проверять — мнения экспертов Как группировать задания тестов

Будучи в поиске работы, я выполнил тестовое задание по запросу одной компании-работодателя, - рассказывает копирайтер Денис Борисов. - Руководство показалось мне адекватным, да и задача была не особенно сложной - написать два поста с афишами мероприятий компании для её сообществ в соцсетях "Вконтакте" и "Фейсбук". Меня сразу должно было насторожить, что мероприятия, которые я описывал, не состоялись ранее, а только планировались. Второй момент, на который мне стоило обратить внимание, - всё общение мы вели только по почте, у меня не было даже номера телефона потенциального работодателя (он откликнулся на моё объявление о поиске работы в Интернете).

Дмитрий Борисов написал для этой компании два анонса, потом ещё несколько - все они появились в группах компании в соцсетях. Потенциальный руководитель спросил его, сколько он хочет получить за свою работу, он назвал сумму в полторы тысячи рублей.

После этого руководитель сообщил, что сейчас на работе аврал, но когда они разберутся со своими делами, сразу же вышлют гонорар. И исчез. Пост в соцсети - это, конечно, мелочь, но каково тем, у кого крадут серьёзные аналитические статьи или планы развития отдела или компании, например? В итоге я всё-таки смог найти работу в качестве редактора рубрики на информационном портале о безопасности, но всем соискателям советую быть начеку при выполнении тестовых заданий, - заключает Денис Борисов.

Итак, учимся распознавать намерения работодателей по тестовому заданию.

Мы не берём на рассмотрение случаи откровенного мошенничества, когда соискателя просят перевести определенную сумму якобы для отправки договора на подписание или для оплаты работы курьера, который доставит тестовое задание прямо к порогу вашей квартиры. Тут рецепт простой - если у вас под каким-либо предлогом просят деньги, значит связываться с таким "работодателем" не нужно.

А вот с выполнением тестового задания того или иного объёма всё немного сложнее. Большинство работодателей проверяют ваши способности без злого умысла. По словам Марины Хадиной, руководителя карьерного направления HeadHunter, так происходит в 99% случаев. Прежде чем начать подозревать компанию в недобросовестности, нужно понять, что предоставить свои интересные идеи - ещё не значит их реализовать, а это вы сможете сделать уже будучи трудоустроенным на желаемую вакансию.

Однако вероятность попасть в оставшийся 1% заставляет ищущих работу изрядно понервничать. Особенно трудно тем, кто уже попался в эту ловушку однажды и теперь опасается любых тестовых заданий, даже самых небольших. Негативный сценарий, как правило, один и тот же, вне зависимости от сферы. Кандидата могут попросить написать пять (тут у кого на что наглости хватит) текстов на заданную тему при попытке трудоустроиться на позицию копирайтера или редактора сайта. После выполнения задания в приеме на работу отказывают, а спустя время вы видите свои труды на сайте компании без указания авторства. О компенсации, конечно, речи не идёт. Также соискателя могут попросить: написать сценарий передачи, нарисовать несколько вариантов логотипа, разработать макет сайта или концепцию развития отдела или компании.

Распознать неэтичного работодателя можно по следующим признакам: он предлагает вам представить законченный продукт "от" и "до", ставит в очень конкретные рамки и много раз просит доработать задание, делая его всё сложнее, - говорит Ирина Святицкая, руководитель сайта Career.ru.

А по словам Елизаветы Надеева, менеджера по работе с клиентами Coleman Services, кроме вышеуказанного, вас должны смутить предложения решить кейсы с очень подробными условиями и цифрами, требующие больших временных затрат для проведения аналитической работы и подготовки презентации/предложения. Также недобросовестные работодатели могут попросить соискателей предоставить развёрнутое решение кейса (диск с презентацией, расчеты, детальный план и т.д.). Если речь идет о переводе статьи, то обратите внимание на объём текста - он не должен быть слишком большим и должен носить общий характер или быть неактуальным.

Чтобы было проще разобрться, что есть норма в тестировании кандидатов, Елизавета Слученкова, старший специалист по подбору персонала Kelly Services, напоминает:

Всегда есть возможность использовать для оценки уровня специалиста уже опубликованные материалы, если у него имеется опыт работы. Например, при устройстве в ИТ-компанию готовые коды и созданные сайты будут достаточным показателем вашей квалификации.
Хороший работодатель постарается дать задание "здесь и сейчас". "Домашнее задание" часто выполняется с чьей-то помощью или списывается из Интернета, поэтому проверять навыки кандидата лучше всего в режиме реального времени. Проверка кандидата в таком случае должна заключаться в решении какой-то практической ситуации, а не состоять из академических вопросов.
Иногда работодатели в качестве тестовой задачи могут предложить реальную рабочую ситуацию (не с целью использовать ваши знания, а просто чтобы ничего не выдумывать). Но тогда соискатель должен не решать задачу "от и до", а только смоделировать ситуацию, составить план, определить количество времени, необходимого для решения этого вопроса. Сам подход к работе, её организация - это тоже показатель вашей квалификации.
От соискателей на руководящие должности может потребоваться составить график, презентацию. Например, кандидату на должность коммерческого директора могут предложить наметить план продаж. Вы можете создать этот план, но комментарий к нему должен быть устным, чтобы ваши идеи никак не использовались. Презентация и графики должны послужить лишь иллюстрацией к вашим знаниям.

Если то, как именно вы должны выполнить тестовое задание, заранее не прописано, Ирина Святицкая рекомендует перенести его в сознательно вымышленные условия - так вы сможете продемонстрировать творческий подход, но ваши идеи будет невозможно применить в конкретной компании. Кроме того, делая тестовое задание, всегда прописывайте возможность дальнейшей проработки вашей идеи после найма. Другим словами, покажите ваш потенциал и готовность реализовать его на практике - тестовые задания существуют именно для этого.

Устраиваясь на работу, необходимо заранее решить для себя, на что вы готовы ради заветного места.По мнению Елизаветы Слученковой,если человек находит "вакансию мечты" и понимает, что конкурс на неё будет серьезным, он должен настроиться тратить время на тестовые задания, на собеседование в несколько этапов - это неизбежно. В крупных компаниях типа Google этапы собеседования могут стать в итоге полезным опытом сами по себе, вне зависимости от результата.

Да, риски есть, есть компании, которые пытаются за счёт кандидатов решить свои вопросы. Но можно с этим бороться, надо делиться опытом друг с другом в Интернете, - говорит Слученкова.

Могу сказать, что во многих крупных компаниях тестирование является обязательным этапом прохождения собеседования. Однако следует помнить, что отказ от прохождения теста, неважно, по каким причинами, для работодателя может явиться причиной для отказа от дальнейшего рассмотрения кандидата, - предупреждает эксперт.

Основная классификация тестовых заданий - задания:

закрытого типа (когда ученику предстоит выбрать из готовых вариантов ответа);

открытого типа (когда ученик сам находит ответ и вписывает в бланк).

Задания закрытого типа , в свою очередь, делятся на:

один вариант ответа (множественный выбор; radio-кнопка). Ответ засчитывается, если ученик выбрал его правильно. Варианты:

простой выбор - один ответ из 4-5;
простой выбор из множества - один ответ из 6-15;
выбор наиболее точного ответа из представленных.

тесты, в которых можно выбрать несколько вариантов ответа - поставить галочки, но правильным может быть как один, так и несколько вариантов ответа (альтернативный выбор, checkbox). Ответ за тест может засчитывается только если все ответы даны правильно (нет ни лишних, ни недостающих) или начисляется балл за каждый правильный ответ и вычитается балл за каждый неправильный ответ. Варианты:

сложный выбор - двух и более правильных ответов из 4-5;
сложный выбор из множества - двух и более правильных ответов из 6-15.

установить соответствие (слева и справа даются связанные понятия, например, слова в предложении, родовые и видовые понятия и др.). Ученику нужно провести линии соответствия, на компьютере перетащить блоки и установить друг с другом и т.п. Сюда же можно отнести задания на сортировку и классификацию . Варианты соответствия между:

понятиями и определениями;
датами и событиями;
списком понятий и их характеристиками;

определить последовательности (ученику предлагается ряд понятий, дат, слов, которые ему предстоит установить в правильной последовательности). Варианты:

установление хронологической последовательности событий;
установление логической последовательности;
расстановка чисел по возрастанию / убыванию;ъ

альтернативный ответ (ученику предлагается установить Да-Нет или Правда-Ложь по каждому приведенному утверждению).

Задания открытого типа:

вписать небольшую фразу, слово или символы - как дополнение к контексту. Например, вставить пропущенную букву, знаки препинания, пропущенное слово и т.д.;

свободное изложение - ученику выделяется место для свободного изложения ответа на вопрос. Место может быть ограничено по количеству символов, например, не более 100 или 500 символов, 10 слов и т.п.

Когда и какие варианты заданий использовать?

Характеристики	Задания закрытой формы	Дополнение	Установление соответствия	Установление последовательности
Проверка знания фактов
Применение знаний по образцу
Применение знаний в нестандартных ситуациях
Угадывание		Исключено
Объективность оценки
Исключение описок

Таблица М.Б. Челышковой.

Как группировать задания тестов

Существует три подхода к группировке тестовых заданий:

все задания выводятся случайным образом - для хорошо использовать программы тестирования или онлайн-сервисы тестирования;

задания выводятся в порядке усложнения - сначала простые, потом сложные. Это позволит ученикам быстро продвинутся вперед, а не «сидеть» со сложным заданием в начале тестирования, потратив все отведенное на тест время. В порядке усложнения даются задания ЕГЭ;

задания группируются по типу или теме - таким образом, ученик может приспособится к типу задания, а не настраиваться на каждый тип задания, затрачивая время.

Правила составления тестов

Тестовое задание должно быть сформулировано четко, понятно и должно толковаться однозначно. Если вопрос сформулирован таким образом, что не все ученики могут его понять однозначно, формулировку нужно изменить. Пример: Фирма, предоставляющая сетевые услуги – это... Ученик задаст вопрос: что такое «сетевые услуги? Услуги доступа в интернет? Фирма сетевого маркетинга типа Avon или что-то еще?

Тестовое задание должно быть сформулировано кратко, желательно без использования сложноподчиненных предложений, лишних причастных и деепричастных оборотов, вводных слов. Лучше разбить задание на несколько небольших предложений. Если в задании много «который», «где», «чем», много запятых, его будет трудно понять, а значит, и решить. Не бойтесь разбивать предложения на части.

Задание должно быть сформулировано без повторов, двойного отрицания (не – не), а лучше и вовсе избегать отрицания. Пример: Программа Paint не является программой для работы с электронными таблицами. Варианты ответов: Да-Нет. Ученику будет трудно ответить на этот вопрос, т.к. и в задании, и в ответе есть отрицание.

Не стоит писать в вопросе слова типа: «сформулируйте», «укажите», «сообщите», если это и так предполагается самим вопросом. Например: Напишите, как звали первооткрывателя Америки? Слово «напишите» лишнее.

Проверяйте и формулировки заданий, и формулировки ответов, чтобы в них не было подсказок для ученика. Следите, чтобы в одном задании не было подсказки по ответу на другое задание.

В заданиях не должно быть явно неподходящих ответов, увидев которые ученик сразу вычислит правильный ответ. Все ответы должны быть примерно одинаковыми и по содержанию, и по объему.

Повторяющиеся фразы в каждом варианте ответа нужно включить в текст вопроса.

Не допускается использование в вопросе оценочных суждений и отсылке к субъективному мнению ученика. Например, использование слов «важный», «главный» не допускается.

В задании главное слово (ключевое понятие) лучше сделать началом предложения. Лучше не начинать формулировку задания с предлогов или союзов. Пример: На какую группу стран приходится наименьшая доля в мировом ВВП и экспорте товаров. Правильно: Наименьшая доля в мировом ВВП приходится на…

В тестовом задании должно быть достаточное количество вариантов ответов:

закрытые типы вопросов - 4-6 вариантов ответов;
установить соответствие - 4-5 вариантов ответов;
расставить последовательность - 4-8 вариантов ответов;

Желательно сопровождать задания и варианты ответов иллюстрациями, схемами, таблицами и т.д.

В тесте должно быть достаточно много заданий, а также заданий разного уровня сложности, чтобы результаты тестирования были максимально объективными и надежными. Также это поможет исключить утомление ученика.

В тесте желательно чередовать различные виды заданий, а также избегать большого числа простых заданий (Да-Нет и др.) для повышения объективности теста.

Крайне нежелательно включать в тест задания и вопросы-ловушки, провокационные вопросы - это не профессионально и понижает доверие учащихся к тесту, преподавателю и тестированию в принципе.

Избегайте вопросов, на которые можно ответить на основе эрудиции или логического размышления, поскольку задача теста - не проверить начитанность и умение размышлять, а проверить специальные знания у конкретного ученика, знания учебного материала.

Исключайте вопросы на знание текстов (если это не требуется специально), справочной информации, мелких деталей и проч.

9. В задании не используются слова, вызывающие различное понимание у испытуемых, а также слова, являющиеся подсказкой, например, «иногда», «часто», «всегда», «все», «никогда».

10. Ни в тексте, ни в вариантах ответов не должно быть подсказок.

11. Лучше «длинный» вопрос и «короткие» ответы, чем наоборот.

12. В заданиях, носящих составной характер, необходимо обеспечить такую последовательность, чтобы правильность выполнения одного задания не зависела от правильности выполнения другого задания данной группы.

13. Используемая в заданиях терминология не должна выходить за рамки учебной литературы.

Базовые требования к тестовым заданиям

1. Содержание тестового задания должно быть ориентировано на получение от тестируемого однозначного заключения.

2. Основные термины тестового задания должны быть явно и ясно определены.

3. Тестовые задания должны быть прагматически корректными и рассчитаны на оценку уровня учебных достижений студентов.

4. Тестовые задания должны формулироваться в виде кратких суждений.

5. В содержании тестового задания определяющий признак должен быть необходимым и достаточным.

6. Следует избегать тестовых заданий, которые требуют от тестируемого развернутых заключений на требования тестовых заданий.

7. При конструировании тестовых ситуаций необходимо применять различные формы их представления, а также графические и мультимедийные компоненты с целью рационального предъявления содержания учебного материала.

8. Количество слов в тестовом задании не должно превышать 10-12, если при этом не искажается понятийная структура тестовой ситуации. Главным считается ясное и явное отражение содержания фрагмента предметной области.

9. Среднее время заключения испытуемого на тестовое задание не должно превышать 2,5 минуты .

Требования к содержательной части тестовых заданий

1. Тестовое задание должно быть представлено в форме свернутого краткого суждения, сформулировано ясным, чётким языком и исключать неоднозначность заключения тестируемого на требование задания.

2. Содержание задания должно быть выражено предельно простой синтаксической конструкцией без повторов и двойных отрицаний.

3. В тексте тестового задания не должно быть непреднамеренных подсказок и сленга.

4. Задание должно быть составлено с учетом того, что среднее время формирования заключения испытуемого со средним уровнем обученности составляет 2,5 минуты .

5. В тестовом задании не должно отображаться субъективное мнение или понимание отдельного автора.

6. Длительность тестового испытания не должно превышать 1 академического часа.

7. Количество тестовых заданий в одном варианте не должно превышать 18-20 тестовых и практических заданий.

2.3. Формы тестовых заданий

Тест представляет собой систему заданий, которые принято называть тестовыми заданиями . Тестовое задание направлено на проверку определенного элемента содержания и должно отвечать ряду требований.

Структура тестового задания следующая:

стандартная инструкция по выполнению задания;

эталонный ответ и правила для оценки его выполнения. Некоторые ученые используют понятие предтестовое задание, под-

черкивая, таким образом, разницу между заданием разработанным, но еще не апробированным, и заданием, прошедшим апробацию на репрезентативной выборке и подтвердившим свои запланированные качественные и количественные характеристики по результатам тестирования и статистической обработки. Поэтому тестовое задание в данном случае будет определяться следующим образом.

Предтестовое задание называется тестовым, если апостериорные количественные оценки его характеристик удовлетворяют определенным критериям, нацеленным на проверку качества содержания, формы и выполнения системообразующих свойств заданий теста.

Все разнообразие тестовых заданий, используемых в тестовом контроле (практике педагогических измерений), можно свести к четырем типам и их модификациям. В отечественной и зарубежной тестологии принято выделять следующие виды тестовых заданий (рис. 2):

1) задания закрытой формы (с множественным выбором; задания с выбором одного правильного ответа);

2) задания на установление соответствия ;

3) задания на установление правильной последовательности ;

4) задания на дополнение (открытые задания) ;

5) задания свободного изложения .

Кроме указанных выше основных свойств тестов имеются правила разработки тестовых заданий и тестов (нарушение некоторых из которых часто наблюдается в тестировании, но, тем не менее, – нежелательно).

Тестовое задание должно быть сформулировано ясно и четко, всегда ориентировано на получение однозначного заключения.

Нужно стараться формулировать задание в виде одного предложения, а оно должно быть легко воспринимаемым каждым испытуемым.

Задание теста должно проверять конкретное знание , умение или конкретные навыки испытуемых.

Тестовые задания должны быть информативными на всем диапазоне изменения уровня сложности.

Необходимо использовать простую, грамматически правильную утвердительную форму задания в виде одного предложения из 5–20 слов, без оборотов, используя простые придаточные предложения, без переноса фрагмента тестового задания на новую страницу.

Не использовать в заданиях "нестрогие" слова типа "иногда", "часто", "всегда", "все", "никогда", "большой", "небольшой", "малый", "много", "меньше", "больше" и грамматические обороты типа "Почему не может не…", "Правда ли, что …", "Возможно ли…" и др.

Ответы должны содержать не более 2–3 ключевых слов по условию вопроса.

Желательно строить ответы одинаковой формы, а если возможно, то и длины.

Количественные ответы необходимо упорядочивать, причем первым не должен быть указан правильный ответ .

Необходимо исключить возможность выбора ответа интуитивно, догадкой.

Ответы должны быть независимы и одинаково привлекательны для выбора.

В тестовых заданиях нельзя использовать сокращения, если задание не раcсчитано на их знание .

В каждом задании закрытой формы количество дистракторов (вариантов ответов) должно быть от 4 до 6, а в заданиях на установление соответствия – примерно в 2 раза больше.

Условие задания не должно никогда (ни для одного дистрактора) принимать неопределенное значение .

Все дистракторы должны быть подобраны умело.

Ни один дистрактор не становится правильным ответом при изменении допустимых условий задания.

Повторяющиеся слова и словосочетания в ответах должны быть исключены и перенесены в основную часть условия.

Из ответа к одному тестовому заданию нельзя получать каким-либо образом ответ к другому заданию.

Не должен возникнуть вопрос по уточнению условия, дистрактора (или, точнее, подготовленному испытуемому нет необходимости задавать вопрос по условию задания преподавателю, а преподаватель может не отвечать на такие вопросы).

Задание не должно предполагать знаний, выходящих за пределы учебного материала, программы, образовательного стандарта (особняком стоит очень редко используемое олимпиадное тестирование).

Ни один тестируемый не должен получать преимущество перед другим на всем промежутке тестирования.

Количество тестовых заданий в тесте ( длина теста) должно составить 30–40 для естественнонаучных дисциплин и примерно в два раза больше – для гуманитарных дисциплин. Впрочем, эта величина зависит от того, какова цель тестирования. Тест, состоящий из меньшего количества заданий можно вполне использовать как обучающий, мотивационный. Автор часто использует экспресс-тестирование на таких тестах при защите лабораторных работ .

Спецификация (описание атрибутов теста – предмет, время разработки, автор и др.) к тесту должна содержать всю информацию, необходимую для проведения тестирования.

Нельзя предусматривать в тестовых заданиях необходимость проведения развернутых выкладок.

Тест должен быть разработан преподавателем-методистом. Желательно, чтобы тест составила экспертная группа тестологов-предметников, которая и проводит предварительную оценку теста.

Количество заданий в базе данных тестовых заданий должно быть примерно в 10 раз больше усредненной длины теста (т.е. от 200-300 заданий).

Большинство заданий в тесте – закрытой формы. Закрытая форма более быстро воспринимаема и близка ежедневно решаемой человеком проблеме выбора.

Необходимо избегать ненужного дублирования проверяемых знаний, умений и навыков, а также предусмотреть все необходимые.

При формировании тестов полезно проводить предварительное тестирование с целью определения уровня знаний.

правильность;

репрезентативность;

соответствие современному состоянию науки и методики;

сбалансированность содержания теста;

тематическая направленность;

вариативность содержания;

доступность;

соответствие уровня трудности содержанию цели тестирования.

Выбирая кандидата на должность, работодатель рискует получить, что называется, кота в мешке. Поэтому на этапе переговоров он проверяет уровень профессионализма соискателя всеми возможными способами. Но всегда ли это оправданно? Что делать, если предлагают выполнить тестовое задание или поработать некоторое время для пробы?

Часто опытные специалисты считают, что тестовое задание - это не для них. А те, у кого мало опыта, наоборот, берутся за такую объемную работу, что признать такое задание «тестовым» сложно. Непонимание возникает по разным причинам, в том числе из-за ошибок работодателей: тестовое задание иногда не соответствует тем целям, которым должно служить.

Какие цели могут быть?

Проверить ваши реальные знания и навыки. Тестовое задание - это то, что вы делаете не в команде и не под руководством начальника, поэтому ему иногда доверяют больше, чем портфолио.
Познакомить вас с работой. Дать возможность понять и вам, и работодателю, справитесь ли вы, правильно ли вы себе представляли такую работу, интересно ли вам. Задание могут попросить выполнить прямо в офисе.
Проверить ваш ход мыслей, как именно вы видите актуальную проблему или аналогичную задачу. Часто применяется для руководящих и творческих вакансий.

Любое тестовое задание - это еще и проверка мотивации. Но мотивация во время выполнения задания не должна исчезнуть. Если вы еще не видели работодателя и не знаете ничего о компании, а вас уже просят решить несколько объемных задач, это должно насторожить. Тестовые задания зачастую небольшие по объему и не слишком трудозатратные, если это не компания-«звезда», в которой очень высокий конкурс на каждую вакансию.

Если вас уговаривают выполнить сложную работу, которая отнимет немало времени, узнайте у работодателя как можно больше подробностей: в каком виде от вас требуют результат, нужно ли при выполнении задания учитывать особенности компании, можно ли задавать уточняющие вопросы и кто будет оценивать результат. Если задание объемное, вы можете потребовать от работодателя подробный разбор своей работы - и часто это большой плюс.

Тестовая работа помогает не только работодателю, но и соискателю решить, готов ли он каждый день выполнять подобные задания. Будьте осторожны, если:

на выполнение тестового задания у вас уходит больше одного дня;
вы мало знаете о компании-работодателе;
здравый смысл подсказывает, что задание не похоже на тестовое, и это часть работы, на которой компания хочет сэкономить.

А вы с какими тестовыми заданиями сталкивались? Как определяли, когда это - действительно тест, а когда - напрасный труд?

Возможно, будет полезно почитать: