Современные средства оценивания результатов обучения. Тесты как актуальное средство контроля знаний, умений и навыков

В инструкциях CITO про этот вид заданий говорится следующее: «Если задание включает в себя навыки ручного труда или поведенческого характера, то бумага и карандаш являются неподходящими инструментами для данного теста. Завершение письменного диалога  или описание действий при проведении специального эксперимента явно отличается от реплик по телефону или проведения эксперимента. Данные тесты – это прямой путь, чтобы оценить задания.

Первым недостатком таких тестов является невозможность наблюдать и оценивать более одного тестируемого в одно и то же время. Также как невозможно общаться с экзаменуемым и одновременно оценивать его. Следовательно, выполнение этого типа тестов требует много времени при высокой интенсивности труда. Второй недостаток – это то, что подготовка инструкций для оценивания таких тестов занимает много времени. Однако без этих инструкций, экзамены не будут иметь взаимосвязи друг с другом, и может возникнуть проблема  последовательности внутри самого экзамена.

Как бы то ни было, но практические задания (практические задания - важное звено целостного процесса усвоения знаний, умений и навыков) представляют собой трудоемкий, но весьма эффективный способ аттестации учащихся.

Не смотря на трудность проведения практических тестов, их можно применить в специально оборудованном кабинете, где все необходимое под рукой. Поэтому практические тесты – очень важны в использовании выявления знаний, для педагогов важно убедиться в том, что учащийся в действительности  освоил учебный материал и сможет в дальнейшем применить знания в более глубоком использовании. И практическое тестирование было включено в разработку средств оценивания. Для того, чтобы составить хоть одно тестовое задание, необходимо обследовать правила составления тестовых заданий. 

Правила составления тестовых заданий

Составление и проведение теста требует соблюдения определенных строгих условий, являющихся специфическими для тестов и отличающими включаемые в них задания от других видов заданий. Требования к тестированию,  в данном общем виде,  можно сформулировать следующим образом: наличие четкой инструкции по выполнению теста и характеристика надежности его результатов; установление строгих временных форм при выполнении испытаний; необходимость предварительного предупреждения учащихся о временя проведения теста; специальная подготовка по технике выполнения задания; возможность количественной обработки ответов; соотнесение результатов теста о выработавшим нормам. Прежде чем перейти к поиску правил составления тестов, необходимо дать определение педагогическому тесту, а так же самому тесту:

Традиционный тест представляет собой стандартизованный метод диагностики уровня и структуры подготовленности, В таком тесте все испытуемые отвечают на одни и те же задания, в одинаковое время, в одинаковых условиях и с одинаковыми правилами оценивания ответов. Главная цель применения традиционных тестов - установить отношение порядка, устанавливаемых между испытуемыми по уровню проявляемых при тестировании знаний. И на этой основе определить место (или рейтинг) каждого на заданном множестве тестируемых испытуемых. Для достижения этой цели можно создать бесчисленное количество тестов, и все они могут соответствовать достижению данной цели.

 Педагогический тест  – это инструмент, состоящий из  квалиметрически (с использованием  различных методов определения  качества) выверенной системы тестовых  заданий, стандартизированной системы тестовых заданий, стандартизованной процедуры проведения и заранее спроектированной процедуры проведения и заранее спроектированной технологии обработки и анализа результатов, предназначенный для измерения качеств и свойств личности, измерение которых возможно в процессе систематического обучения.

Тестовые задания должны быть составлены с учетом определенных правил. Рассмотрим эти правила:

- начинать формулировать  вопрос нужно с правильного  ответа;

- содержание задания должно  отвечать программным требованиям  и отражать содержание обучения (случаи, когда в тестирование пытаются включить задания или варианты ответа, не имеющих правильного решения);

- вопрос должен содержать  одну законченную мысль (тестовое  задание должно проверять один  элемент знания);

- при составлении вопросов  следует особенно внимательно использовать слова «иногда», «часто», «всегда», «все», «никогда» (они содержат неопределенность и могут привести к ошибочным ответам, с другой стороны они дают возможность догадаться о правильном ответе);

- вопрос должен быть  четко сформулирован, избегая слова большой, небольшой, малый, много, мало, меньше, больше и т.д.

-  избегайте вводных  фраз или предложений, имеющих  мало связи с основной мыслью, не следует прибегать к пространным  утверждениям, т.к. они приводят к  правильному ответу, даже если  учащийся его не знает.

- неправильные ответы  должны быть разумны, умело подобраны, не должно быть явных неточностей, подсказок;

- не следует задавать  вопросы с подвохом (когда все  ответы «да-да-да-да» или «нет-нет-нет-нет»);

- все варианты ответов  должны быть грамматически  согласованны  с основной частью задания; в любом случае следует использовать короткие, простые предложения, без зависимых и независимых оборотов;

- как можно реже использовать  отрицание в основной части; с  одной стороны, использование отрицания приводит к противоречиям при чтении задания, с другой, отрицательные знания не так видны, как позитивные. Избегать двойных отрицаний, таких как: «Почему нельзя не делать…?», «Почему будет неправильно не отвечать на этот вопрос?» и т.д. Подчеркните отрицание в самом вопросе, чтобы иметь полную уверенность в том, что оно будет заметно;

- ответ на поставленный  вопрос не должен зависит от  предыдущих ответов (если предыдущее  задание содержит подсказку для  следующего);

- правильные и неправленые  ответы должны быть однозначны по содержанию, структуре и общему количеству слов; применять правдоподобные ошибочные варианты;

- если ставиться вопрос  количественного характера, то ответы  к нему должны располагаться  упорядоченно от меньшего к  большему или наоборот; в том случае если, деструкторы представлены в виде слов, текста, располагайте их в алфавитном порядке;

- лучше не использовать  варианты ответов «ни один  из перечисленных» и «все перечисленные» (первый применяется тогда, когда  существует недвусмысленный правильный ответ, второй приводит к допустимости подбора вариантов ответов с низкой дискриминативностью т.к. разработчик знает, что все ответы правильные);

- убедится, что различия  между вариантами ответов точны (чем больше варианты ответов  похожи друг на друга, тем труднее распознать правильный ответ и тем лучше тестируется умение понимать, например, прочитанный текст);

- избегать повторение (когда  в некоторых случаях все варианты  ответа начинаются с тех же  самых слов, это отвлекает тестируемого  от правильного ответа);

- использовать ограничения  в самом вопросе (это необходимо  для того, чтобы снять неопределенность, которая находится в вопросе);

  - не упрощать вопросы («детский язык»);

- место правильного ответа  должно быть определено таким  образом, что бы оно не повторялось от вопроса к вопросу, не было закономерностей, а давалось в случайном порядке;

- лучше использовать длинный  вопрос и короткий ответ (в  противоположной ситуации на  прочтение ответов уходит больше  времени и больше сил тратиться  на анализ высказываний);

- проанализировать задания  с точки зрения возможности  неверного ответа наиболее подготовленных  учеников (изучая химию, мы сообщаем  учащимся, что какие-то вещества  друг с другом не реагируют, и только потом выясняется, что  при определенных условиях эти вещества все - таки реагируют друг с другом, в этом случае  можно попасть в ситуацию, когда правильный ответ с точки зрения учебного материала, может оказаться неправильным с научных позиций).

Рассмотрим требования к разрабатываемым заданиям:

1.Требования к заданиям  с выбором ответов:

- инструкция, основной текст  задания и варианты ответов  должны быть хорошо понятны  испытуемым;

- текст задания должен  быть однозначным, сформулированным  четко, по возможности кратко;

- в основной текст задания  включается максимальное количество информации, относящейся к проблеме. В вариантах ответов не используются повторяющиеся слова и выражения, они  помещаются в основной текст задания;

- основной текст задания  и ответы формулируются с соблюдением  орфографических, пунктуационных и грамматических правил;

- в  тексте задания  исключается двойное отрицание.

- среди вариантов ответа  должен существовать только один  правильный или наиболее правильный  ответ.

2. Требования к открытым  заданиям на дополнение:

- каждое задание должно быть нацелено на одно дополнение, место дополнения обозначается прочерком или многоточием;

- дополнения лучше ставить  в конце задания;

- все прочерки для дополнения  в одном тексте должны быть  одной длины.

- после прочерка, если  это необходимо, указываются единицы измерения;

- в тексте задания исключаются  повторы и двойное отрицание.

3. Требования к заданиям  на установление соответствий:

- элементы двух множеств  должны быть выбраны по одному  основанию для включения однородного  материала в каждое задание теста;

- рекомендуется помещать  в текст задания названия каждого  столбца (обобщающее определение  множества);

- желательно, чтобы правый  список содержал несколько дистракторов, которые должны быть равновероятно  правдоподобны;

- если задание не предполагает четкого соответствия, т.е. одному элементу левого списка соответствует только один элемент правого списка, то  в инструкции к заданию обязательно указывается информация о наличии дистракторов и о том, сколько раз могут использоваться элементы второго списка;

- в связи с особенностью  восприятия число элементов одного  списка не должно превышать 10;

- все задания необходимо  располагать на одной странице, не допуская переноса отдельных элементов.

Таким образом, выявлены правила, требования выполнения тестовых заданий, которые дают ясную картину правильного составления тестов, как способ лучшего и удобного способа проверки умений и знаний.  Остается рассмотреть, какие критерии оценок используются при тестировании.

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

Критерии оценки тестирования

В истории российского просвещения изначально как и в Европе существовала трёхразрядная система оценок. В списке студентов Киевской духовной академии (1737 г.) высший разряд обозначает очень хорошие успехи: «учения изрядного, надежного, доброго, честного, хорошего, похвального». Средний разряд обозначает успехи «учения посредственного, мерного, нехудого». Низший разряд характеризует успехи ниже среднего: «учения слабого, подлого, прехудого, безнадежного, ленивого».

Постепенно словесная оценка становилась однообразней и короче, она чаще заменялась цифровой, причем направление шкалы установилось противоположным германскому. В разное время в России применялись 3-, 5-, 8-, 10-, 12-балльные системы оценки знаний. Из них прижилась 5-балльная, которая и была в 1937 году официально установлена Министерством народного просвещения: «1» — слабые успехи; «2» — посредственные; «З» — достаточные; «4» — хорошие; «5» — отличные. В течение XX века оценка «1» постепенно вышла из употребления, в результате 5-балльная система трансформировалась в современную 4-балльную. Эта, традиционная для советского образования, система сейчас повсеместно применяется в России и многих странах постсоветского пространства.

При педагогических измерениях интерпретация баллов учащихся может иметь различный характер в зависимости от того, каким способом сравниваются оценки учеников. При  критериально–ориентированном подходе (в него включают все то, что условно можно принять за 100 %-ный объем, планируемый к усвоению) в педагогических измерениях  результаты учащихся интерпретируются по отношению к содержательной области или требованиям, установленным к учебным достижениям.

При дихотомическом (дихотомическое (альтернативное) тестовое задание - задание, выполнение которого оценивается только альтернативно : выполнено верно (обычно символизируется единицей) или выполнено неверно (обычно символизируется нулем) оценивании («1» или «0») результатов выполнения отдельных заданий балл каждого учащегося подсчитывается путем перевода в проценты доли правильно выполненных заданий по отношению к общему числу заданий теста.

В случае политомических (политомическое тестовое задание - задание, выполнение которого допускает несколько категорий ответа, каждая из которых оценивается по-разному (например, полностью верный ответ - 2 балла, частично верный ответ - 1 балл, неверный ответ - 0 баллов)  оценок в проценты переводится отношение сырого балла (первичный, наблюдаемый, индивидуальный – меняется в зависимости от теста и способа подсчета результата испытуемого) учащегося, накопленного по заданиям  к максимально возможному к баллу по тесту. Полученный для каждого учащегося процент  сравнивается со стандартами выполнения – критериями, установленными экспертным путем и прошедшими эмпирическую валидизацию в процессе конструирования теста.

При критериально–ориентированном подходе по результатам тестирования можно:

- выявить освоенные и  не освоенные знания, умения и  навыки и построить индивидуальную  образовательную траекторию каждого  учащегося;