- •Минобрнауки россии
- •Минобрнауки россии
- •033100 Физическая культура
- •033000 Безопасность жизнедеятельности
- •1. Цели и задачи дисциплины «современные средства оценивания результатов обучения»
- •2. Требования к уровню освоения содержания дисциплины «современные средства оценивания результатов обучения»
- •3. Объем дисциплины «современные средства оценивания результатов обучения» и виды учебной работы Направление 033100 Физическая культура
- •033000 Безопасность жизнедеятельности и физическая культура
- •4. Содержание дисциплины «современные средства оценивания результатов обучения»
- •4.1. Разделы дисциплины и виды занятий
- •4.2. Содержание разделов дисциплины «современные средства оценивания результатов обучения»
- •1. Понятие о качестве образования. Оценка как элемент управления качеством. Традиционные и новые средства оценки результатов обучения. Педагогический контроль. Виды и формы контроля
- •2. История развития системы тестирования в России и за рубежом
- •3. Психолого-педагогические аспекты тестирования
- •4. Педагогические тесты. Термины и определения
- •5. Педагогические тесты. Виды тестов и формы тестовых заданий
- •6. Контрольно-измерительные материалы (киМы) и интерпретация результатов тестирования
- •7. Егэ и качество образования. Организационно-технологическое обеспечение егэ
- •8. Содержание и структура тестовых заданий по конкретному предмету
- •10. Портфолио как средство оценивания результатов обучения
- •Семинарское №3 Психолого-педагогические аспекты тестирования
- •Семинарское занятие №4 Педагогические тесты. Термины и определения
- •Семинарские занятия №5 Виды тестов и формы тестовых заданий
- •4.4. Лабораторный практикум по дисциплине «современные средства оценивания результатов обучения»- предусмотрен.
- •Лабораторное занятие №1
- •Контрольно-измерительные материалы (киМы)
- •И интерпретация результатов тестирования
- •Лабораторное занятие №2 егэ и качество образования. Организационно-технологическое обеспечение егэ
- •Лабораторное занятие №3 Модульно-рейтинговая технология
- •Лабораторное занятие №4 Портфолио как средство оценивания результатов обучения
- •5. Учебно-методическое обеспечение дисциплины «современные средства оценивания результатов обучения»
- •5.1. Рекомендуемая литература
- •5.1.1. Основная литература:
- •5.1.2. Дополнительная литература:
- •Прутченков а.С., Новикова т.Г. Портфолио ученика профильной школы // Интернет-журнал «Эйдос» [Электронный ресурс] // http://www.Eidos.Ru/ journal/2005/0910-21.Htm.
- •7.2. Примерный перечень вопросов к зачету по дисциплине «современные средства оценивания результатов обучения»
- •7.3. Примерная тематика рефератов по дисциплине «современные средства оценивания результатов обучения»
- •8. Методические рекомендации по организации изучения дисциплины «современные средства оценивания результатов обучения»
- •Учебная практика по дисциплине «современные средства оценивания результатов обучения» не предусмотрена.
- •033100 Физическая культура
- •033000 Безопасность жизнедеятельности и физическая культура
- •Методические материалы для преподавателей и студентов, обеспечивающие преподавание и изучение дисциплины «современные средства оценивания результатов обучения»
- •Лекция 1. Качество образования: понятие и сущность .
- •Методологические подходы и ведущие задачи управления качеством образования
- •Виды, формы и организация контроля качества обучения
- •Лекция 2. Традиционные и новые средства оценивания результатов обучения
- •Рейтинговая система оценивания
- •Психолого-педагогические аспекты тестирования .
- •Лекция 3. Педагогические тесты. Термины и определения. Классификация тестов
- •Структура теста.
- •Типы, формы и виды тестовых заданий
- •Требования к заданиям с выбором ответов.
- •1) «Критика чистого разума» а) работа об этике
- •2) «Критика практического разума» б) работа об эстетике
- •3) «Критика способности суждений» в) посвящена теории потрясения
- •Основные этапы разработки педагогического теста
- •Классификация целей обучения
- •Планирование содержания теста. Анализ содержания учебной дисциплины и отбор содержания для теста
- •Определение структуры теста. Разработка спецификации теста.
- •Составление тестовых заданий
- •Компьютерное тестирование. Интерпретация результатов тестирования
- •Лекция №4 егэ, его содержание и организационно-технологическое обеспечение
- •Лекция №5
- •История развития системы тестирования за рубежом и в России
- •Тестология в России.
- •Семинарское №3 - №4 Психолого-педагогические аспекты тестирования. Педагогические тесты. Термины и определения
- •Семинарские занятия №5 Виды тестов и формы тестовых заданий
- •Выполнение лабораторных работ по дисциплине «современные средства оценивания результатов обучения» - предусмотрено.
- •Лабораторное занятие №4 Портфолио как средство оценивания результатов обучения
- •2.2.3. Методические указания и рекомендации к проведению самостоятельной работы студентов по дисциплине «современные средства оценивания результатов обучения»
- •2.2.4. Методические указания и рекомендации к проведению научно-исследовательской работы студентов по дисциплине «современные средства оценивания результатов обучения»
- •033100 Физическая культура
- •033000 Безопасность жизнедеятельности и физическая культура
- •Преподаватель Мунирова л.Р.
- •2.3.2. Календарно-тематическое планирование семинаров по дисциплине «современные средства оценивания результатов обучения» Преподаватель Мунирова л.Р.
- •Календарно-тематическое планирование лабораторных работ по дисциплине «современные средства оценивания результатов обучения»
- •2.3.3. План-график срс дисциплины «современные средства оценивания результатов обучения»
- •Модуль III
- •Материалы, устанавливающие содержание и порядок проведения итогового и промежуточного контроля по дисциплине «современные средства оценивания результатов обучения»
- •Содержание модуля III
- •Материалы, устанавливающие содержание и порядок проведения итогового и промежуточного контроля по дисциплине «современные средства оценивания результатов обучения»
- •3.1. Требования к экзамену и/или зачету
- •Критерии оценки знаний студентов
- •033100 Физическая культура
- •Вариант 1
- •Вариант 2
- •Вариант 3
- •Часть 1.
- •Часть 2.
- •Инструкции по оценке За каждый правильный ответ по первой части испытуемый получает 1 балл.
- •Эталоны ответов Вариант 1
- •Часть 1.
- •Часть 2.
- •Вариант 2
- •Часть 1.
- •Часть 2.
- •Вариант 3
- •Часть 1.
- •Часть 2.
- •033100 Физическая культура
- •033100 Физическая культура
- •033000 Безопасность жизнедеятельности и физическая культура
- •Содержание учебно-методического комплекса по дисциплине «современные средства оценивания результатов обучения»
Планирование содержания теста. Анализ содержания учебной дисциплины и отбор содержания для теста
После того, как определены цели тестирования, выбран вид теста и уточнены подходы создания теста разработчики приступают к следующему этапу - отбору содержания теста.
Так как основная функция теста - это контроль за уровнем учебных достижений по определенным областям знаний, предметам и дисциплинам, то тест как измерительный инструмент должен быть адекватен по отношению к проверяемому материалу. Содержание теста должно оптимально соответствовать содержанию учебной дисциплины. Чтобы достичь этого соответствия, необходимо проанализировать содержание проверяемого предмета, раздела, темы и т.д., выделить самые важные элементы, которые требуют проверки, определить, какие знания и умения в этой области содержания будут проверяться с помощью тестовых заданий.
Определение структуры теста. Разработка спецификации теста.
Опираясь на анализ содержания дисциплины, далее разрабатывается план теста. Разработчик должен определить, из скольких частей (субтестов) будет состоять тест, планируемое количество заданий, какие формы тестовых заданий будут использоваться. Планирование теста предполагает определение соотношения элементов содержания и необходимого количества заданий для их проверки, которое определяется значимостью и количеством времени, отведенном на изучение.
Пример
№ |
Раздел, тема |
Число заданий |
Доля (%) |
Номера заданий |
|
|
|
|
|
Более эффективный способ планирования теста - когда учитываются не только элементы содержания, но и виды деятельности, которые подвергаются проверке. При этом виды деятельности в зависимости от уровня усвоения учебного материала подразделяются на репродуктивный (знание определений, формул, фактов и использование знаний по образцу) и продуктивный (применение знаний в незнакомой ситуации).
Каждый тест должен сопровождаться спецификацией, т.е. его описанием, где указываются цели тестирования, для кого этот тест предназначен, содержание проверки, процентное соотношение заданий по различным разделам и видам деятельности, используемые формы заданий, рекомендуемое время выполнения. Спецификация теста разрабатывается с учетом нормативных документов и образовательных стандартов, которые используются при планировании содержания теста.
Развернутая спецификация теста, составленная под руководством Г.С.Ковалевой (применялась в 1998 – 1999 годах для создания аттестационных центров Российского центра тестирования выпускников общеобразовательных учреждений).
Составление тестовых заданий
В зависимости от целей тестирования и содержания проверяемой дисциплины выбираются оптимальные формы тестовых заданий. Разработчик может использовать в тесте задания только одной формы, например, закрытые задания, а также сочетать в тесте несколько различных форм (например, КИМы ЕГЭ, ЦТ). Выбор форм во многом зависит от технологии проверки, сбора и обработки результатов, материального обеспечения.
Составление задания начинается с формулировки основной его части. Отечественные тестологи не пришли к единому мнению, в какой форме - в форме вопроса или утверждения - это лучше делать. В.С.Аванесов считает, что именно утверждение позволяет четко и логично сформулировать проблему перед испытуемым. «Семантическое преимущество заданий заключается в лучшем понимании их смысла и значения. Это связано, во-первых, со словесным составом задания в тестовой форме: смысл тестового утверждения улавливается всегда лучше, чем смысл вопроса. В тестовых утверждениях нет ни одного лишнего слова и даже знака, в то время как вопрос требует ряда дополнительных слов и знаков для выражения требуемого смысла, значения интонации». Но зарубежный опыт использования тестов показывает, что и вопрос в задании используется часто. Так по рекомендациям Голландского института CITO при составлении тестовых заданий лучше применять прямые вопросы. Мы считаем, что формулировка может даваться как в виде утверждения, так и в виде вопроса и присоединяемся к мнению А.Н.Майорова: «Хорошо сформулированное задание в вопросительной форме ничем не уступает хорошо сформулированному вопросу в форме утверждения. ...необходимо выбирать ту форму, которая будет максимально понятна для испытуемых ...» [4].
При составлении тестовых заданий необходимо соблюдать ряд правил и требований, о которых мы говорили выше, когда анализировали различные формы заданий.
Рекомендуется начинать составление задания с формулировки правильного ответа, это помогает избежать возникновения нескольких правильных ответов на задание. В заданиях закрытого типа при подборе дистракторов надо помнить о том, что все дистракторы должны быть равно привлекательны. Подбор дистракторов - достаточно сложная задача. Иногда для их создания можно использовать неправильные ответы самих учащихся. На предварительном тестировании испытуемым даются задания в открытой форме на дополнение. Систематические ошибки учащихся при выполнении задания и будут правдоподобными дистракторами.
Составителями тестовых задания могут быть как отдельные авторы, так и коллектив разработчиков. Тестовые задания для КИМов ЕГЭ составлялись на конкурсной основе ведущими специалистами в определенной области, методистами, учителями-предметниками.
При создании тестовых заданий необходимо учитывать, что в процессе экспертной оценки и апробации теста часть заданий придется убрать как несоответствующие определенным характеристикам. Поэтому для предварительного тестирования готовят заданий в 2, а то и в 3 раза больше, чем потом войдет в конечный вариант теста.
Принципы отбора содержания тестовых заданий
Значимость — принцип, указывающий на необходимость включения в тест только тех элементов знания, которые можно отнести к наиболее важным, ключевым, без которых знания становятся неполными, с многочисленными пробелами.
Научная достоверность — принцип, требующий включения объективно истинного содержания учебной дисциплины, поддающегося рациональной аргументации. Все спорные точки зрения, вполне нормальные в науке, не рекомендуется включать в тестовые задания.
Соответствие содержания теста уровню современного состояния науки, вытекающее из необходимости готовить специалистов на современном научном материале.
Репрезентативность предполагает включать в тест не только значимые элементы содержания, но и обращать внимание на полноту и их достаточность для контроля. Репрезентативность не означает обязательного включения в тест всех значимых элементов содержания, так как многие элементы в структуре знаний иерархически соподчинены.
Возрастающая трудность. Этот принцип означает, что каждый элемент содержания образования в процессе обучения и контроля обладает некоторой усредненной для студентов мерой трудности, на которую и ориентируются преподаватели. Как правило, трудному содержанию соответствуют и трудные задания.
Вариативность содержания. По мере изменения содержания учебной дисциплины должно варьироваться и содержание теста. (Содержание теста не может оставаться неизменным и независимым от развития науки, от нового содержания учебной дисциплины и от новых учебников).
Системность содержания означает подбор такого содержания тестовых заданий, который отвечал бы требованиям системности знаний. Кроме того, в тесте желательно иметь задания, связанные между собой общей структурой знаний.
8. Комплексность и сбалансированность содержания теста. Тест, разработанный для итогового контроля знаний, не может состоять из материала только одной темы, даже если эта тема является самой ключевой в учебной дисциплине. Необходимо искать задания, комплексно отображающие основные (если не все) темы учебного курса.
9. Взаимосвязь содержания и формы. Настоящий педагогический тест можно охарактеризовать как результат взаимодействия содержания задания с наиболее подходящей формой.
Экспертный анализ содержания и формы тестовых заданий.
После того как разработчики представили множество тестовых заданий проходит процедура экспертного анализа содержания и формы экспертных заданий. Для экспертизы привлекаются независимые специалисты, компетентные в данной области, которые не имели отношения к разработке теста. По результатам экспертной оценки разработчиками проводится корректировка тестовых заданий и доработка теста в целом.
Статистическая обработка полученных данных тестирования (результатов испытуемых) позволяет определить количественные характеристики тестовых заданий и всего теста, что позволяет использовать тест как научно обоснованный, объективный инструмент педагогических измерений. Статистическая обработка результатов тестирования проводится с помощью программного обеспечения.
Для удобства обработки тестовых данных результаты заносятся в специальную таблицу - матрицу тестовых результатов. Ниже мы приводим пример такой матрицы при дихотомической системе оценивания: один балл за правильный ответ, нуль баллов - за неправильный ответ или пропуск задания.
Пусть x - результат выполнения i-тым испытуемым j-того задания, тогда x=1, если ответ на задание правильный и x=0, если ответ неправильный.
№ испытуемого i |
№ задания j |
Индивидуальный балл Xi |
|||||||||
1 |
2 |
3 |
4 |
5 |
6 |
7 |
8 |
9 |
10 |
||
1 |
1 |
1 |
1 |
1 |
1 |
1 |
0 |
0 |
0 |
0 |
6 |
2 |
1 |
1 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
2 |
3 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
1 |
0 |
0 |
1 |
4 |
1 |
1 |
0 |
1 |
1 |
1 |
1 |
1 |
1 |
1 |
9 |
5 |
1 |
0 |
1 |
0 |
1 |
1 |
0 |
0 |
0 |
0 |
4 |
6 |
1 |
1 |
1 |
0 |
0 |
0 |
0 |
1 |
0 |
0 |
4 |
7 |
1 |
1 |
1 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
5 |
8 |
1 |
1 |
1 |
1 |
0 |
0 |
0 |
0 |
0 |
0 |
4 |
9 |
1 |
1 |
1 |
1 |
1 |
1 |
1 |
1 |
1 |
0 |
9 |
10 |
1 |
1 |
1 |
1 |
1 |
0 |
1 |
0 |
0 |
0 |
6 |
Число правильных ответов Yj |
9 |
8 |
7 |
6 |
5 |
5 |
3 |
4 |
2 |
1 |
50 |
В таблице в каждой строке даны результаты конкретного испытуемого, которые называются профилем ответов. В столбце занесены результаты испытуемых на каждое конкретное задание (профиль задания). В последнем столбце представлены индивидуальные баллы каждого испытуемого (индивидуальный балл - это сумма 1, которые получены за правильный ответ). В последней строке дано количество правильных ответов по каждому заданию теста.
Из матрицы удаляются строки и столбцы, содержащие только единицы или только нули. Если возникает ситуация, когда в строке ответов только единицы/нули, то это значит, что данный тест не пригоден для измерения учебных достижений данных испытуемых, потому, что он будет слишком легким (все 1) для сильного учащегося или слишком трудным (все 0) для слабого учащегося. Если же мы видим, что в столбце только единицы/ нули, то значит, данное задание является слишком легким (все 1) или слишком трудным (все 0), а соответственно не может использоваться для оценки уровня достижений испытуемых данной выборки.