32

Задание: Высшей судебной инстанцией по реформе 1864 года яв-

лялся

Эталонный ответ: Сенат

Задания на дополнение имеют ограниченную сферу применения. С помощью таких заданий проверяются умения воспроизводить и применять знания в знакомой ситуации, возможна проверка понимания изученного материала. Подобные задания хороши тем, что они сводят к минимуму возможность догадки. Действительно, намного сложнее дать свой ответ, чем выбрать правильный из уже предложенных.

Сложность составления таких заданий связана с тем, что основной текст задания должен порождать только один, планируемый ответ. Возникновение неоднозначных ответов усложняет проверку результатов выполнения заданий теста в компьютерном режиме. Испытуемый может в качестве ответа использовать синонимическое понятие на месте дополнения или переставить элементы дополнения – это надо учитывать при оценке результатов.

Требования к заданиям открытой формы (дополнение)

1.Каждое задание должно быть нацелено на одно дополнение, место дополнения обозначается прочерком.

2.Дополнения лучше ставить в конце задания.

3.Все прочерки для дополнения в одном тексте должны быть одной длины.

4.После прочерка, если это необходимо, указываются единицы измерения.

5.В тексте задания исключаются повторы и двойное отрицание.

Задания со свободными развернутыми ответами

Такая форма задания предполагает представление ответа в развернутом виде, то есть полного решения задачи с пояснениями или в виде небольшого сочинения. Испытуемый излагает ответ в свободной форме.

Задания со свободным развернутым ответом похожи на традиционные письменные контрольные задания. Они позволяют проверить и оценить различные уровни учебной деятельности испытуемых. Здесь проверяется не только знание фактического материала, но и умение выражать свои мысли, логичность, оригинальность выражения (гуманитарная сфера), проверяются способы решения учебных задач, процесс выполнения.

Проблема использования такой формы задания связана с объективностью оценивания, так как проверка этих заданий проходит не в компьютерном режиме, а с помощью экспертов (минимум 2). Чтобы снизить субъективный момент в процессе проверки заданий со свободно развернутыми ответами, разрабатываются четкие инструкции как для испытуемых, так и для проверяющих. Для испытуемого при формулировке задачи в инструкции должна оговариваться полнота ответа для получения максимального

33

балла, то есть должно быть четко указано, сколько аргументов, фактов или примеров он должен привести, нужно ли представить схему, график или чертеж, решение задачи, уравнения и т.д. краткое, полное, с пояснением и т.д. Также дается рекомендация по поводу длины ответа (количество предложений, знаков и др.). Для проверяющих дается эталонный ответ и составляется четкая инструкция, какое количество баллов дается за конкретные знания и умения.

Типичные ошибки

Пропущенное слово не должно находиться в начале предложения, так как для того, чтобы испытуемому стало ясно, что от него требуется, ему необходимо несколько раз прочитать предложение и осмыслить его.

Пример:

Задание: ___ осуществляют перенос аминокислот к месту синтеза

белка.

Вызывает неоправданное затруднение у испытуемых с любым уровнем подготовленности задание, которое содержит несколько пропусков для дополнений и в том случае, когда они идут подряд, и в том – когда они разделены в предложении.

Пример:

Задание: Спорангии со спорами у папоротников расположены на

___ ___ листа.

В случае пропуска трех или более слов задание, скорее всего, значительно потеряет в валидности. Возможно, что сильные ученики просто не сообразят, чего же от них хотел преподаватель, хотя в другой постановке они могли бы дать на него правильный ответ.

Пример:

Задание: Автором памятника К. Минину и ___ на Красной пло-

щади в ___ является ___.

Пример:

Задание: Тройственный союз был заключен в ___ ___.

Здесь ответ может быть неоднозначным: как год, так и место заключения договора.

Представленные правила разработки и требования к пяти основным видам тестовых заданий относятся к разработке бланочных и компьютерных тестовых заданий.

34

2.4. Спецификации банка тестовых заданий

После создания тестовых заданий учитель осуществляет разработку спецификации банка тестовых заданий. В спецификации теста, иными словами, его описании, указываются цели тестирования, для кого этот тест предназначен, содержание проверки, процентное соотношение заданий по различным разделам и видам деятельности, используемые формы заданий, рекомендуемое время выполнения. Спецификация теста разрабатывается с учетом нормативных документов и образовательных стандартов, которые используются при планировании содержания теста.

Пример обобщенной спецификации теста, которую заполняет учитель в процессе проектирования и разработки банка тестовых заданий, представлена в таблице 5 (пример заполнения см. в Приложении 3).

Таблица 5

Обобщенная спецификация тестовых заданий

,№ ДназваниеЕ	название,№ Темы		Виды тестовых заданий,			заданийВес единицахв( )	Рекомендуевремямое )мин(
			их нумерация в тесте		Открытые
		Закрытые	На соответ-	На последо-
			ствие	вательность
					6
1	2	3	4	5		7	8

3.ЭКСПЕРТНЫЙ АНАЛИЗ СОДЕРЖАНИЯ

ИФОРМЫ ТЕСТОВЫХ ЗАДАНИЙ

После того как учителя представили множество предтестовых заданий проходит процедура экспертного анализа содержания и формы тестовых и практических заданий. Для экспертизы привлекаются независимые специалисты, компетентные в данной области, которые не имели отношения к разработке банка тестовых заданий. Число специалистов варьируется в зависимости от целей и масштабности тестирования. В данном случае, для банков тестовых заданий, рассчитанных на массовое тестирование, привлекаются 3-5 экспертов, чтобы повысить эффективность процедуры экспертизы.

Прежде всего, эксперт анализирует каждое тестовое задание. Он определяет, соответствует ли содержание задания содержанию проверяемого материала, для этого он сравнивает содержание задания с заявленной спецификацией по предмету, перечнем требований или элементами содержания, которые подвергаются проверке. Эксперт оценивает уровень сложно-

35

сти (уровень базовости) задания, то есть содержание задания соотносится с уровнем подготовленности.

Эксперт также определяет степень значимости тестового задания, что необходимо для выявления необходимости включения какого-либо задания в банк тестовых заданий. В тест включаются только те тестовые задания, которые направлены на проверку важных, ключевых элементов содержания. Тестовые задания оцениваются и с точки зрения корректности формулировок основной части и ответов. Отмечаются неудачные задания, которые не соответствуют предъявляемым требованиям, например, задания, которые содержат двусмысленные формулировки, предполагают неоднозначный или частично правильный ответ, и т.д.

Свои оценки эксперт вносит в специальную таблицу (см. табл. 6), в которой фиксируются различные характеристики тестового задания (пример заполнения см. в Приложении 4).

		Таблица 6
	Экспертный анализ содержания и формы тестового задания
№ п/п	№ задания	1 2 3 ...

1.№ правильного ответа

2.№ требования (одного или нескольких)

3.Уровень базовости (Б/П/С)

4.Значимость содержания (0,1,2,3)

5.Ожидаемый процент выполнения испытуемыми с удовлетворительной подготовкой (традиционная оценка 2 и 3)

6.Ожидаемый процент выполнения испытуемыми выборки (традиционная оценка 4)

7.Ожидаемое время выполнения задания, мин.

8.Неудачные задания

9.Комментарии о качестве заданий

Подпись эксперта _______________________________________

Эксперт, осуществляющий анализ содержания и формы тестовых заданий, иными словами, проводящий содержательную валидность разработанных предтестовых заданий, в процессе заполнения специальной таблицы (см. табл. 6), должен использовать следующие комментарии к экспер-

тизе:

1.В пункте 1 указать правильный ответ на соответствующее тестовое задание по мнению эксперта.

2.В пункте 2 указать к соответствующему тестовому заданию требования к уровню обучающегося: знать, уметь, владеть, …

3.В пункте 3 указать уровень соответствующего тестового задания:

Б – базовый уровень (на оценку «удовлетворительно»);

36

П – позволят выставить оценку «хорошо» и «отлично»;

С – задание повышенной сложности.

4.В пункте 4 указать значимость содержания соответствующего тестового задания:

0 – эксперт считает включение данного задания неоправданным;

1 – содержание задания представляется эксперту незначимым;

2 - содержание задания представляется эксперту значимым;

3 – наиболее важный опорный элемент.

5.В пункте 7 при выставлении времени ориентироваться на обучающихся со средним уровнем подготовленности.

Общий комментарий к тесту включает в себя:

1)анализ полноты охвата требований к уровню подготовленности;

2)правильность пропорций содержания теста (добавить задание в раздел: «…»; снять задания №… из раздела: «…»).

37

СПИСОК РЕКОМЕНДУЕМОЙ ЛИТЕРАТУРЫ

1.Аванесов, В.С. Композиция тестовых заданий [Текст] / В.С. Аванесов. – М. : Центр Тестирования, 2002. – 240 с.

2.Аванесов, В.С. Форма тестовых заданий [Текст]: Учебное пособие для учителей школ, лицеев, преподавателей вузов и колледжей / В.С. Аванесов. – М. : Центр тестирования, 2005. – 156 с.

3.Адаптивное тестирование в образовании (теория, методология, технология) / Челышкова М. Б. - М.: ИЦПКПС, 2001. - 165 с.

4.Анастази, А. Психологическое тестирование [Текст] / А. Анастази, С. Урбина. – СПб. : Питер, 2005. – 688 с.

5.Васильев, В.И. Основы культуры адаптивного тестирования [Текст] / В.И. Васильев, Т.Н. Тягунова. – М. : Икар, 2003. – 584 с.

6.Володин, А.А. Методические основы оценивания результатов учебной деятельности обучающихся [Текст]: Монография / А.А. Володин, Р.М. Чудинский. – М. : АНО ВПО «МГИ», 2009. – 185 с.

7.Звонников, В.И. Современные средства оценивания результатов обучения : учеб. пособие для студ. высш. учеб. заведений [Текст] / В.И. Звонников, М.Б. Челышкова. – М. : Издательский центр «Академия», 2007. – 224 с.

8.Ковалева, Г.С. Третье международное исследование по оценке качества математического и естественнонаучного образования TIMSS [Текст] / Г.С. Ковалева. – М. : ИОСО РАО, 1996 – 65 с.

9.Майоров, А.Н. Теория и практика создания тестов для системы образования. (Как выбирать, создавать и использовать тесты для целей образования) [Текст] / А.Н. Майоров. – М. : «Интеллект-центр», 2001. – 296 с.

10.Мельникова, М.Б. Теория и практика конструирования педагогических тестов [Текст] / М.Б. Мельникова. – М. : Прометей, 2002. – 186 с.

11.Михайлычев, Е.А. Дидактическая тестология [Текст] / Е.А. Михайлычев. –М. : Народное образование, 2001. – 432 с.

12.Пидкасистый, П.И. Самостоятельная познавательная деятельность школьников в обучении : теоретико-экспериментальное исследование [Текст] / П.И. Пидкасистый. – М. : Педагогика, 1980. – 240 с.

13.Теория и практика конструирования педагогических тестов [Текст] / М.Б. Челышкова. – М. : ИЦПКС, 2000. – 409 с.

14.Челышкова, М.Б. Теория и практика конструирования педагогических тестов : Учебное пособие [Текст] / М.Б. Челышкова. – М. : Логос, 2002. –

432с.

15.Шкалирование результатов единого государственного экзамена : проблемы и перспективы [Текст] / Звонников В. И., Челышкова М. Б. // Единый государственный экзамен: сб. ст. – М. : Логос, 2004. – С.89-113.

38

ПРИЛОЖЕНИЯ

39

Приложение 1 Пример плана банка тестовых заданий по русскому языку

№	Дидактическая		Тема				Число	Доля	Номера
	единица (ДЕ)						заданий	(%)	заданий
5.	Синтаксис	5.1. Слово, словосо-					20	3	121-140
		четание и предло-
		жение.
		5.2.	Разновидности				30	5	141-170
		предложений по це-
		ли	высказывания			и
		эмоциональной			ок-
		раске.
		5.3. Главные и вто-					40	8	171-210
		ростепенные		члены
		предложения
		5.4.	Связь	слов		в	25	4	211-235
		предложении
		5.5.	Простое		рас-		25	4	236-260
		пространенное				и
		нераспространенное
		предложения
		5.6.	Однородные				25	4	261-285
		члены предложения

40

Приложение 2 Краткая спецификация итогового теста по русскому языку с учетом

видов учебной деятельности обучающихся

Содержание					Предполагаемая деятельность испытуемого
учебного предмета
					Репродуктивный		Продуктив-
единица					уровень		ный
							уровень
					Знание	Применение	Применение
					определений,	знаний в	знаний
Дидактическая		Тема
					понятий, зако-	знакомой	в незнако-
					нов, правил,	(типовой)	мой (нети-
					классифика-	ситуации	повой)
					ций, отноше-	по образцу	ситуации
					ний, фактоло-
					гического ма-
					териала и т.п.
5. Син-		165 заданий			33 задания	99 заданий	33 задания
таксис					(20%)	(60%)	(20%)
	5.1. Слово, словосо-				4 задания	12 заданий	4 заданий
	четание и предло-
	жение.
	5.2.	Разновидности			6 заданий	18 заданий	6 заданий
	предложений по це-
	ли	высказывания		и
	эмоциональной ок-
	раске.
	5.3. Главные и вто-				8 заданий	24 задания	8 заданий
	ростепенные		члены
	предложения
	5.4.	Связь слов		в	5 заданий	15 заданий	5 заданий
	предложении
	5.5.	Простое	рас-		5 заданий	15 заданий	5 заданий
	пространенное			и
	нераспространенное
	предложения
	5.6.	Однородные			5 заданий	15 заданий	5 заданий
	члены предложения
	Углубленная		часть		-	6 заданий	24 задания
	(30 заданий)					(20%)	(80%)

41

Приложение 3 Образец правильного оформления банка тестового задания

Форма представления материалов

Разработанные учителями полные версии материалов банков тестовых заданий представляются на электронном носителе.

Для обеспечения пригодности материалов БТЗ, предоставляемых на электронном носителе, к конвертации в формат программного средства, к их форме предъявляются следующие требования:

банк тестовых заданий – предоставляется в полностью редактируемом виде в формате Microsoft Word 2003 с расширением *.doc.

материалы могут содержать вставки рисунков, диаграмм, схем, таблиц. Рисунки могут быть выполнены в форматах *.bmp, *.jpg. Все графические файлы должны быть внедрены в *.doc-файл. Для вставки графических элементов в текст рекомендуется строить страницы с применением таблиц с прозрачными границами, во избежание сдвигов текста и рисунков при сохранении материалов в формате Web-страниц. Формулы выполняются в редакторе Microsoft Equation или внедряются в виде рисунков с учетом вышеизложенных требований. В случае использования в тексте отсканированных рисунков, сканирование должно быть выполнено с разрешением не ниже 300 dpi в режиме «оттенки серого». Рисунок должен быть отсканирован ровно, с достаточной яркостью и контрастностью.

Образец оформления банка тестовых заданий

СОДЕРЖАНИЕ И СТРУКТУРА ТЕСТОВЫХ МАТЕРИАЛОВ Тематическая структура

1.Фонетика. Графика

1.1.Звуки и буквы: гласные, согласные.

1.2.Согласные: звонкие и глухие, мягкие и твердые, парные и непар-

ные.

1.3.Гласные: ударные и безударные.

1.4.Деление слов на слоги.

…

2.Лексика

2.1.Слово и его значение.

2.2.Слова однозначные и многозначные.

2.3.Синонимы и антонимы.

2.4.Прямое и переносное значение слова.

…

42

Содержание тестовых материалов

1. Фонетика. Графика

…..

1.2. Согласные: звонкие и глухие, мягкие и твердые, парные и непарные.

1. Задание Только звонкие согласные звуки представлены в ряду:

[б], [з]

[в], [ш] [ж], [к] [т], [ф]

2. Задание Только глухие согласные звуки представлены в ряду:

[т], [ф]

[б], [з] [ж], [к] [б], [п]

3. Задание Только звонкие согласные звуки представлены в ряду:

[б], [з] [в], [д]

[ж], [к] [т], [ф]

4. Задание Только глухие согласные звуки представлены в ряду:

[т], [ф] [к], [с]

[ж], [к] [б], [з]

5. Задание Соответствие между словом и пропущенным согласным звуком

спра...ка	в
улы...ка	б
поча...ки	т
колба...ки	с

6. Задание

Пропущенная буква в слове: тру_ка.

				Спецификация теста				Приложение 4
№,	№,		Виды тестовых заданий, их нумерация в тесте				Вес зада-	Рекомендуе-
название	название		Закрытые	На соответ-	На после-	Открытые	ний	мое время
ДЕ	Темы			ствие	дователь-		(в едини-	(мин)
					ность		цах)
1		2	3	4	5	6	7	8
5.	5.1.	Слово,				121	1	2,5
Синтаксис	словосоче-					122	1	2,5
	тание	и				123	1	2,5
	предложе-					124	1	2,5
	ние.		126			125	1	2,5
							1	2,5
			127				1	2,5
			128				1	2,5
			129				1	2,5
			130				1	2,5
			131				1	2,5
			132				1	2,5
			133				1	2,5
			134				1	2,5
			135	136			1	2,5
							1	2,5
				137			1	2,5
				138			1	2,5
				139	140		1	2,5
							1	2,5