История развития тестирования в России

ОГЛАВЛЕНИЕ

 

Введение ……………………………………………………………………….3

1. ИСТОРИЯ РАЗВИТИЯ ТЕСТОВ…………………………………….. 5
2. РАЗВИТИЕ ТЕСТОЛОГИИ В РОССИИ……………………………  10

Заключение ……………………………………………………………………15

Список литературы …………………………………………………………   16

Приложение………………………………………………………………..….17

 

 

 

 

 

 

 

 

 

 

 

 

 

ВВЕДЕНИЕ

Тестирование учебных  достижений является важной составной  частью учебного процесса. Управление учебным процессом, как известно, является одним из определяющих факторов повышения его эффективности.

Процесс обучения, согласно Н.Ф.Талызиной, как один из видов  управления требует циклического (замкнутого) управления, осуществляемого по принципу «белого ящика». Замкнутость системы  управления обусловлена наличием цепи обратной связи. Н.Ф.Талызина  рассматривает коррекцию процесса усвоения, за счет действия обратной связи как самостоятельный и важный этап управления.

Согласно В.П.Беспалько  вариативными характеристиками, определяющими  качество обучения, являются  уровень усвоения деятельности  и степень усвоения (автоматизации) деятельности.

Эти величины можно контролировать, то есть достижение высокого качества обучения является диагностичной целью. Наличие  диагностичных  целей позволяет организовать реально действующий процесс управления обучением.

Достижение высокого качества обучения возможно только   при наличии объективных методов  диагностики. К сожалению, традиционная форма оценивания  уровня знаний в форме опроса, экзамена, проводимого человеком, весьма субъективна.

По мнению К.Ингенкампа при  использовании пятибалльной шкалы  преподаватель выставляет оценки с разбросом плюс, минус 1 балл, то есть с точностью 20%. Из этого следует, что за одни и те же знания, испытуемый может быть оценен разными экзаменаторами  на «2», на «3» и на «4».  Более того, К.Ингенкамп  указывает, что один и тот же экзаменатор в разные моменты времени, например с интервалом в 1 месяц, также по разному оценивает один и тот же ответ.

Ясно, что столь неточный  «измерительный прибор», каковым является человек, существенно снижает эффективность диагностики учебного процесса. По этой причине, в качестве контрольно-измерительного мероприятия выбирается тестирование. Сам процесс тестирования учебных достижений разбивается на три процесса: 1) разработка теста;  2) процедура тестирования; 3) обработка и интерпретация результатов тестирования.

При обработке результатов  используется либо классическая теория тестирования, либо IRT (Item Response Theory), позволяющая  измерять уровень достижений испытуемого  в специальных единицах измерения – логитах. Итерационные процедуры оптимизации тестовых заданий позволяют создавать надежные и валидные тесты.  Особо следует отметить тот факт, что IRT позволяет получить числовые значения уровня достижений испытуемого в логитах на интервальной шкале. Наличие интервальной шкалы  позволяет использовать мощный аппарат математической статистики для интерпретации полученных результатов.

Важность тестов в учебном  процессе давно осознана за рубежом. Там теория и практика тестирования развиваются уже сотню лет. В  России (в Советском Союзе) интерес  к этому виду контроля знаний возродился в 60-х годах прошлого века в связи  с развитием программированного обучения. Несмотря на востребованность,  ситуация с обеспеченностью тестологической литературой пока еще далека от идеальной. Появление новых учебных пособий, монографий, справочников по тестированию можно только приветствовать.

 

 

 

 

 

 

 

ИСТОРИЯ РАЗВИТИЯ ТЕСТОВ

 

История тестов учебных достижений насчитывает, по мнению В.Кадневского, по крайней мере, несколько тысячелетий.  В.Аванесов  указывает на факты, свидетельствующие о еще более древнем применении тестов. 

Древние вавилоняне знали 400 клинописных знаков, использовали шестидесятеричную  систему счета, умели вычислять  проценты, измерять площадь и объем  различных геометрических фигур.  Среди изучаемых предметов были те, которые отвечают современному понятию «профессиональная пригодность». За 2200 лет до н.э. в Китае успешно действовала система проверки способностей и отбора персонала для различных государственных должностей. В частности проверялось умение писать, читать, знать порядок проведения придворных ритуалов и церемоний. В течение последующих 2000 лет в систему отбора чиновников были внесены экзамены по гражданскому праву, военному делу, финансам, сельскому хозяйству, географии. 

По мнению  А.Н.Майорова одним из первых ученых, попытавшихся измерить различия между людьми в области элементарных психических процессов, был англичанин Френсис Гальтон (Galton F.; 1882-1911). 

Гальтон ввел в теорию тестирования три фундаментальных принципа, используемых и по сей день:

1. Применение серии одинаковых  испытаний к большому количеству  испытуемых. 
2. Статистическая обработка результатов. 
3. Выделение эталонов оценки. 

 

Все современные тесты  построены на основе статистической теории измерений, а идея эталона  оценки лежит в основе определения  теста как стандартизованного инструмента.

Термин «умственные тесты» ввел Дж. Кеттел (Cattel J., 1860-1944). Дж.Кеттел считал тест средством для  проведения научного эксперимента с соответствующими требованиями к чистоте эксперимента. Такими требованиями он определял:

1. одинаковость условий  для всех испытуемых; 
2. ограничение времени тестирования приблизительно одним часом; 
3. в лаборатории, где проводится эксперимент, не должно быть зрителей; 
4. оборудование должно быть хорошим и располагать людей к тестированию; 
5. одинаковые инструкции и четкое понимание испытуемыми, что нужно делать;

6. результаты тестирования  подвергаются статистическому анализу,  находят минимальный, максимальный  и средний результат, рассчитывают  среднее арифметическое и среднее  отклонение. 

 

Эти идеи, выдвинутые Дж.Кеттелом, составляют основу для современной  тестологии. Одинаковость условий для  всех испытуемых, одинаковые инструкции и четкое их понимание испытуемыми  – фундаментальные принципы, положенные в основу стандартизации процедуры  проведения тестирования; ограничение  времени, в настоящее время, после  дополнительных исследований, устанавливается  в зависимости от возраста испытуемых и особенностей применяемого инструментария; идеи статистической обработки результатов  реализованы в достаточно сложных  методах статистического анализа  и моделирования.

Большой вклад в развитие тестов интеллекта внес французский  психолог Альфред Бине (Binet A., 1857-1911). Совместно с Теодором Симоном (Simon T., 1873-1961) он разработал тест, позволяющий  дифференцировать нормальных и умственно  отсталых детей.

В 1911-1912 годах американские психологи Л.Термен и Х.Чальдс дополнили  тест Бине - Симона четырьмя новыми:

1) «Образец обобщения», то  есть пояснения сущности или  морали басни. 
2) Постепенный дополнительный тест по методу Эббингауза. 
3) Тест для испытания запаса слов (из 100 слов). 
4) Испытание «Практическое суждение» (тест  мяча и поля).

Задание теста формулировалось в графической форме (рис.1.) [Приложение]. Изображался круг, обозначавший поле,  заросшее густой травой. Где-то в поле лежит мяч, увидеть который можно, только если подойти к нему не более чем на 10 шагов. Испытуемому нужно выбрать варианты таких траекторий передвижения, чтобы время поиска мяча было наименьшим.

Л.Термен и Х.Чальдс лучшими  считали  ответы  «д» и «е». Интересно отметить, что это не совсем верно. Варианты «д» и «е» обеспечивают успешный поиск мяча, но, сравнение времен поиска для обоих вариантов, показывает, что они не равноценны. Предположив, что скорость перемещения во всех случаях одинакова, мы можем сравнивать не время, а длину пути (траектории) поиска. Из рисунка видно, что длина траектории поиска в случае «д» почти в 3 раза превышает длину в случае «е». Таким образом, верный ответ – «е».

Если первоначально развивалось  психологическое тестирование, то в  последующем, Маккол В.А. предложил  различать тесты психологические - тесты умственного развития (Intelligence Test) и педагогические - тесты учебных  достижений (Educational Test).

Основоположником педагогических измерений считается Эдуард Ли Торндайк. Именно Торндайком были созданы первые научно обоснованные педагогические тесты, снабженные нормами.

Большой вклад в развитие  теории тестирования внесли   Spearman C.E.,  Gulliksen H., Guttman L. Lord F.M. & Novick M., Kuder G.F. & Richardson M.W. (теория надежности тестов), Crocker Linda & Algina James (современная классическая теория тестов).

В настоящее время за рубежом  и в нашей стране широкое применение находит современная теория тестирования - Item Response Theory (IRT). Однопараметрический  вариант IRT предложен Георгом Рашем (G.Rasch). Развитие IRT основывалось на появлении  двух и трехпараметрических моделей - Birnbaum A. . Обширная деятельность по развитию IRT осуществляется Д.Эндричем (D.Andrich), Б.Райтом (B.Wright)

Фундаментальный труд Анны Анастази «Психологическое тестирование»  представляет собой классическую работу, вобравшую в себя все достижения западной тестологии. В 2006 году вышло 7-е  издание совместно с С.Урбиной, куда были добавлены главы по современным  методам тестирования.

В своей «Педагогической  диагностике» Карлхайнц Ингенкамп  утверждает, что традиционные способы  оценки, существующие в системе образования, срочно нуждаются в систематическом  дополнении объективными методами. При  этом необходимо найти научное обоснование  методики оценок. Без разумного  использования информативных тестов добиться существенного улучшения в оценочной практике учителей невозможно. Это, безусловно, верное утверждение, справедливое не только для Германии, но и для России.

Наряду со всеобщим распространением тестов, нарастала и их критика. Дж.Равен  указывает на  научные  и этические аспекты экспансии тестологии в сфере образования. Он называет «безнравственным» пренебрежение  ущербом, который практика тестирования наносит судьбам детей и интересам общества. Дж. Равен считает, что  традиционные тесты достижений не могут должным образом оценить результаты педагогического  процесса, в частности, они не подходят для выявления одаренности учащихся.

Отмечая справедливость его  критики, следует все же признать, что развитие тестологии, дающей в  руки педагоги качественный измерительный  инструмент, явление нужное и прогрессивное. Правда, это должен быть не единственный измеритель, определяющий ход учебного процесса.

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

РАЗВИТИЕ ТЕСТОЛОГИИ В РОССИИ 

 

Среди российских исследователей занимавшихся тестированием, можно  назвать П.П.Блонского, Г.И.Залкинда, М.С.Бернштейна и др. К сожалению, в 1936 году вышло постановление ЦК ВКП(б) «О педологических извращениях  в системе Наркомпросов». Тестирование было признано противоречащим советской  идеологии со всеми вытекающими  последствиями.

В послевоенные годы, работы в области тестирования начали возрождаться, а в 70-80-х годах прошлого столетия педагогическое тестирование стало  усиленно развиваться в рамках технологии программированного обучения.

Важную роль в становлении  отечественной тестологии сыграли  работы Беспалько В.П. и Талызиной  Н.Ф. Согласно В.П.Беспалько процесс  обучения должен быть технологичным  и диагностичным. Если нет достоверной  диагностики, то нет и учебного процесса. Н.Ф.Талызина, рассматривая вопросы  управления процессом учения, анализирует  проблемы педагогической оправданности  применения тестов различного типа.

Работы отечественных  и зарубежных тестологов были в основном изолированы от друг от друга. В СССР фундаментальные труды зарубежных тестологов были практически неизвестны.

В этой связи следует отметить трудно переоценимую деятельность В.C.Аванесова  по применению и развитию  передовых идей и достижений зарубежной тестологии  в отечественной теории и  практике педагогического тестирования.

Под руководством В.C.Аванесова  в 1985 году на базе Московского института  стали и сплавов был организован  Исследовательский центр по проблемам  управления качеством подготовки специалистов. В этом центре началась планомерная  переподготовка руководящих работников и преподавателей в системе высшего  образования СССР.  В Москву на краткосрочные (1  месяц) курсы съезжались преподаватели, доценты, профессора со всех регионов страны - от Дальнего Востока, до Прибалтики и Средней Азии. Именно этот период, видимо следует считать началом широкомасштабного применения современных научных методов в педагогическом тестировании.

В 1989 году В.C.Аванесовым было выпущено учебное пособие «Основы  научной организации педагогического  контроля в высшей школе»²⁶, внесшее большой вклад в развитие теории и практики отечественной тестологии.  В.C.Аванесов является приверженцем современных технологий в образовании, большую просветительскую деятельность он осуществляет в глобальной сети Интернет. Его сайт www.testolog.narod.ru  содержит массу постоянно обновляемой информации весьма полезной для тестологов. Журнал «Педагогические измерения», главным редактором которого является В.С.Аванесов, является авторитетным изданием, где публикуются работы отечественных и зарубежных тестологов. А.Н.Майоров называет Вадима Сергеевича Аванесова классиком отечественной тестологии и с этим трудно не согласиться. 

Вместе с В.C.Аванесовым в Исследовательском центре начала свою деятельность М.Б.Челышкова. К  этому моменту она защитила кандидатскую диссертацию  и увлеченно читала в Исследовательском центре лекции по Item Response Theory (IRT). Это были очень актуальные лекции, следует отметить, что значимость IRT в тестологии возрастает с каждым годом. Ныне, профессор Марина Борисовна Челышкова широко известна в кругах тестологов, а ее учебное пособие «Теория и практика конструирования педагогических тестов», вышедшее в 2002 году пользуется всеобщим признанием.

Очень важные вопросы стандартизации педагогических тестовых материалов подняты  в работе  Б.У.Родионова,  А.О.Татура.  Педагогический тест является измерительным инструментом и это должен быть качественный инструмент, позволяющий получать достоверные результаты.  В создании качественных педагогических тестов чрезвычайно велика роль стандартов, которым должны соответствовать педагогические тестовые материалы.

Полный комплекс работ  по составлению и использованию  тестов школьных достижений представлен  в работах А.Н.Майорова. В нашей  стране остро стоит проблема подготовки кадров для системы тестирования. А.Н.Майоров отмечает, что существует «миф о том, что для составления  тестового инструмента нет необходимости  иметь специальные знаний. В последние  годы, особенно в связи с введением  ЕГЭ, появилось множество книг с  описанием тестов по любым школьным предметам. Следует понимать, что  это не тесты, а некоторые совокупности сырых заготовок,  которые следует еще переработать в задания в тестовой форме, а затем, если удастся – в тестовые задания. Только после этого можно говорить, что создан тест для той или иной предметной области.

Если работы А.Н.Майорова имеют больше практическую направленность, то работы Ю.М.Неймана и В.А.Хлебникова носят больше теоретический характер. Им принадлежит русскоязычная трактовка  названия теории Раша (G.Rasch) - «Теория  моделирования и параметризации педагогических тестов» (ТМППТ). Эти  работы имеют большое значение для  развития теоретических основ отечественной  тестологии. Традиционные контрольные  процедуры страдают субьективизмом и неопределенностью оценок. В  этой связи Ю.М.Нейман и В.А.Хлебников  отмечают, что принципиально изменить ситуацию можно лишь в том случае, если подходить к оцениванию знаний как к процессу объективного измерения, а результаты таких измерений  обрабатывать стандартными  математическими методами и сопровождать стандартными характеристиками точности. Ими указывается, что педагогический тест, в отличие от, например, контрольной работы, можно рассматривать как своеобразный измерительный инструмент определенной разрешающей силы и точности.

Информационные и телекоммуникационные технологии оказывают сильное воздействие, как на организационные формы, так  и на обработку результатов тестирования. В работе В.И.Нардюжева и И.В.Нардюжева рассмотрены вопросы построения системы компьютерного тестирования. Программные разработки этих авторов использовались для организации абитуриентского компьютерного тестирования Федеральным центром тестирования Минобразования РФ (ЦТ МО РФ). Прикладные программные средства Tester - для проведения тестирования, Operator - для конфиденциальной передачи результатов тестирования в ЦТ МО РФ, StatInfo - для статистической обработки результатов тестирования, показали себя как надежные и удобные программные продукты.

Термин «Дидактическая тестология»  вводит Е.А.Михайлычев. Если исходить из того, что дидактика - это теория обучения, а педагогика - теория и  обучения и воспитания, то термин, предложенный Е.А.Михйлычевым представляется более  точным, нежели термин «педагогическое  тестирование». Однако следует отметить, что в научной терминологии уже  устоялся термин «педагогическое тестирование».  Е.А.Михайлычевым  очень обстоятельно описаны проблемы валидизации теста и пути их решения.

Применение модели G.Rasch (Раш) к изучению латентных переменных в образовании в социально-экономических  системах развивается в работах  А.А.Маслака. Следует отметить вклад  А.А.Маслака в разработку конструктов, содержащих индикаторные переменные для  социально-экономических систем, анализ точности педагогических измерений  на основе модели Раша.  В качестве эффективного инструмента в исследованиях А.А.Маслака  используется программное средство RUMM (Rasch Unidimensional Measurement Model), разработанное под руководством профессора  Д.Эндрича.

На Дальнем Востоке  большой вклад в развитие тестологии внес И.А.Морев.   В Тихоокеанском институте дистанционных образовательных технологий (ныне Открытый университет ДВГУ), руководимым профессором В.И.Вовной, И.А.Морев теоретически обосновал и реализовал на практике технологию «мягкого, непрямого» тестирования (зарубежные аналоги - «grading» и др.) в форме деловых компьютерных игр. Под руководством И.А.Морева был разработан ряд компьютерных программ-тестеров, среди которых следует отметить программные пакеты STEACHER, DIALOG, PHRACON и DIDACTOR. Большой статистический материал (несколько десятков тысяч испытуемых) позволил И.А.Мореву обнаружить важные закономерности, взглянуть на тестирование не только как на  измерительный, но и как на полноценный дидактический инструмент. И.А.Моревым показано, что тестирование, при определенных технологических условиях, способно успешно стимулировать рост мотивации учащихся к учебе, рост показателей их обученности и обучаемости.

Проблемы использования IRT  в учебном процессе вуза исследуются К.Т.Кузовлевой в Дальрыбвтузе. В Тихоокеанском военно-морском институте В.В.Черненко проводит интересные исследования как в  области технологии применения тестов достижений, так и в области интерпретации полученных результатов. Работы К.Г.Кречетникова посвящены  вопросам организация контроля и корректировочных действий в информационной образовательной среде вуза.

Педагогическое тестирование развивалось и в Уссурийском  государственном педагогическом институте. С 1994 года в УГПИ разрабатывались  тестовые задания по школьному и  вузовскому курсам физики, информатики. Выполнялась статистическая обработка  результатов тестирования, создавались  компьютерные программы, как для  тестирования, так и для обработки  полученных результатов^{45, 46, 47, 48, 49}. Технология «мягкого, непрямого» тестирования разрабатывается О.Н.Фалалеевой⁵⁰. Для организации абитуриентского тестирования  был создан  региональный межвузовский центр тестирования.

Из приведенного, очень  краткого и неполного обзора следует, что тестирование учебных достижений широко используется за рубежом и  довольно высокими темпами развивается  в России.

ЗАКЛЮЧЕНИЕ

 

Всевозрастающее число разработчиков  педагогических тестов выдвигают перед  отечественной системой образования  ряд важных задач.

Первая из них связана  с сертификацией качества педагогических тестовых материалов, используемых для  оценки знаний и других педагогических характеристик обучающихся в  образовательных учреждениях РФ. С целью повышения качества образования и дальнейшего совершенствования аттестационных тестовых технологий создан Координационный совет Минобразования России (приказ Минобразования РФ № 1122 от 17.04.2000), призванный осуществлять контроль за соблюдением требований к качеству педагогических тестовых материалов, вырабатывать рекомендации по совершенствованию процесса их сертификации, определять порядок оформления и выдач сертификатов. Наличие сертифицированных педагогических тестов позволит организовать их распределение и будет способствовать формированию рынка тестовых услуг.

Вторая актуальная задача связана с подготовкой квалифицированных  тестологов. С недавнего времени  эта задача стала государственной, и ее решение предлагается введением в системе дополнительного профессионального образования дополнительной квалификации "тестолог".

Таким образом, можно констатировать, что педагогическое тестирование в  России в настоящий исторический момент возрождено и переходит в стадию интенсивного развития. Специфика российских образовательных систем придает ему индивидуальные черты, формирование которых позволит решить ряд важнейших педагогических проблем их интеграции в международные системы образования, реформирования отечественной средней и высшей школы, а также развития научных основ педагогического тестирования.

 

СПИСОК ЛИТЕРАТУРЫ

 

 

1. Аванесов В.С. Тесты: история и теория // Управление школой, 1999.
2. Беспалько В.П. Программированное обучение. Дидактические основы. –М., 1970.
3. Ингенкамп К. Педагогическая диагностика. -М.: Педагогика, 1991.
4. Кадневский В.М. История тестов. Монография. –М.: Народное образование, 2004.
5. Талызина Н.Ф. Управление процессом усвоения знаний. -М.: МГУ, 1975.
6. Талызина Н.Ф. Формирование познавательной деятельности младших школьников. –М: Просвещение, 1988.

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

ПРИЛОЖЕНИЕ

 

Рис.1. «Тест мяча и поля» Л.Термена и Х.Чальдса.