Проблема создания компьютерных тестов личностных качеств человека

     1. ТЕСТИРОВАНИЕ И ВИДЫ ТЕСТОВ 

     Тестирование  возникло потому, что человеку захотелось узнать, чем и насколько он отличается от других людей. Так и появился основной принцип тестирования – выполнение одинаковых (или эквивалентных) для всех коротких заданий, по результатам которых люди сравниваются между собой. Вообще, тесты – это короткие испытания, задания человеку, построенные и отобранные согласно определенным правилам, по результатам которых можно получить какую-либо информацию о нем. Информация эта может быть самая разнообразная, но, в конечном счете, на ее основе можно определить, обладает ли человек тем или иным качеством, способностью, знанием.

     Тесты можно разделять по многим признакам. Основная классификация – по направленности теста: оценивать можно способности человека, его личностные качества, интеллект, отдельные психические функции (внимание, память, воображение), знания.

     Первая  группа тестов оценивает так называемые специальные способности человека, к которым, например, относится музыкальный  слух или художественные способности. В составлении подобных методик обычно участвуют специалисты в этих областях, и состоят они из практических заданий, которые должен выполнить респондент. Наличие компьютеризованных версий таких тестов вполне возможно, как правило, в специализированных музыкальных или графических пакетах.

     Личностные  тесты оценивают выраженность у  человека таких качеств, как общительность, дружелюбие, активность, ранимость, мечтательность, тревожность – то, что на ненаучном языке называется характером. Человеку предлагается ответить на вопросы о его убеждениях, поступках, мотивах, намерениях, и на основе его ответов делается вывод о том, какими личностными качествами он обладает. Конечно, здесь существует вероятность получить не реальную картину личности человека, а портрет того, кем он хотел бы быть или казаться в глазах психолога.

     Тесты отдельных психических функций, таких как память или внимание, часто применяют для отбора на работу. Обычно здесь требуется за ограниченное время выполнить большое количество довольно простых задач, где главное – сконцентрировать внимание на задании (если тест на внимание) или запомнить и правильно воспроизвести материал (память). Отдельные задания из таких методик могут входить в тесты на уровень интеллекта.

     Интеллект был первым объектом тестирования в психологии. В начале ХХ века современная психодиагностика началась именно с того, что был составлен тест интеллекта для отбора детей в школу. Тесты интеллекта измеряют математические и вербальные способности, пространственное и логическое мышление, эрудицию. Вопросы обычно представляют собой задачи, ответ на которые требуется выбрать из предложенного списка, причем, как правило, время на выполнение таких тестов ограничено.

     И наконец, тесты знаний – это самый широко используемый вид тестов. Их обычно составляют для проверки знаний в тех или иных областях. Широко используются тесты по школьной или институтской программе, для итогового или текущего контроля, тесты знаний в той или иной профессии, при проведении аттестаций, экзаменационные тесты в языковых школах или при приеме экзаменов в ГАИ. Таких примеров можно назвать множество. Состоят подобные тесты обычно из вопросов и/или задач из какой-либо области знания, а от респондента требуется выбрать единственно правильный (или несколько правильных) ответ из предложенного списка. 

     2. КОНСТРУИРОВАНИЕ  ТЕСТОВ 

     При создании теста первым делом следует  определить его назначение. Если решено разрабатывать собственную методику, нужно четко знать, для чего нужен тест и чем не устраивают существующие аналоги. Цели могут быть любыми: от глобальных (выявить всех потенциальных преступников) до сугубо практических (проверить, как ребенок усвоил программу для самостоятельного изучения). Определив общую цель тестирования, нужно разобраться с тем, какие свойства необходимо проверить. То есть не личность вообще, а, к примеру, общительность, ранимость и тревожность; не интеллект в целом, а вербальное или логическое мышление. Эти свойства на языке психодиагностики называются факторами, и их набор должен отражать цель, ради которой тест разрабатывается.

     Дальше  следует самая интересная часть  работы, где автор теста может  проявить воображение и смекалку, – это разработка заданий. И если с тестами знаний и интеллекта все более-менее ясно (нужно составить набор задач для каждого фактора, адекватный по содержанию и уровню сложности той цели, для которой тест создается), то для тестов личности все несколько сложнее и, в некотором смысле, интереснее.

     Каждое  задание должно быть сформулировано четко и ясно. Это относится ко всем видам тестирования, но особенно актуально для тестов личности, где в заданиях часто используются утверждения, которые могут быть истолкованы неоднозначно. От того, как человек их поймет и как на них ответит, и будет зависеть информация о нем. В то же время нужно стремиться к тому, чтобы респондент не мог догадаться, на оценку какой черты личности направлен вопрос (иначе велик риск получить не реальное мнение респондента, а его точку зрения на то, какой она должна быть).

     Еще один важный аспект: задания должны отражать конкретные аспекты поведения человека. Например, лучше спросить «Как часто Вы занимаетесь спортом?» с вариантами ответа: «Раз в месяц», «Раз в две недели», «Раз в неделю», чем «Нравится ли Вам заниматься спортом?». Дело в том, что человеку может нравиться заниматься спортом, но он всего два раза за зиму встает на лыжи. Лучше не использовать слова «часто», «редко», «иногда» без уточнения временных интервалов, потому что понимание таких интервалов у каждого человека свое.

     Критически  важно в личностных тестах, чтобы  каждый вариант ответа воспринимался  как вероятный, возможный. Даже в  самой скользкой теме ни в вопросе, ни в вариантах ответа не должно отражаться отношение к ней автора вопроса. Иначе, почувствовав, какой  ответ от него ожидается, респондент может исказить картину.

     При составлении вопросов для теста  личности нужно также учитывать  желание респондента показать себя в выгодном свете. Один из способов избежать этого – поймать респондента на противоречии или на том, что он соглашается с утверждениями, которые на первый взгляд отражают мнение большинства, а по сути – не имеют смысла. Например: «Считаете ли Вы, что любой выбор, доведенный до конца, является правильным?». Борьба с этим явлением открывает дополнительный простор для фантазии автора теста.

     Правильно подобрать варианты ответа – тоже целое искусство. В современных личностных тестах обычно ограничиваются двумя-тремя вариантами. Использование большего количества вариантов чревато тем, что респондент будет быстро уставать, читая длинные тексты и пытаясь примерить каждый ответ на себя.

     В любых тестах для каждого тестового  задания существует понятие ключа  – это ответ, который несет информацию об испытуемом по одному из факторов теста. Если респондент выбрал ключевой ответ, ему начисляется определенное количество баллов. Количественный результат теста складывается именно из совпадений ответов респондента с ключевыми.

     Для того чтобы подготовить тест к  выходу в свет, нужно добавить к  вопросам инструкцию и интерпретацию.

     Инструкция  – это вводная часть, где вы знакомите респондента с тестом, объясняете, на что он направлен (причем для психологических тестов это объяснение вовсе не обязательно должно совпадать с истинными целями автора), каковы особенности работы с ним (сколько вопросов, сколько вариантов ответа, есть ли временные ограничения).

     Интерпретация – это результаты конкретного респондента, которые он получает после работы с тестом. Это может быть описание его сильных и слабых сторон, а также рекомендации, как развивать в себе то или иное качество. Получение интерпретации – это основной мотив, который движет людьми, проходящими тест: узнать о себе что-то новое или проверить уже имеющиеся знания, поэтому ее составлению следует уделить особое внимание.

     Важно написать и о сильных, и о слабых качествах человека (или о сферах его знания), не унижая его человеческого достоинства. Рекомендации должны быть советами, а не прямым руководством к действию: что бы ни показал респондент в ходе теста, мы не имеем права указывать ему единственно правильный путь к исправлению.

     Итак, тест готов, введен в программу и  может использоваться. Но встают новые  вопросы: что делать с полученным баллом, какой результат считать  высоким, а какой – низким, можно ли сравнивать между собой результаты по разным методикам. На эти вопросы должна дать ответ стандартизация теста. Это процедура предварительной «обкатки» методики, когда мы уточняем, как она работает. Ее должны пройти любые тесты, претендующие на звание профессиональных.

     В первую очередь нужно проверить получившийся тест на небольшой группе людей, схожей по составу с той, на которой потом планируется его использовать. Затем обработать их результаты, чтобы посмотреть, как они отвечали на задания. Из этих ответов складываются так называемые тестовые нормы, которые служат отправной точкой для сравнения результатов между собой. Нормы по фактору теста в самом общем виде – точки на шкале возможных баллов, разделяющие респондентов на группы. Обычно таких групп три: высокая (те, у кого большинство ответов совпало с ключом), средняя и низкая (те, у кого таких совпадений минимум). Но просто по набранному баллу нельзя определить, к какой группе относится человек.

     От  того, в какой группе находится  респондент, напрямую зависит то, какую  интерпретацию он получит. Низкая группа – это слабая выраженность признака (низкий уровень знаний) или его сильно выраженная противоположность (например, низкие математические способности, если получен низкий балл по соответствующей шкале, или выраженная замкнутость, если низкий балл получен по шкале «общительность»). Высокая группа – это соответственно высокая выраженность признака (или продемонстрированного уровня знаний). Со средней группой все обстоит несколько сложнее. С одной стороны, трактовать ее довольно сложно – это средний результат, ни рыба ни мясо. Обычно люди, попадающие в среднюю группу, ведут себя по-разному, в зависимости от ситуации (в кругу друзей они могут быть душой компании, а с новыми людьми – молчаливыми и замкнутыми), но могут показывать знания лишь в отдельных областях. В то же время средний балл обычно набирает большинство людей (вспомним, что на этом и строится подсчет норм), и потому ничего не сказать человеку тоже нельзя.

     Итак, стандартизация проведена, нормы к  тесту получены, но параллельно с  этим интересно посмотреть, как люди отвечают на вопросы теста. Основной признак хорошего вопроса – если по ответам на него можно разделить людей на обладающих и не обладающих измеряемым признаком (получающих высокие баллы по тесту знаний или низкие), если по ответу на каждое из заданий теста можно предсказать, попадет человек в высокую или низкую группу. Вопросы, по которым люди делятся на две более-менее равные группы, считаются хорошими и остаются в тесте. Плохо работающие вопросы обычно отбрасываются, и им придумывается замена, которую потом тоже стоит проверить.

     Правда, еще нужно оценить, тот ли признак  измеряется тестом, соответствуют ли результаты тому, что необходимо. Вопросы  могут четко разделять людей, но совершенно не по тому признаку. Чтобы  это проверить, нужно сравнить результаты теста с каким-нибудь внешним критерием, также имеющим отношение к измеряемому свойству. В качестве такого критерия может выступать как другой тест, о котором уже известно, что он измеряет, либо любой другой параметр. Если такое соответствие найдено – это показатель валидности¹ методики. Более подробно о том, как считаются стандартизованные баллы, можно прочитать в статьях о конструировании тестов и о способе подсчета баллов.

     Еще одна вещь, которую нужно проверить  перед тем, как тест будет готов, – насколько его результаты устойчивы. Не секрет, что в зависимости от настроения, самочувствия, под влиянием обстоятельств человек может отвечать на вопросы по-разному. Но есть некие устойчивые особенности поведения, которые проявляются в любой ситуации, именно они чаще всего и интересны. Поэтому хорошо бы проверить надежность теста, к примеру, проведя его еще раз на той же группе респондентов и сравнив результаты.

     И только после этого тест по-настоящему готов к использованию. Все профессиональные методики строятся именно по такому принципу. Работа эта довольно кропотливая, требующая психологической смекалки, способности увидеть, что стоит за поведением человека, и учитывающая особенности предметной области знаний, а также владения простейшими приемами статистического анализа. Все подсчеты уже давно перепоручены электронным таблицам и статистическим пакетам, главное – знать, что считать, и уметь правильно эти инструменты применять.

     Итак, если вы составили вопросы для  некоторого теста, вам необходима программа, которая позволит провести компьютерное тестирование. Возможно, вы напишете ее сами, а может быть вам подойдет уже готовая программа. 

     3. ПРОБЛЕМА СОЗДАНИЯ КОМПЬЮТЕРНЫХ ТЕСТОВ ЛИЧНОСТНЫХ КАЧЕСТВ ЧЕЛОВЕКА 

      Составление компьютерных тестов является довольно сложным делом. Очень важно научиться отличать профессионально сделанный добротный тест от популярно-развлекательного журнального опросника. Настоящий, действенный, валидный и эффективно работающий тест – это завершенный продукт, обладающий определенными свойствами и характеристиками и отвечающий современным методическим требованиям. Тест обладает составом, целостностью и структурой. Он состоит из заданий, правил их применения, оценок за выполнение каждого задания и рекомендаций по интерпретации тестовых результатов. Целостность теста проявляется во взаимосвязи заданий, включенных в тест. Ни одно из заданий не может быть изъято из теста без ущерба для него. Структура же его проявляется в способе связи заданий между собой.

      Наиболее  популярными программами для создания тестов являются текстовый редактор MS Word, редактор электронных таблиц MS Excel и программа для создания презентаций MS PowerPoint, так как для создания тестов в этих программах не требуются навыки программирования, что позволяет разрабатывать тесты любому человеку, владеющему технологией работы в программах хотя бы на уровне пользователя.

      Технология  составления компьютерных тестов средствами MS Word.

      Возможности текстового редактора в составлении  тестовых заданий ограничены, однако это не мешает использовать эту программу для создания психологических тестов, направленных на изучение личностей детей, подростков и взрослых.

      Для создания тестов в MS Word достаточно уметь  создавать гиперссылки и закладки. Закладками являются вопросы теста и реакции на правильный или неправильный ответы. В качестве гиперссылок могут выступать картинки либо текст. Для выбора ответа достаточно щелкнуть по нему мышью. Вернуться к предыдущему вопросу, то можно щелкнув по гиперссылке «Вернуться».

      Технологии составления компьютерных тестов средствами Excel.

      Редактор  электронных таблиц Excel обладает широкими возможностями для создания различных  тестов. Электронные таблицы позволяют  создавать эффективные тест: тест открытого типа, тест закрытого и  т.д.

      Для создания тестов в электронных таблицах достаточно иметь навыки форматирования ячеек и уметь использовать функции  «ЕСЛИ» и «СЧЕТЕСЛИ». Для усовершенствования тестов может пригодиться знание функции «Условное форматирование», умение создавать гиперссылки и макросы. Программа Excel позволяет создавать тесты с выборочным ответом (когда диагностируемому предлагаются варианты ответов, из которых он выбирает).

      Технологии  создания тестов в MS PowerPoint.

      Приложение MS PowerPoint позволяет создавать тесты, направленные на изучение личностых характеристик. С созданием теста справится любой психолог.

      Для теста создается титульный слайд, слайды с вопросами теста. В таких  презентациях смена слайдов должна происходить при помощи управляющих  кнопок и гиперссылок. Работа с тестом должна строиться в режиме тренажера: даются несколько вопросов с вариантами ответов. Варианты ответов могут быть оформлены в виде кнопок с использованием стандартных автофигур, каждая из которых является гиперссылкой на другой слайд.

      К тестам, как методам точной психодиагностики предъявляется ряд особых требований:

• социокультурная адаптированность теста – соответствие тестовых заданий и оценок особенностям культуры, сложившимся в обществе, где данный тест используется, будучи заимствованным в другой стране;
• простота формулировок и однозначность тестовых заданий – в словесных и иных заданиях теста не должно быть таких моментов, которые могут по-разному восприниматься и пониматься людьми;
• ограниченное время выполнения тестовых заданий – полное время выполнения заданий психодиагностического теста не должно превышать 1,5-2 часов, т. к. сверх этого времени человеку трудно сохранить свою работоспособность на достаточно высоком уровне;
• наличие тестовых норм для данного теста – репрезентативные средние показатели по данному тесту, - т.е. показатели, представляющие большую совокупность людей, с которыми можно сравнивать показатели данного индивида, оценивая уровень его психологического развития.

       Норма теста – средний уровень развития большой совокупности людей, похожих на данного испытуемого по ряду социально – демографических характеристик.

      Для уверенности в достоверности  результатов психодиагностических исследований необходимо, чтобы используемые психодиагностические методы были научно обоснованы, т.е. отвечали ряду требований:

1. валидность – «полноценность», «пригодность», «соответствие». Есть несколько разновидностей валидности:

• валидность теоретическая – определяется по соответствию показателей исследуемого качества, получаемых с помощью данной методики, показателям, получаемым с помощью других методик. Теоретическую валидность проверяют по корреляциям показателей одного и того же свойства, получаемым при помощи различных методик, опирающихся или исходящих из одной и той же теории.
• валидность эмпирическая – проверяется по соответствию диагностических показателей реальному поведению, наблюдаемым действиям и реакциям испытуемого. По критерию эмпирической валидности методику проверяют путем сравнения ее показателей с реальным жизненным поведением людей.
• валидность внутренняя – означает соответствие содержащихся в методике заданий, субтестов, суждений и т. п. общей цели и замыслу методики в целом. Она считается внутренне не валидной, когда все или часть вопросов, заданий или субтестов измеряют не то, что требуется от данной методики.
• валидность внешняя – примерно то же, что и эмпирическая валидность, но тут речь идет о связи между показателями методики и наиболее важными внешними признаками, относящимися к поведению испытуемого.

      Валидность  методики проверяется и уточняется в процессе ее достаточно длительного использования.

      Критерии  валидности:

• поведенческие показатели – реакции, действия и поступки испытуемого в разных жизненных ситуациях.
• достижения испытуемого в различных видах деятельности: учебной, трудовой, творческой и др.
• данные о выполнении различных контрольных проб и заданий.
• данные, полученные от других методик, валидность которых или связь с данной методикой считаются достоверно установленными.

2. надежность – характеризует возможность получения с помощью данной методики устойчивых показателей. Надежность психодиагностической методики можно установить двумя способами:

• путем сравнения результатов, получаемых по этой методике разными людьми;
• путем сравнения результатов, получаемых по одной и той же методике в различных условиях.

3. однозначность методики – характеризуется тем, в какой степени получаемые с ее помощью данные отражают изменения именно и только того свойства, для оценки которого данная методика применяется.

4. точность – отражает способность методики тонко реагировать на малейшие изменения оцениваемого свойства, происходящие в ходе психодиагностического эксперимента. Чем точнее психодиагностическая методика, тем тоньше с ее помощью можно оценивать градации и выявлять оттенки измеряемого качества, хотя в практической психодиагностике не всегда требуется очень высокая степень точности оценок.

      Таким образом, необходимо строго соблюдать  правила проведения тестирования, обработки и интерпретации результатов:

• прежде, чем применять тест, психологу необходимо попробовать его на себе или другом человеке, что позволит избежать возможных ошибок из- за недостаточного знания его нюансов;
• важно заранее позаботиться о том, чтобы до начала работы испытуемые хорошо поняли задания и инструкцию к тесту;
• во время тестирования все испытуемые должны работать самостоятельно, не оказывая влияния друг на друга;
• для каждого теста должна быть обоснованная и выверенная процедура обработки и интерпретации результатов. Это позволяет избежать ошибок, возникающих на этом этапе тестирования.

БИБЛИОГРАФИЧЕСКИЙ СПИСОК 

1. Клайн П. Справочное руководство по конструированию тестов. Введение в психометрическое проектирование. – К., 1994.

2. http://psychology.net.ru

3. http://www.compress.ru