Сущность и понятие педагогического теста
В настоящее время отмечается методологически слабая обеспеченность тестирования. Она во многом определяется недостаточной разработанностью категорийно-понятийного аппарата педагогического тестирования. Постоянно смешиваются такие ключевые понятия, как «тест» и «тестовое задание», не конкретизирована терминология видов тестов и тестовых заданий. Кроме того, большинство педагогов-практиков не имеют представления о таких важных элементах обеспечения качества экспериментальной работы, как репрезентативность выборки, надежность, валидность.
Зарубежные психологи называют науку по теории тестов психометрикой (Рsychometrika), а педагоги – педагогическим измерением (Educational measurement). Поскольку общего названия на русском языке пока нет, то мы будем придерживаться устоявшегося названия данной науки – тестология, которое используется в педагогическом, психологическом или социологическом контексте. Само название «тестология» определяется как наука о тестах.
Педагогическая тестология является прикладной методической теорией научной педагогики, которая призвана заниматься вопросами разработки тестов для объективного контроля подготовленности учащихся.
Ключевыми понятиями тестологии являются педагогическое задание, тест, содержание и форма заданий, надежность и валидность результатов измерения. Кроме того, в тестологии используются такие понятия статистической науки, как выборочная и генеральная совокупность, корреляция и др.
Исходным понятием тестологии является понятие «педагогическое задание». Педагогическое задание – средство интеллектуального развития, образования и обучения, способствующее активизации учения, повышению подготовленности учащихся, а также повышению эффективности педагогического труда. Задания могут формулироваться как в тестовой, так и в нетестовой форме.
Еще одним важным понятием является понятие теста. В настоящее время существует несколько десятков определения понятия «тест». Для обыденного сознания тест означает перевод с английского test – проба, испытание, метод. Смысл этого слова охватывает любой метод проверки, даже субъективный.
Часто мы встречаемся с упрощенным пониманием данного термина как системы заданий с выбором правильного ответа из представленных вариантов. Положение усугубляется многочисленными примерами «тестов» в газетно-журнальной периодике, многочисленными книжными публикациями под одноименным названием. Часто под такими развлекательными и даже педагогическими заданиями оказываются не тесты, а нечто, только внешне похожее на них. Между тем различия в понимании сущности тестов следует искать в самом отношении к тестам.
С. Л. Рубинштейн в 1938 г. дал следующее определение теста: «Тест – это испытание, которое ставит своей целью градирование, определение рангового места личности в группе или коллективе, установление ее уровня. Тест направлен на личность, он должен служить средством диагноза и прогноза».[29] Его современник, один из основоположников совететской психотехники С. Г. Геллерштейн писал: «Тест – это испытательный эксперимент, носящий характер определенного задания, которое стимулируем определенную форму активности и выполнение которого, поддаваясь количественной и качественной оценке, служит симптомом совершенствования определенных функций».[30]
Под термином «тест» в советской психолого-педагогической литературе до 1980-х гг. имелось в виду задание с четким и однозначным вариантом правильного ответа, ориентированным на определенные нормативы.
В целом сегодня научное мышление под термином «тест» понимает не только метод тестирования, но и научно-педагогическую систему; В. С. Аванесов рассматривает тест как единство метода, результата, полученного определенным методом, и интерпретации результатов.
Традиционный тест представляет собой стандартизированный метод диагностики и уровня структуры подготовленности школьников. В таком тесте все испытуемые отвечают на одни и те же задания, в одинаковое время, в одинаковых условиях и с одинаковыми правилами оценивания ответов. Цели применения данных тестов – установить отношение порядка между испытуемыми по уровню проявляемых при тестировании знаний. И на этой основе определить место каждого на заданном множестве тестируемых испытуемых.
Далеко не однозначен и термин «дидактический тест»: как синонимы ипользуются термины «педагогические», «учительские», «преподавательские тесты», «тесты достижений», «тесты исполнения», «тесты контроля знаний», «тесты умений и навыков», «учебные тесты», «контрольные тесты».
При этом разные авторы вкладывают свое (не всегда четко определенное) понимание в эти термины. Например, у Ч. Куписевича – преподавтельский тест – это не стандартизированные тесты, которые «могут быть составлены лицами, исследующими результаты учебы, достигнутые на проведенных ими учебных занятиях.
С. М. Вишнякова в словаре профессионального образования дает следующее определение теста. Тест, во-первых, стандартное задание, соответствующее определенным требованиям (однозначности, краткости и простоты), выполнение которого позволяет оценить некоторые психофизиологические характеристики испытуемого (умственное развитие, способности, волевые качества), а также уровень его знаний, умений и навыков. Во-вторых, тест является объективным методом контроля качества знаний учащегося, инструментом, позволяющим выявить факт усвоения. В-третьих, состоит из контрольного задания и эталона – образца последовательного и правильного выполнения задания. Задание выдается испытуемому, а эталон используется преподавателем или заложен в техническое средство для сравнения с ответом испытуемого и выведения оценки. Следует отметить, что этот метод требует:
· объемного и дорогостоящего методического обеспечения (набора тестов по каждой цели обучения) и высокой квалификации разработчиков тестов;
· вопросник для конкретных социологических исследований;
· информационную задачу с известным решением, предназначенную для проверки правильности работы вычислительной машины.
А. Н. Майоров рассматривает тест как инструмент, состоящий из квалиметрически выверенной системы тестовых заданий, стандартизированной процедуры проведения и заранее спроектированной технологии обработки и анализа результатов, предназначенный для измерения качеств и свойств личности, изменение которых возможно в процессе систематического обучения.
В. С. Аванесов определяет педагогический тест как систему параллельных заданий возрастающей трудности, специфической формы, которая позволяет качественно и эффективно измерять уровень и структуру подготовленности испытуемых.
При этом под системой понимается, что в тесте собраны такие задания, которые обладают системообразующими свойствами. Это, в свою очередь, означает общую принадлежность заданий к одной и той же системе знаний, а также их связь и упорядоченность. Еще одним необходимым атрибутом настоящего теста является расположение заданий по мере возрастания трудности – от самого легкого до самого трудного. Иначе говоря, главным формальным системообразующим признаком теста является различие заданий по степени их трудности.
Показатель трудности теста и тестовых заданий является содержательным и формальным одновременно. Содержательным показателем – потому что в хорошем тесте трудность может зависеть только от содержания и от уровня подготовленности самих испытуемых, в то время как в плохом тесте на результаты начинают заметно влиять форма заданий (особенно если она не адекватна содержанию), плохая организация тестирования, если имеются возможности списывания, утечки информации.
Формальная составляющая сторона показателя трудности возникает при рассмотрении тестирования как процесса противоборства каждого испытуемого с каждым предлагаемым ему заданием. Получаемый при этом исход полезно рассматривать как результат такого противоборства.
Специфическая форма тестовых заданий говорит о том, что задания теста представляют собой и не задачи, а задания, сформулированные в форме высказываний, истинных или ложных. Такие задания носят название «тестовые задания» или «задания в тестовой форме» в зависимости от употребляемого контекста (см. ниже). Традиционные вопросы, напротив, истинными или ложными не бывают, а ответы на них часто бывают многословны, они не поддаются сравнению с жестким эталоном. В этом смысле традиционные вопросы и ответы менее нетехнологичны, чем задания в тестовой форме или тестовые задания.
Нельзя не согласиться с В. С. Аванесовым, который указывает на то, что не всякое содержание поддается представлению в форме тестового задания. Затруднительным представляется выражение доказательств, обширных вычислений, многословных описаний в тестовой форме.
Определенное содержание означает, что при тестировании проверяется не весь программный материал, а лишь та часть учебной программы, которая входит в содержание проверяемых знаний учащихся. Остальное в педагогический тест не включается. При этом некоторые элементы проверяемых знаний используются только в текущем контроле, другие – в рубежном контроле, например, в конце учебной четверти. И, наконец, в итоговом контроле используются задания, правильные ответы на которые требуют знания многих, а иногда и всех тем, изученных в течение учебного года. Особое внимание следует уделять комплексности и сбалансированности содержания теста. Согласно этому положению тест, разработанный для итогового контроля знаний, не должен строиться на материале одной темы, даже самой основной. Тест необходимо конструировать, исходя из сбалансированности всех тем курса. В то же время необходимо добиваться комплексного включения в тест как вопросов теории, так и методов научной и практической деятельности, умения эффективно решать основные профессиональные задания.
Согласно принципу научной достоверности в тест включается только то содержание учебной дисциплины, которое является объективно истинным обладает аргументацией. Не следует включать спорные вопросы, то есть вопросы, имеющие неоднозначное решение. Кроме того, в педагогический тест, предназначенный для контроля, диагностики обученности и обучаемости, недопустимо включать вопросы, которые выясняют оценки, мотивацию, мнения.
По своей длине тесты могут быть короткими (10 – 20 заданий), средними? (40 – 60 заданий) и длинными (до 500 заданий). Оптимальное количество заданий определяется целями контроля, но практика показывает, что этой примерно 40 – 60 заданий. Количество заданий в тесте принято называть длиной теста.
Тестовое задание как структурная единица теста
Педагогический тест состоит из тестовых заданий. Содержание теста существует, сохраняется и передается в одной из четырех (В. С. Аванесов)| или шести (А. Н. Майоров) основных форм тестовых заданий. По мнению В. С. Аванесова, имеется принципиальная разница между понятием «тестовое задание» и близким ему понятием «задание в тестовой форме». Задание в тестовой форме определяется как педагогическое средство, отвечающее требованиям:
· цель;
· краткость;
· технологичность;
· логическая форма высказывания;
· определенное место для ответов;
· одинаковость правил оценки ответов;
· правильное расположение элементов задания;
· одинаковость инструкции для всех испытуемых;
· адекватность инструкции форме и содержанию задания.
В самом общем виде задание в тестовой форме состоит из трех частей:
1) инструкции, которая должна содержать указания на то, что испытуемый должен сделать, каким образом выполнять задание, где и как делать пометки и записи и т.д.; в тестах допускается делать одну инструкцию для группы однотипных заданий, которая помещается в начале данной группы заданий;
2)текста задания;
3) правильного ответа.
Тестовое задание – составная единица теста, отвечающая требованиям к заданиям в тестовой форме и статистическим требованиям: известной трудности; дифференцирующей способности (достаточной вариации тестовых баллов); положительной корреляции баллов заданий по всему тесту, а также другим математико-статистическим требованиям. Таким образом, только проверенные на практике (апробированные), имеющие рассчитанные показатели качества и трудность задания в тестовой форме могут именоваться тестовыми заданиями. До этого момента мы можем говорить лишь о системе заданий в тестовой форме и соответственно осторожно относиться к результатам, полученным данным способом.
В целом надо сказать, что тесты являются только одним из видов учебных заданий, используемых для контроля, диагностики обученности и обучаемости учащихся. Независимо от содержания и формы построения тестом можно считать только такую систему специально составленных заданий, решение которых имеет однозначные правильные ответы либо четкое описание (как минимум – на уровне ранговой шкалы) критериев интерпретации и оценки ответов (хотя бы как правильные – неправильные).
Естественно, не все необходимые характеристики усвоения можно получить средствами тестирования. Такие, например, показатели, как умение конкретизировать свой ответ примерами, умение связно, логически и доказательно выражать свои мысли, некоторые другие характеристики знаний, умений, навыков диагностировать тестированием невозможно. Это значит, что тестирование должно обязательно сочетаться с другими (традиционными) формами и методами проверки. Правильно действуют те педагоги, которые, используя письменные задания в тестовой форме, тестовые задания, тесты, дают возможность школьникам устно обосновывать свои ответы.
Компьютерное тестирование