Педагогическое тестирование. Проблемы, заблуждения, перспективы

Джон Равен, 1991

В этой книге рассматривается ограниченность доминирующей в настоящее время в образовании и психологии измерительной парадигмы, а также то крайне негативное влияние, которое она оказывает на образование. Представлены новая теоретическая модель компетентности, мотивации и поведения и новый подход к их оценке. Книга содержит данные, свидетельствующие об эффективности и валидности предложенных процедур оценки, выдвинутые идеи используются для анализа сложившейся практики организации научных исследований; обсуждаются предложения по применению этих идей в сфере образования.

КРАТКОЕ ИЗЛОЖЕНИЕ

В первой главе этой книги показано, что общепринятые оценочные процедуры не позволяют справедливо судить о наиболее важных результатах любого педагогического процесса, хотя бы в какой-то степени заслуживающего этого названия. Во-первых, выполняемые разными учениками задания слишком отличаются друг от друга, чтобы эти различия могли быть выражены в баллах по любому небольшому числу «шкал». Во-вторых, эти процедуры не позволяют должным образом оценить и отметить учеников, достигших развития компетентностей высокого уровня, таких, как способность к деятельности, достойной называться академической, или научно-исследовательской, или способности общаться, руководить (лидировать), проявлять инициативу и т. п.

Одно из последствий применения подобных процедур оценивания состоит в том, что ни в процессе текущей аттестации, ни при приеме на работу учащиеся не могут получить признание за то, что обладают такими способностями, а учителя — за то, что умеют содействовать их развитию. Другим последствием оказывается невнимание школы к деятельности, необходимой для формирования таких компетентностей. Еще одно последствие состоит в том, что повсеместное применение этих процедур блокирует разработку диагностических и методических средств, необходимых учителям для осуществления тех программ обучения, которые требуются при формировании компетентностей высокого уровня.

Отсутствие адекватных методов оценки привело также к ряду выводов, дезориентирующих образовательную политику и неплодотворных для исследований в этой сфере.

Поскольку наиболее важные результаты педагогических программ — как позитивные, так и негативные — не выявляются с помощью общепринятых способов оценивания, исследования, подобные тем, которые защищает Объединенный комитет по стандартам в сфере образования, не способны определить ни вред, который наносят учащимся многие школы и колледжи, ни преимущества альтернативных подходов.

Тем не менее автор не выступает принципиально против тестирования и оценивания как таковых. Напротив, он подчеркивает, что учителям необходимо уметь выявлять интересы, способности и достижения своих учеников, а руководителям образования — определять, должным ли образом расходуются общественные средства; учащимся же нужна оценка того, чему же они научились в результате учебы. Однако для получения такой информации нужны новые средства измерения и оценки в системе образования.

Во второй главе представлен ряд дополнительных аргументов в пользу жизненной необходимости внедрения новых подходов к этой проблеме. В частности, показано, что без этого мы будем продолжать управлять системой образования, используя тесты, которые не обладают ни конструктной, ни прогностической валидностью и только отвлекают школу от ее главных задач. Так мы никогда не сможем изменить существующую практику, когда непропорционально большое число неподходящих людей занимает влиятельное положение в обществе.

В третьей главе автор раскрывает свое представление о ком-петентностях высокого уровня как о мотивационных диспозициях. Это означает, что такие качества базируются на ценностных приоритетах личности (а не существуют независимо от них). Компетентности высокого уровня включают ряд взаимопроникающих, взаимоусиливающих и взаимозаменяющих компонентов. Для их оценки предлагается двухступенчатая (а не двух-факторная) модель: сначала необходимо выяснить, какого рода деятельностью люди хотят заниматься, а затем — какие компоненты компетентности они в этой деятельности проявляют.

Эти же соображения, но в более формализованном виде представлены в четвертой главе. Они в конечном счете приводят к выводу, что мы должны отказаться от любых попыток различать людей на основании баллов, которые они получают по небольшому числу внутренне связанных «параметров», и, наоборот, принять описательный подход (концептуально имеющий немало общего с химическими формулами), при котором мы различали бы людей по приоритетным для них ценностям, по компетентностям, проявляющимся в деятельности, которая их действительно интересует; а также по тем ценностям, которые подавляет или стимулирует их окружение, по тем интересам и компетентностям, к развитию которых ведет выполняемая ими деятельность.

Пятая глава раскрывает опыт применения этой модели как при оценке обучающих программ, так и при индивидуальной диагностике. Показано, что суждения о ценностях и компетентности людей, основанные на формальных достижениях, содержат менее глубокую и качественную информацию, чем можно получить, если удается проникнуть, что называется, в «головы» людей, то есть выявить их мотивы, представления и переживания. Это можно сделать с помощью полуструктурированных интервью или на основе методики ценностных ожиданий. (Обе методики представлены в данной главе. — Примеч. переводчиков.)

В шестой главе подтверждается валидность полученной таким образом информации: использование предложенных методов позволило зафиксировать, например, различия в эффективности разных программ обучения, которые прежде считались вообще неуловимыми. Эти методы помогли нам показать, что экономический спад в Америке и особенно в Британии (по сравнению, скажем, со странами Тихоокеанского региона) в гораздо большей мере связан с изменением ценностей и способностей реагировать на новую информацию, чем с «провалами» системы образования, на которые с готовностью пеняют отчеты типа «Нация в опасности» и которые так неуклюже и неэффективно пытаются преодолеть с помощью централизованно навязываемых учебных планов и общенациональных программ тестирования.

В седьмой главе показано, что препятствия, которые до сих пор мешают проведению соответствующих исследований и разработок, заслуживают самого серьезного внимания и что реформу следует начинать с университетов. Необходимо, в частности, чтобы университетские преподаватели пересмотрели свои взгляды на природу науки и пути ее развития, а также на способы обучения студентов. Однако, чтобы перестроить свою деятельность в этом направлении, сотрудникам университетов самим понадобятся новые формы компетентности, называемые автором «социально-политическими». Это только подтверждает один из главных выводов автора, а именно: общая компетентность человека в современном обществе в первую очередь зависит от его политической компетентности.

Поскольку сказанное в этой книге в равной мере касается как педагогической практики, так и проблемы оценивания, в нескольких последних абзацах седьмой главы автор попытался собрать воедино концы оборванных по ходу изложения рассуждений и дать читателю ссылки на публикации, в которых эти вопросы обсуждаются более подробно.