Поиск по базе сайта:
Методическое пособие для руководителей и педагогов общеобразовательных учреждений Самара 2005 icon

Методическое пособие для руководителей и педагогов общеобразовательных учреждений Самара 2005




НазваМетодическое пособие для руководителей и педагогов общеобразовательных учреждений Самара 2005
Сторінка1/12
Дата конвертації04.12.2012
Розмір1.07 Mb.
ТипМетодическое пособие
  1   2   3   4   5   6   7   8   9   ...   12


Министерство образования и науки Самарской области

Британский Совет


И.С. Фишман


ТЕСТЫ ВНЕШНЕЙ ОЦЕНКИ УРОВНЯ СФОРМИРОВАННОСТИ КЛЮЧЕВЫХ КОМПЕТЕНТНОСТЕЙ УЧАЩИХСЯ


Методическое пособие

для руководителей и педагогов общеобразовательных учреждений


Самара

2005


Фишман И.С. Тесты внешней оценки уровня сформированности ключевых компетентностей учащихся: Методическое пособие для руководителей и педагогов образовательных учреждений. – Самара: Изд-во ЦПО, 2005.


© Министерство образования и науки Самарской области

© Британский Совет

© И.С. Фишман

БЛАГОДАРНОСТИ


Автор выражает свою признательность коллективам пилотных школ совместных проектов министерства образования и науки Самарской области и Британского Совета за помощь в разработке, экспертировании и апробации контрольно-измерительных материалов для внешней оценки уровня сформированности ключевых компетентностей учащихся:


МОУ СОШ № 176 Советского района г. Самары, директор Е.Н. Девятова;

МОУ СОШ № 91 г. Тольятти с углубленным изучением предметов технологического профиля, директор Т.М. Антонова;

МОУ СОШ № 33 г. Сызрани, директор В.Ю. Мавринский;

МОУ Андросовская СОШ Красноармейского района, директор А.П. Почукаев;

МОУ Кинель-Черкасская СОШ №2, директор С.Ю. Полищук;

МОУ Сосново-Солонецкая СОШ Ставропольского района, директор А.М. Козлов;


а также:

Тони Орджи, руководителю отдела политики и стандартов Кембриджского экзаменационного синдиката

Н.Ю. Посталюк, профессору, доктору педагогических наук, директору Центра профессионального образования Самарской области;

Н.Н. Крыловой, заместителю директора Регионального центра мониторинга в образовании;

А.Ю. Плотниковой, методисту Регионального центра мониторинга в образовании;

И.В. Смирновой, методисту Регионального центра мониторинга в образовании;

А.К. Туркину, заместителю директора МОУ Самарский медико-технический лицей;

Т.В. Журчевой, кандидату филологических наук, доценту кафедры русской и зарубежной литературы СамГУ

Г.С. Шерстневой, кандидату исторических наук, доценту кафедры отечественной истории и историографии СамГУ


СОДЕРЖАНИЕ


Разработка тестов внешней оценки уровня сформированности ключевых компетентностей учащихся в рамках совместных проектов министерства образования и науки Самарской области и Британского Совета ……………………………………………




Понятия «компетенция», «компетентность»: состав и классификация новых результатов образования ...................………………………………………………………….




Стандартизация тестовых заданий: требования к содержанию тестовых вопросов, процедуре и критериям оценки уровня сформированности ключевых компетентностей учащихся ………………………………………………………………………………………..




Оценка тестовых заданий открытого типа ……………………………………………..




Описание модельных заданий …………………………………………………………..




Приложение 1.

Постановление Правительства Самарской области № 24 от 19.05.04 «Об утверждении Концепции компетентностно-ориентированного образования в Самарской области»…………………………………………………………………………………………




Приложение 2.

Требования к содержанию тестов для внешней оценки уровня сформированности ключевых компетентностей учащихся………………………………………………………..




Приложение 3.

Основные понятия, используемые в описании требований к содержанию тестов ………..




Приложение 4.

Памятка по организации и проведению тестирования уровня сформированности ключевых компетентностей учащихся ……………………………………………………….




Приложение 5.

Единая шкала оценивания развернутых заданий открытого типа ………………………….




Приложение 6.

Понятия, используемые в формулировке тестовых вопросов……………………………….




Приложение 7.

Модельные задания для проверки уровня сформированности ключевых компетентностей ……………………………………………………………………………….




^ РАЗРАБОТКА ТЕСТОВ ВНЕШНЕЙ ОЦЕНКИ УРОВНЯ СФОРМИРОВАННОСТИ

КЛЮЧЕВЫХ КОМПЕТЕНТНОСТЕЙ УЧАЩИСЯ

В РАМКАХ СОВМЕСТНЫХ ПРОЕКТОВ МИНИСТЕРСТВА ОБРАЗОВАНИЯ И

^ НАУКИ САМАРСКОЙ ОБЛАСТИ И БРИТАНСКОГО СОВЕТА

С апреля 2001 г. по март 2004 г. специалистами Самарской области совместно с экспертами из Кембриджского экзаменационного синдиката был реализован проект «Формирование ключевых компетентностей учащихся через проектную деятельность».

Стратегической целью проекта являлась переориентация школ Самарской области на компетентностный подход к образованию. Цель проекта – формирование нормативной, кадровой и методической базы компетентностно-ориентированного образования.

Наряду с другими результатами проекта, группой реализации совместно с командами пилотных школ были разработаны требования к содержанию тестов для внешней оценки уровня сформированности ключевых компетентностей учащихся. На основе согласованных требований были созданы тесты для осуществления внешней оценки уровня сформированности ключевых компетентностей учащихся.

Данные требования и тестовые вопросы были скорректированы по результатам апробации на базе пилотных школ проекта:

МОУ СОШ № 176 Промышленного района г. Самары,

МОУ СОШ № 33 г. Сызрани,

МОУ СОШ № 91 г. Тольятти с углубленным изучением предметов технологического цикла,

МОУ Сосново-Солонецкая СОШ Ставропольского р-на,

МОУ Андросовская СОШ Красноармейского р-на,

МОУ Кинель-Черкасская СОШ № 2,

а также на базе Самарского медико-технического лицея.

В первичной апробации приняли участие более тысячи школьников. В ходе апробации экспертизу прошли около 120 тестовых вопросов, включавшие источники, модельные ответы, единую и специфические шкалы оценки.

В результате апробации тестовых вопросов:

  • выявлены и классифицированы типичные ошибки в создании тестовых вопросов;

  • каждый тестовый вопрос был отрецензирован и снабжен комментариями для последующей переработки;

  • выявлены трудности, связанные с процедурой проведения тестов внешней оценки уровня сформированности ключевых компетентностей учащихся;

  • обозначены особенности оценки тестовых вопросов, направленных на проверку сложных умений, связанных с извлечением, первичной систематизацией и обработкой искомой информации;

  • определены пробелы в подготовке учащихся, препятствующие успешному выполнению тестов, проверяющих аспекты работы с информацией и коммуникацией;

  • определено содержание профессиональной поддержки педагогов, готовящих учащихся к работе с тестами внешней оценки уровня сформированности ключевых компетентностей.

В 2004-2005 годах на этапе массового внедрения компетентностно-ориентированного подхода к образованию тестовые вопросы для внешней оценки уровня сформированности ключевых компетентностей учащихся проходят второй круг апробации на базе новых пилотных школ проекта «Организационно-методическое сопровождение переориентации массовой школы на компетентностный подход к образованию»:

МОУ СОШ № 1 г. Чапаевска, Юго-Западное территориальное управление,

МОУ СОШ № 3 г. Новокуйбышевска, Поволжское территориальное управление,

МОУ Каменно-Бродская СОШ, Северное территориальное управление,

МОУ Старопохвистневская СОШ, Северо-Восточное территориальное управление,

МОУ Новобуянская СОШ, Северо-Западное территориальное управление,

МОУ Алексеевская СОШ, Юго-Восточное территориальное управление,

МОУ Самарский медико-технический лицей.

Одним из результатов работы специалистов и персонала пилотных школ стало создание серии модельных тестовых заданий, часть из которых публикуется в данном сборнике методических рекомендаций для администраторов и педагогов школ Самарской области.

^ ПОНЯТИЯ «КОМПЕТЕНЦИЯ», «КОМПЕТЕНТНОСТЬ»:

СОСТАВ И КЛАССИФИКАЦИЯ НОВЫХ РЕЗУЛЬТАТОВ ОБРАЗОВАНИЯ

В настоящее время Россия переживает базисные изменения социально-экономической ситуации, суть которых в формировании рыночных отношений в экономике и либерализации социальной сферы.

Конкурентоспособность на современном рынке труда, где, по подсчетам специалистов компании IBM, человек меняет свою специальность не менее семи раз за время профессиональной карьеры, во многом зависит от его способности приобретать и развивать умения, навыки, компетентности, которые могут использоваться или трансформироваться применительно к целому ряду жизненных ситуаций.

Соответственно, принципиально меняются цели образования. Теоретические по сути и энциклопедические по широте знания, которые долгое время были главной целью образовательного процесса, теперь становятся средством. Другими словами, отечественная школа нуждается в смещении акцентов со знаниевого на компетентностный подход к образованию.

^ Компетенция как результат образования

Компетенция – результат образования, выражающийся в готовности субъекта эффективно соорганизовывать внутренние и внешние ресурсы для достижения поставленной цели.

В процессе освоения новых технологий, ролей происходит овладение новой деятельностью. Таким образом, компетенция проявляется в освоении субъективно новой деятельности, когда необходимо выполнять неалгоритмизированные (новые для человека) действия. Овладевая деятельностью, человек начинает управлять ей, и, следовательно, в основе компетенции лежит самоуправление (самоменеджмент). Однако успешность человека, пытающегося овладеть новой ролью (деятельностью), во многом зависит от его желания задействовать свои и чужие ресурсы на пути к достижению цели. Правомерно ли в этом случае расценивать компетенцию как прямой результат образования, делая школу ответственной за степень готовности субъекта соорганизовывать внутренние и внешние ресурсы для достижения поставленной цели?

Компетенция является результатом образования в широком смысле слова. Образовательный процесс, происходящий в школе, во-первых, должен быть направлен на формирование компетентностей (см. ниже), во-вторых, должен способствовать формированию компетенции посредством создания педагогических ситуаций, максимально точно моделирующих реальные жизненные ситуации, требующие проявления соответствующей компетенции (см. Приложение 1).

Идея о том, что компетенция в таком ее понимании едина и единственна, подтверждается подходом, который использует Кембриджский экзаменационный синдикат, выделяя на самом высоком (пятом) уровне единую «личностную» компетенцию, вбирающую в себя все остальные компетенции, выделяемые на более низких уровнях.

^ Компетентность как результат образования

Компетентность – непосредственный результат образования, выражающийся в овладении учащимся определенным набором (меню) способов деятельности. Поскольку освоить деятельность (в отличие от действия) через подражание невозможно, учащийся начинает управлять своей деятельностью, используя (интегрируя) различные результаты образования (знания, умения, навыки), формируя собственный ресурсный пакет, необходимый для формирования компетенции.

Если набор осваиваемых способов деятельности социально востребован, является предметом запроса работодателей (и других заказчиков), то он позволяет учащемуся оказываться адекватным типическим ситуациям. Этот набор может быть актуален в течение какого-то времени, а затем будет корректироваться в связи с изменением социально-экономической ситуации.

Деление на компетентности условно, поскольку в реальной деятельности одновременно активны несколько сложных умений, вычленить которые в чистом виде невозможно. Мы не сможем однозначно ответить на вопрос, что является залогом успешной коммуникации: правильно поставленная цель коммуникации, адекватно подобранная информация или корректно примененные техники устранения разрывов в коммуникации. В то же время и педагогам, и администраторам всех уровней нужна некая классификация, позволяющая внутри системы образования четко обозначить результаты образования и работать на их достижение.

Сегодня в Самарской области на основе анализа запросов работодателей выделены шесть ключевых компетентностей1:

  • готовность к разрешению проблем,

  • технологическая компетентность,

  • готовность к самообразованию,

  • готовность к использованию информационных ресурсов,

  • готовность к социальному взаимодействию,

  • коммуникативная компетентность.

При рассмотрении этих компетентностей как результата общего образования представляется возможным укрупнить их и говорить о формировании коммуникативной компетентности (включающей как собственно коммуникативную компетентность, так и готовность к социальному взаимодействию), информационной компетентности (включающей готовность к самообразованию и готовность к использованию информационных ресурсов) и о компетентности решения проблем (включающей готовность к разрешению проблем и технологическую компетентность).

Появление нового результата образования ни в коей мере не предполагает отрицание старых, традиционных результатов, напротив, компетенция рассматривается как некий интегрированный результат (см. рис.), включающий в себя все традиционные результаты образования.

Чем же компетенция отличается от других результатов образования?

Знание – «информация, присвоенная человеком».

Умение – «подготовленность к практическим и теоретическим действиям, выполняемым точно, быстро и сознательно на основе усвоенных знаний и жизненного опыта, которые, совершенствуясь и автоматизируясь, превращаются в навыки».

Навыки – «действия, выполняемые автоматически».

Элементы функциональной грамотности – «присвоенные алгоритмы, позволяющие человеку быть адекватным социальной ситуации».

Компетенция:

  • в отличие от элемента функциональной грамотности позволяет решать целый класс задач,

  • в отличие от навыка – осознана,

  • в отличие от умения – совершенствуется не по пути автоматизации и превращения в навык, а по пути интеграции с другими компетенциями.

  • в отличие от знания существует в форме деятельности (реальной или умственной), а не информации о ней.




Ситуация кардинального изменения приоритетов образования, появление нового результата образования настоятельно требуют создания новой системы оценивания этого результата – способов деятельности (компетентностей), освоенных учащимся на том или ином этапе обучения.

Отслеживая уровень сформированности ключевых компетентностей учащихся в ходе выполнения проекта, мы применяем внутреннюю и внешнюю оценки.

Внутренняя оценка производится на основании оценивания рабочих листов проектной деятельности, наблюдения за презентацией, консультацией и групповой работой. Оценка в процессе работы над проектом осуществляется учителем – руководителем проекта, однако критерии данной оценки известны ученику, и, следовательно, он самостоятельно может отслеживать собственное продвижение в освоении компетентностей. Данная оценка является внутренней, субъективной и не может использоваться для осуществления контроля качества работы по формированию ключевых компетентностей на школьном и региональном уровне, ее преимущества состоят в том, что она оказывает стимулирующее воздействие на каждого ученика, предоставляя информацию о пробелах в овладении им теми или иными аспектами компетентности. Внутренняя оценка иначе называется формирующей.

Внешняя оценка представлена стандартизированным тестом и используется для выяснения уровня освоения ключевых компетентностей учащихся класса, параллели или школы в целом, являясь важным инструментом управленческого воздействия на процесс формирования ключевых компетентностей учащихся. В ряде случаев тесты внешней оценки представляют более точный измерительный инструмент, нежели анализ собственно проектной деятельности учащегося. Ведь если факт получения и высокое качество продукта, созданного в процессе работы над проектом, безусловно свидетельствуют о проявленных учащимся компетентностях, то при невысоком качестве продукта сложно сделать вывод о том, какая именно компетентность или ее аспект сформированы не на должном уровне: учащийся не смог найти необходимую информацию, неверно ее интерпретировал, не достиг договоренности с другими участниками проекта. Необходимо учитывать, что проект как самостоятельная деятельность учащегося делает предельно затратной оценку отдельных способов деятельности в рамках информационной или коммуникативной компетентности, сформированность которых проще и точнее определить с помощью тестового задания.

Наконец, как следует из опыта работы по переходу на компетентностно-ориентированное обучение, формирование компетентностей происходит не только в рамках проектной деятельности, но и в рамках традиционных форм обучения, содержание которого, безусловно, изменяется под влиянием тестов внешней оценки, выявляющих степень сформированности компетентностей учащихся.

Очевидно, что оценка посредством компетентностно-ориентированных тестовых заданий существенно отличается от традиционной оценки результатов образования (знаний, умений…), так как не может осуществляться с помощью заданий закрытого типа, требующих одного верного, предписанного, наконец, выученного ответа. В самом деле, тест на проверку компетентностей, определенных выше как освоенные способы деятельности, не может считаться верным (валидным), если проверяет не деятельность, а некую информацию (пусть и об этой деятельности). Необходимость отслеживания нового результата образования заставляет специалистов обращаться к тестовым заданиям открытого типа, которые названы так потому, что ответ на вопросы этих заданий не может быть спрогнозирован дословно. Ведь выполнение заданий открытого типа требует от учащегося совершения определенной деятельности по поиску необходимой информации, разрешению возникшей проблемы или оформлению результатов ее решения. Такое задание всегда требует развернутого ответа. Используя опыт американских и британских специалистов-тестологов, мы положили в основание классификации тестовых заданий открытого типа характер и длину ответа:

  • вопросы с кратким ответом,

  • вопросы с полуразвернутым структурированным ответом,

  • вопросы с развернутым неструктурированным ответом.

При ответе на первый тип открытого вопроса экзаменуемому требуется дать краткий ответ: завершить незаконченное предложение, расчет или рисунок. Данные вопросы очень близки к заданиям закрытого типа. Их отличает только возможность выразить правильный ответ не слово в слово, а описательно, сохранив тот же смысл, поэтому они также не могут быть использованы при проверке уровня сформированности ключевых компетентностей учащихся. Деятельность учащегося или ее результаты невозможно описать одним словом.

Два же следующих типа открытых заданий – вопросы с полуразвернутым структурированным ответом и вопросы с развернутым неструктурированным ответом – могут быть использованы для оценки ключевых компетентностей учащихся.

Вопрос с полуразвернутым структурированным ответом может быть использован для ответа на тестовые вопросы, в которых учащийся, в соответствии с требованиями к ним, выписывает в бланк ответа причины тех или иных событий, критерии для сравнения предметов или животных, делает краткие выводы по результатам обработки предъявленной информации. В данном типе тестовых вопросов источники и формулировка вопроса задают структуру ответа.

Однако чаще всего при оценке освоенных способов деятельности разработчики тестовых заданий прибегают к третьему типу открытых вопросов – вопросам с развернутым неструктурированным ответом. В ответе экзаменуемый должен написать связный текст, фиксируя результаты обработки предъявленной ему информации, или же дать очень детальный рисунок, или вычисление, каждое из которых может рассматриваться как единое целое. Тестовые вопросы, подразумевающие неструктурированный ответ, позволяют проверить, как ученик подбирает и организует идеи, соответствует ли избранный им стиль изложения и речевое оформление содержанию тестового вопроса.

^ СТАНДАРТИЗАЦИЯ ТЕСТОВЫХ ЗАДАНИЙ: ТРЕБОВАНИЯ К СОДЕРЖАНИЮ

ТЕСТОВЫХ ВОПРОСОВ, ПРОЦЕДУРЕ И КРИТЕРИЯМ ОЦЕНКИ УРОВНЯ

СФОРМИРОВАННОСТИ КЛЮЧЕВЫХ КОМПЕТЕНТНОСТЕЙ УЧАЩИХСЯ

Как уже отмечалось, тесты внешней оценки могут использоваться администрацией школы для контроля за работой педагогов по формированию ключевых компетентностей учащихся, а также организациями, в чью обязанность входит мониторинг / оценка работы всего коллектива школы. С введением необходимых нормативных процедур органы управления образованием, используя тест внешней оценки, смогут сделать выводы о результатах формирования ключевых компетентностей на территориальном и региональном уровнях. Однако результаты тестирования могут сравниваться только в том случае, если проводившийся тест является стандартизированным, то есть приведенным к единому эталону.

Стандартизация тестовых заданий

Понятие «стандартизация теста» включает в себя унификацию трех параметров:

  1. содержания теста,

  2. процедуры и условий проведения тестирования,

  3. способов обработки и интерпретации результатов тестирования.

  • Стандартизация содержания теста производится посредством составления единых требований (спецификации) как к содержанию теста в целом, так и к содержанию каждого вопроса, включаемого в тест. Таблица таких требований, содержащая указание на уровни освоения определенной деятельности, предъявляется разработчикам тестов с тем, чтобы они учли все эти требования при составлении конкретных тестовых вопросов из различных предметных областей. В этом случае на разном предметном содержании тестовый вопрос одного уровня будет проверять освоение одних и тех же компетентностей или их составляющих.

  • Стандартизация процедуры и условий проведения тестирования обеспечивается созданием детальных инструкций для всех лиц, организующих и проводящих тестирование.

  • Стандартизация способов обработки и интерпретации результатов происходит посредством выработки модельных ответов и оценочных шкал для каждого задания и обучения экспертов принципам работы с ними.

Строгое соблюдение всех трех параметров должно привести к созданию равных условий для испытуемых и минимизировать случайные ошибки и погрешности как на этапах разработки тестовых вопросов и проведения теста, так и на этапе обработки результатов и интерпретации данных.

Данный тест, состоящий из восьми тестовых вопросов, создан для проверки уровня сформированности компетентностей – освоенных способов деятельности, которые по определению надпредметны, ведь характер деятельности по первичной обработке информации не меняется в зависимости от того, работает ученик с текстом по литературе, истории или физике. Более того, тексты, предъявленные для обработки, не должны содержать фактический программный материал по предметам, так как в этом случае ребенок обратится к собственным знаниям, а не к источникам информации и тест окажется невалидным, то есть не будет проверять то, что должен проверить: как ученик освоил деятельность по первичной переработке, систематизации и обработке информации. Тест, содержащий вопросы из разных предметных областей, носит межпредметный характер – восемь тестовых вопросов содержат информацию по биологии, литературе, физике, математике, истории, мировой художественной культуре, русскому или иностранному языку и т.д. При этом ни один из тестовых вопросов не проверяет и не должен проверять знания по определенным предметам. Задания внутри тестового вопроса могут включать проверку общеучебных умений и навыков (осуществлять различные расчеты, читать таблицу, график, диаграмму), но только в том случае, если это необходимо для осуществления деятельности, проверяемой тестовым вопросом в целом. Учащемуся в самом тесте предоставлена вся необходимая информация для выполнения данного задания, так как цель теста – проверка уровня овладения аспектами информационной компетентности. В тесте могут встречаться незнакомые понятия, термины, иностранные слова при условии, что все они будут объяснены в тексте источников. Более того, учащийся должен иметь возможность пользоваться словарем или справочником, словом, добывать необходимую информацию в ходе работы с тестовым заданием, а не опираться на ранее полученные знания.

В соответствии со спецификацией данного теста, внешней оценке подлежат аспекты информационной компетентности, проявляющиеся в деятельности учащегося по:

извлечению и первичной систематизации искомой информации,

обработке искомой информации,

а также аспект коммуникативной компетентности (письменная коммуникация), связанный с предъявлением результата обработки информации.

Требования к уровню сформированности аспектов информационной и коммуникативной компетентности представлены в виде таблицы, где по горизонтали дается описание источников информации, с которыми учащиеся работают в ходе теста, кратко характеризуется деятельность по извлечению, первичной систематизации искомой информации и ее обработке2.

Включение в тест внешней оценки именно этих аспектов информационной и коммуникативной компетентностей определяется невозможностью или высокой затратностью проверки данных аспектов непосредственно в ходе выполнения учащимся своего проекта.

Проанализируем таблицу требований (спецификацию) к содержанию тестовых заданий, которая использовалась для разработки модельных тестовых заданий для внешней оценки уровня сформированности ключевых компетентностей учащихся. Основные понятия, используемые в требованиях к содержанию теста, представлены в Приложении 3.

Вертикаль таблицы требований поделена на 4 уровня и 4 подуровня освоения компетентностей, которые условно соотнесены со следующими возрастными категориями учащихся:
  1   2   3   4   5   6   7   8   9   ...   12



Схожі:




База даних захищена авторським правом ©lib.exdat.com
При копіюванні матеріалу обов'язкове зазначення активного посилання відкритою для індексації.
звернутися до адміністрації