Конечно, будем учиться доказывать, но
будем также учиться догадываться.
Требование оперативного и целенаправленного воздействия на всех субъектов образования подводит к необходимости использования объективной образовательной информации, а контрольно–оценочная деятельность становится одной из важнейших составляющих системы управления качеством образования, охватывающей стандарты, образовательный процесс, инструментарий, технологии и результаты педагогических измерений.
В последнее время обязательными звеньями системы управления качеством образования являются сертификация или стандартизация образовательных услуг и требований к результатам учебной деятельности; внешний контроль, основанный на педагогических измерениях учебных достижений для выявления личностных характеристик обучающихся; оценка результатов обучения на соответствие стандартным показателям или статистическим нормам. Получение объективных оценок результатов учебного труда обеспечивает надежную обратную связь, указывающую на соответствие функционирования системы достижению конечных целей, другими словами, контроль связан с оценкой степени реализации целей. В связи с этим наиболее востребованным и оптимальным в современных условиях становится независимый контроль, основанный на теории и технике педагогического измерения уровня учебных достижений обучающихся [69, 181].
В педагогической теории оценка качества и структуры усвоенного представляется важной составляющей экспертизы развития обучающихся и качества образования в целом, а контроль рассматривается как «средство получения учителем информации о качестве усвоения, продвижении в развитии обучающихся, эффективности применения тех или иных средств. Для учащихся это сигнал об уровне усвоения той или иной темы; для администрации – средство оценки эффективности педагогической деятельности учителей, результат работы школы» [87].
Педагогические основы обучения и связи его с контролем представлены в трудах отечественных ученых: С.И. Архангельского, Ю.К. Бабанского, В.П. Беспалько, В.В. Давыдова, В.В. Краевско–го, Н.В. Кузьминой, И.Я. Лернера, Г.И. Михалевской, Е.И. Перовского, В.М. Полонского, С.И. Руковского, М.Н. Скаткина,
B. П. Стрезикозина, В.Т. Фоменко, В.А. Якунина и других.
Разработке современных средств и методов контроля, позволяющих количественно выразить качество подготовленности школьников, посвящено большое число работ у нас в стране и за рубежом. Из иностранных наиболее известны работы таких авторов, как D. Bateson, A. Binet, A. Birnbaum, B.S. Bloom, K.A. Bollen, C. V. Bunderson, L.J. Cronbach, R.M. Gagne, R.K. Hambleton,
D. K. Inouye, J.P. Keeves, T.L. Kelley, G.G. Kingsbury, F.M. Lord, C. Nikol, J.B. Olsen, G. Rasch, T. Schroeder, T.H. Simon, D.J. Weiss, A.R. Zara, B.D.Wright и др. Основой современной контрольно–оценочной системы у нас в стране стали работы отечественных ученых и практиков: В.С. Аванесова, Т.И. Батуриной, Н.О. Биль–чаевой, В.А. Болотова, М.Б. Гузаирова, С.И. Высоцкой, Н.Ф. Ефремовой, М.И. Зарецкого, В.А. Качалова, Г.С. Ковалевой, Н.А. Кулемина, А.Н. Майорова, В.И. Нардюжева, А.И. Севрука, А.И. Субетто, Г.К. Селевко, А.О. Татура, В.А. Хлебникова, М.Б. Челышковой, В.Д. Шадрикова, С.Е. Шишова, В.А. Шухара–диной, А.Г. Шмелева. Процессы педагогических измерений и шкалирования в этих работах представляются последовательностью действий: выявление и качественное описание предмета измерения (объекта или явления), разработка измерителей и соответствующих им шкал, получение первичных результатов, математико–статис–тическая обработка и преобразование первичных результатов, систематизация окончательных данных и представление их в виде матриц, таблиц и графиков, содержательная интерпретация результатов педагогических измерений.
Функции оценки качества образования (диагностическая, контролирующая, обучающая, развивающая, мотивационно–по–будительная, организационная, стандартизирующая, информационная, социально–экономическая, управляющая и др.) представляют целостную совокупность, способствующую достижению синергетического эффекта в научной организации процесса управления образованием. Связи между компонентами системы оценки качества и обучения создают циркулирующие потоки информации. Действительно, каждая подструктура испытывает на себе управленческие воздействия со стороны других структур, а поэтому в случае неполной реализации связей и функций управление на основе обратной связи может оказаться неэффективным, что неминуемо приведет к снижению качества образования. Определить структуру системы оценки и управления качеством – значит выявить компоненты этой структуры, указать их положение друг относительно друга, установить взаимосвязь компонентов, разработать схемы их взаимодействия, обеспечивающие развитие системы в наиболее перспективных направлениях.
Принципиально новые инновационные возможности в аттестации выпускников школ, педагогических кадров и самих учебных заведений открывает единый государственный экзамен [149, 151]. Основанная на нем государственная аттестация выпускников средней школы призвана обеспечивать:
• единство требований к знаниям выпускников;
• равные возможности получения объективной оценки для всех выпускников;
• высокое качество оценок с позиций теории педагогических измерений;
• доверие к аттестационным результатам выпускников со стороны самих выпускников, их родителей и педагогической общественности школ и вузов;
• возможность использования результатов итоговой аттестации для анализа и мониторинга состояния системы среднего образования на муниципальном, региональном и федеральном уровнях, для аттестации учебных заведений и педагогических кадров;
• создание разветвленной системы мониторинга качества образования;
• обеспечение качественного инструментария и технологий получения, сбора, обработки и обобщения информации о состоянии качества всей системы образования в России.
Перечисленные требования носят целевой характер, но пока не полностью реализуются на практике. Их реализацию затрудняет отсутствие полной ясности в нормативных документах, затрагивающих вопросы аттестации выпускников учебных заведений и оценки качества самого образовательного процесса по учебным достижениям испытуемых. При традиционных методах оценивания объективная, единая и стандартизированная база оценки для различных звеньев системы образования отсутствует, в большинстве случаев оценочный процесс носит спонтанный характер [160]. Это обусловлено целым рядом причин: отсутствием стандартов в общем (полном) образовании и вытекающими отсюда сложностями обучения и создания стандартизированных педагогических измерителей, недостаточным развитием системы независимого тестового контроля и использованием его для подготовки обучающихся к такого рода аттестации, отсутствием данных образовательной статистики, неразработанностью методов анализа и интерпретации статистических результатов тестового контроля, отсутствием культуры тестирования и квалиметрических подходов в педагогической среде, настороженным отношением педагогов к внешнему тестовому контролю и недооценкой его как средства снижения педагогических и психологических нагрузок, слабым использованием возможностей информационного образовательного мониторинга.
Все же оценочный процесс в последнее время все более смещается в сторону объективизации оценок, позволяющей сравнивать показатели разных составляющих системы образования на единой логистической шкале трудности тестовых заданий и уровня подготовленности обучающихся. При этом индивидуальные оценки качества учебных достижений обучающихся дают возможность не только косвенно делать выводы о качестве предоставляемых образовательных услуг и образовательного процесса, преобразованные статистические показатели независимого массового тестирования могут предоставить надежную и объективную информацию о качестве всей образовательной системы и ее подсистем. Правильность, эффективность и согласованность управленческих решений напрямую зависят от качества потоков образовательной информации и объективности оценок качества обучения.
Организационно–содержательные функции системы контроля, сбора и анализа информации о качестве учебных достижений несколько отличаются на различных иерархических уровнях системы управления образованием: федеральном, региональном, муниципальном (город, район, поселок) на уровне образовательного учреждения (школа, лицей, гимназия, колледж или вуз и т.д.) и класса или группы обучающихся, отдельного учащегося или педагога. Однако использование информационных технологий позволяет на различных уровнях управления образованием (государственном, региональном, муниципальном, территориальном, школьном и др.) вести контроль квалиметрическими методами, создавать и накапливать объективную образовательную статистику, осуществлять многофакторный и многомерный содержательно–аналитический анализ усвоения учебного материала, индивидуализировать процесс, вести оперативное и долгосрочное наблюдение за качеством подготовленности обучающихся, повышать результативность различных образовательных систем путем оперативного воздействия на образовательный процесс и условия его осуществления [72].
Управление по принципу обратной связи требует структурирования и укрупнения информации о результатах контрольно–оценочной деятельности, а также объективных оценок, получаемых при внешнем контроле. Основными компонентами современной системы управления качеством образования становятся:
• использование современных технологий контроля в учебном процессе для повышения точности оценивания подготовленности не только выпускников, но и школьников на более ранних ступенях обучения;
• информатизация методов сбора и оперативной обработки метрической информации об уровне учебных достижений учащихся;
• обеспечение квалиметрического подхода к контролю и оцениванию, сопоставимости результатов по различным выборкам учащихся, проведение оперативного анализа данных, использование его результатов в образовательной практике для повышения качества обучения;
• организация разветвленной многоуровневой системы квали–метрического мониторинга качества обучения, позволяющего дифференцировать различные уровни сбора и обобщения информации.
В качестве объектов анализа могут быть выбраны любые массивы: учащиеся, классы, школы, районы, города, регионы и все выпускники регионов, участвующих в проведении ЕГЭ. Для каждой такой выборки используется соответствующий уровень обобщения статистических данных. Оценка качества подготовленности учащихся в той или иной предметной области средствами педагогического тестирования и мониторинга ориентирована на обеспечение большого числа пользователей (учащихся, учителей, родителей, работников управления образованием и др.) постоянным потоком сопоставимой образовательной информации. Однако абсолютные данные не дают полного представления о качестве исследуемого объекта, более информативным является сопоставление показателей исследуемой выборки с нормами или объектами более высокого уровня обобщения результатов (парные или множественные сравнения).
На каждом уровне управления качеством образования необходимо определять достаточное по полноте охвата количество направлений сбора информации о качестве обучения (вложения в образование, учебный процесс, его результаты и т.д.) и устанавливать корректную взаимосвязь между отдельными периодами обучения в рамках мониторинга качества образования. Концеп туальная модель качества в системе управления образованием предлагает циркулирующий характер потоков объективной образовательной информации, позволяющих воздействовать на всех субъектов образовательного процесса (рис. 2). В представленной схеме реализуются два контура информационной связи, которая носит как прямой, так и обратный характер.
Рис. 2. Модель качества в системе управления образованием
На государственном уровне принимаются стратегические решения в области образования и определяются пути и основные технологии реализации основных направлений в образовательной политике в соответствии с потребностями государства и состоянием развития общества. Главной целью государственной политики в области образования являются повышение эффективности деятельности всех подсистем образования, всемерное содействие повышению качества как самих образовательных учреждений, так и оказываемых ими образовательных услуг. Здесь важны два аспекта: качество образования как соответствие образовательным стандартам и качество образования как соответствие запросам личности, доступность образования. Особую значимость представляет обобщенная информация о качестве образования в стране и факторах, существенно влияющих на результаты обучения. Технологии массового тестирования предоставляют интегрированную и дифференцированную образовательную информацию, являющуюся индикатором состояния тех или иных образовательных систем, программ и всего образования в стране. Объективность, валидность и надежность такой информации, сопоставимость результатов по различным массивам обучающихся в этом случае имеют важнейшее значение для определения дальнейшей стратегии образования.
На региональном уровне главными являются цели обеспечения условий работы образовательных учреждений для выполнения государственных задач. Органы управления образованием распределяют финансовые, кадровые, материальные и другие ресурсы по территориям и отдельным образовательным учреждениям, разрабатывают программы и систему оценки качества регионального образования, проводят региональные обследования качества образования и контролируют эффективность обучения, составляют аналитические отчеты об итогах деятельности региональной образовательной системы, собирают информацию об учебных достижениях по территориям и вносят необходимые коррективы в их деятельность, вырабатывают общие нормативы для данного региона. Они контролируют организацию и проведение государственной (итоговой) аттестации выпускников, что позволяет оценить состояние региональной образовательной системы и ее положение на федеральном уровне среди других региональных систем, выявить особенности образования в каждой территории, оценить сильные и слабые стороны образовательного процесса по различным предметным областям, наметить пути развития образовательных систем. В условиях введения ЕГЭ региональная система оценки качества обучения предполагает взаимосвязь всех ее составляющих (рис. 3) [88].
На муниципальном уровне проводится организационная работа по обеспечению эффективной деятельности отдельных образовательных учреждений, осуществляется регулярный контроль за их работой и учебными достижениями, ведется сбор информации о ходе образовательного процесса и качестве знаний, приобретаемых учащимися. Функции организации и контроля здесь приобретают характер текущего сбора и анализа оперативной
Рис. 3. Структура региональной системы оценки качества обучения
информации, принятия адекватных управленческих решений через оценку и анализ качества индивидуальных учебных достижений обучающихся. Органы управления образованием, рассматривая качество, без сомнения, обращают основное внимание на количественные показатели, например такие, как процент выпускников школ, поступивших в высшие учебные заведения, или количество аттестованных выпускников. Требования объективности, обобщения и сравнения данных независимого тестового контроля на этом уровне обусловлены также необходимостью решения кадровых вопросов. В последнее время использование технологий тестового контроля становится одной из форм выявления качества образовательного учреждения при его аттестации. Однако следует иметь в виду, что разовые проверочные процедуры традиционными или тестовыми методами не дают полной информации о состоянии образовательного процесса, в то время как анализ результатов независимого контроля, проводимого периодически за определенный промежуток времени, может выявить общую объективную картину.
На уровне образовательного учреждения непосредственно осуществляется сам учебный процесс. Наибольшей компетенцией в оценке учебных достижений учащихся обладает образовательное учреждение, внутри которого разрабатываются внутренние показатели и критерии качества. К числу таких показателей качества образовательного учреждения относятся программы обучения, учебная литература, лаборатории и оборудование, вычислительная техника, кадровый состав, программы повышения квалификации педагогов, работа методических комиссий и многое другое. Именно объективная информация об учебных достижениях отдельных учащихся и классов, получаемая за счет внешнего контроля, позволяет достигать требуемого качества работы обучающихся и преподавателей, выбирать формы повышения квалификации, решать кадровые вопросы, проблемы методического обеспечения учебного процесса. Именно независимая экспертиза предоставляет учителю информацию не только об уровне подготовленности обучающихся, но и о собственных успехах или упущениях в организации образовательного процесса. Интегральные показатели подготовленности обучающихся и их сравнения с оценками более высоких уровней обобщения позволяют педагогам идентифицировать образовательные программы и образовательный процесс в единой образовательной и контрольно–оценочной среде, определять направления совершенствования методов обучения. Правильность, эффективность, согласованность управленческих решений вышестоящих органов управления образованием на прямую зависят от качества восходящих потоков информации, собираемой начиная со школьного уровня.
Не менее важно, чтобы каждое образовательное учреждение создавало условия для комфортного самочувствия учащихся на всем протяжении их обучения и контроля как одного из факторов повышения качества образования, гарантирующего сохранение психического и физического здоровья. Технологии тестового контроля в значительной степени способствуют решению этих задач.
Отдельные классы в школах создают минимальную образовательную аудиторию, или образовательную единицу, в которой осуществляется учебный процесс. Для эффективной организации учебного процесса постоянно необходима оперативная информация об учебных достижениях каждой образовательной единицы и каждого отдельного субъекта обучения – ученика или студента, уровне и структуре усвоения им учебного материала по конкретным вопросам и темам курса, особенностях его развития. Именно на уровне образовательных единиц создаются условия для обучения, приобретаются и закрепляются обучающимися знания, здесь проверяется уровень учебных достижений и личностного развития. Для этого необходимы контроль качества учебных достижений обучающихся средствами и методами, не зависимыми от общеобразовательного учреждения, создание системы оценки качества педагогического процесса и управления им.
В практике образования важную роль играет контроль качества усвоения учебного материала, а проблема измерения и оценки результатов обучения является одной из самых важных в педагогической теории и практике. Поэтому непрерывно разрабатываются и используются разнообразные, в том числе и наиболее прогрессивные, мобильные, объективные и эффективные, современные информативные средства контроля. Для продуктивной работы класса учителю необходимо периодически проводить аттестацию учащихся, а поэтому контроль является неотъемлемой составляющей образовательного процесса. Для оценки эффективности контрольно–оценочной системы можно предложить три группы взаимосвязанных между собой показателей.
К первой группе относятся показатели внедрения в учебный процесс инновационных методов обучения, прироста образовательных достижений учащихся и квалификации учителей.
Вторую группу составляют показатели, характеризующие увеличение объема информации о качестве учебных достижений школьников, снижение доли педагогического труда на проведение контроля и оценки знаний учащихся, индивидуализированный подход к учащимся.
К третьей группе можно отнести способность контрольно–оценочной системы к адаптации при меняющихся запросах общества к качеству обучения и использованию технических средств для самоконтроля и самоподготовки.
Определение уровня обученности относится к разряду обязательных результатов образовательного процесса, а показателем обученности в основном является отметка, выставляемая учащемуся на итоговой аттестации учителем или группой учителей. При этом уровни учебных достижений задаются в виде оценки, числовая форма которой представляет собой отметку.
В идеале должен определяться уровень усвоения элементов содержания учебной дисциплины в соответствии с требованиями образовательных стандартов к знаниям, умениям и навыкам обучаемых. Объективные, достоверные, теоретически обоснованные измерения и оценки результатов обучения дают информацию о ходе педагогического процесса, учебных достижениях каждого обучаемого, позволяют выявить влияние тех или иных факторов на процесс обучения и его результаты. С помощью различных видов контроля выявляются достоинства и недостатки методов обучения, устанавливаются взаимосвязи между планируемыми и достигнутыми уровнями обучения, оцениваются учебные достижения и выявляются пробелы в знаниях учеников, определяется эффективность методов обучения и совершенствования содержания образования, собирается информация для принятия управленческих решений.
В связи с этим важными являются такие понятия теории педагогических измерений, как число, оценка, балл, шкала. База оценки, как правило, задается нормой, используемой субъектом оценивания (учителем, аттестационной комиссией и др.) и задающей логику индивидуальной отметки испытуемого. Степень совпадения или расхождения оценок и самооценок отражает многие стороны образовательного процесса, позволяет учитывать темп, напряженность, индивидуальное своеобразие (стиль) учебной работы, степень прилежания и усилий, которые прилагает обучаемый, чтобы достичь определенного уровня, а также условия подготовки и квалификацию педагога. Она позволяет опосредованно делать выводы о качестве обучения и образовательной системы, так как в педагогической оценке отражается не только подготовленность обучающегося, но также уровень профессионализма педагога, надежность методов и технологий обучения и оценивания. Получение объективных оценок предоставляет педагогам и работникам управления образованием сведения о соответствии функционирования системы достижению конечных целей и оценки степени реализации целей. Улучшение качества подготовленности выпускников – задачи объективного контроля.
Определение и учет реально достигнутого уровня учебных достижений обучающихся создают оптимальные условия для дальнейшего обучения, предоставляют педагогам возможности варьировать и отбирать учебный материал с учетом актуального развития каждого обучаемого, оценивать качество собственной деятельности относительно среднестатистических показателей качества других образовательных систем. Анализ достоверной и сопоставимой образовательной информации создает реальные возможности для совершенствования и использования наиболее эффективных образовательных программ и технологий обучения, корректировки контролирующих программ, разработки инновационных технологий обучения и развития.
Эффективность контроля в значительной степени зависит от его обоснованности, качества используемых педагогических измерителей, методов и технологий контрольно–оценочных средств и процедур, способов анализа и интерпретации полученной информации всеми субъектами образовательного процесса. Это позволяет выявлять качество подготовленности обучающихся как совокупность существенных характеристик знаний, умений и навыков, способствует дифференциации учащихся с одинаковым уровнем подготовки по уровням учебных достижений. Именно объективный контроль помогает одновременно и учащемуся, и учителю, способствует развитию самостоятельности учащихся, повышает ответственность всех субъектов образования за свою учебную деятельность, так как объективная оценка обеспечивает возможность каждому самоидентифицировать себя во внешней образовательной и контрольно–оценочной среде, наметить план актуальных действий в соответствии с собственной системой ценностей и мотиваций [59, 202].
Недооценка роли контрольно–оценочной деятельности при обучении школьников уже привела к нарушению важного принципа обратной связи в управлении образованием. В результате нарушения этого принципа ограниченность знаний об образовательном процессе и о каждом из его субъектов не позволяет педагогам определять эффективность и особенности обучения, а также степень сформированности и структурированности знаний, необходимых для развития личности. Полученная по результатам оценочной деятельности объективная информация должна анализироваться, интерпретироваться, обобщаться педагогами и служить средством выработки решений, обеспечивающих прирост уровня развития обучающихся на пути их становления, переход в новое качественное состояние.
Обобщение результатов ряда научных и методических работ [44, 187, 203] позволяет говорить о разных подходах при решении вопроса о результатах контроля: в одних случаях их отождествляют с выявлением полноты и глубины знаний, в других на первый план выводятся конкретность и обобщенность знаний, их осознанность или прочность, логичность изложения материала, рациональность способов и приемов решения учебных задач, иногда важным считается соответствие планирумого и достигнутого уровней подготовки. За многие годы в образовательной практике сложилась определенная система педагогического контроля.
Текущий опрос известен каждому педагогу как опрос, проводимый практически на каждом занятии для привлечения внимания учащихся и накопления показателей усвоения учебного материала. При этом индивидуальный опрос – самый простой и распространенный способ контроля [88]. Он не лишен субъективизма, так как преподаватель при оценивании ответа руководствуется своими мерками, а результаты основаны на субъективном оценивании и не являются сопоставимыми даже для одной и той же выборки. Однако такой опрос незаменим в учебном процессе и является своеобразным оперативным индикатором его качества, методом развития коммуникаций и концентрации внимания обучающихся. Он имеет ряд особенностей, делающих его важнейшей составляющей обучения: развивает устную речь (навыки коммуникации), позволяет излагать (конструировать) в свободной форме усвоенный материал, самостоятельно выделять основное содержание изучаемого материала, учащиеся класса при этом имеют возможность прослушать ответ, оценить его правильность и полноту, дополнить. Однако результаты такого опроса не дают полного представления о подготовленности учащегося по ряду причин (субъективизм оценок, отсутствие критериев оценивания, малое число вопросов, краткость ответов в условиях ограниченного времени).
Фронтальный опрос чаще всего используют как контроль степени усвоения небольшого объема материала по разделу или теме. Он позволяет охватить проверкой практически всю аудиторию, выработать у учащихся умение краткого изложения правил, явлений и законов, выделять наиболее существенные особенности темы, вовлечь в работу и активное обсуждение учащихся всего класса. Однако этот вид опроса не дает квалиметрической информации и сопоставимости результатов, имеет ограниченное применение.
Следующим по значимости можно считать комбинированный опрос, который позволяет сочетать устный и письменный контроль. Он позволяет работать одновременно с 5—10 учащимися, удерживая внимание всего класса, используя в том числе и задания на бумажных носителях, особенно эффективен в сочетании с оперативной проверкой и последующим обсуждением результатов в классе.
Обобщающий опрос является одной из форм тематического контроля. Он позволяет показать всю тему во взаимосвязи всех ее составляющих, связывает воедино основные элементы учебного материала, способствует формированию предметных ком–петентностей, вырабатывает навыки обобщения учебного материала, развивает кругозор. Диагностические задания проверки знаний могут расширить задачи преподавателя, упростить процедуру контроля, обеспечить учащимся необходимую практику работы с текстом. Такие опросы могут регулярно использоваться учителем для экспресс–анализа, определения пробелов в подготовке учеников и оперативного их восполнения. Они могут проводиться и письменно в течение 15—20 минут по шести–семи заданиям.
Письменная контрольная работа является способом индивидуальной деятельности учащегося по концентрированному выражения накопленного знания, обеспечивает возможность одновременной работы всем учащимся за фиксированное время по однотипным заданиям, учителю позволяет оценить всех учеников. Этот вид контроля по своей форме очень близок к тестовому, более приемлем как рубежный, предпочтительно использовать тестовые задания с известным уровнем трудности и шкалированием результатов по уровням подготовленности учащихся.
До недавнего времени контроль знаний учащихся, в том числе и итоговых, в основном осуществлялся учителем, ведущим занятия в данном классе. Несмотря на общее признание и широкое использование, традиционная система контроля и оценки качества учебных достижений обучаемых обладает многими существенными недостатками, не совместимыми с современными направлениями модернизации образования и управлением его качеством. Фактически такая форма аттестации учащихся является и способом самоаттестации учителя, недостатки ее достаточно
хорошо известны. К их числу в первую очередь относятся проявление субъективизма оценок педагогов; отсутствие средств объективного контроля, стандартизированных измерителей, единых шкал и критериев оценивания; недостаточное методическое обеспечение самоконтроля, самокоррекции и самооценки результатов учебной деятельности, так как при таком контроле ведущая роль в оценивании результатов принадлежит преподавателю, а не ученику.
Как отдельный вид контроля следует отметить разного рода олимпиады – один из добровольных способов самооценки, который пока не имеет достаточно массового характера, но, безусловно, заслуживает внимания в общей контрольно–оценочной системе, особенно при отборе наиболее способных и подготовленных учащихся для продолжения обучения на более высоком уровне.
С целью воздействия на систему общего (среднего) образования для перенесения центра внимания на ученика требуется создание системы объективного контроля подготовленности школьников в соответствии с требованиями образовательных нормативных документов, необходимы модификация традиционного академического контроля и переосмысление содержания контроля качества знаний для дифференцированного по содержанию и срокам обучения.
В последнее время в обществе появились объективные потребности и условия для введения независимых методов оценки учебных достижений школьников и выпускников общеобразовательных учреждений. С 1996 г. в России по примеру развитых стран (Нидерландов, США, Австралии, Англии, Японии, Дании, Израиля, Канады, Новой Зеландии, Франции) создается система контроля и оценки знаний учащихся педагогическими измерителями. К общепринятым в образовательной практике видам контроля добавляется тестирование, осуществляемое средствами, методами и технологиями, не зависимыми от общеобразовательного учреждения. Влияние субъективного фактора, характерного для устных опросов и контрольных работ, существенно снижается при контроле, базирующемся на теории педагогических измерений. Вместе с тем правильность, эффективность, согласованность внутренних и внешних оценок качества обучения становятся необходимыми в условиях введения ЕГЭ.
Тесты являются наиболее эффективной и объективной формой оценивания знаний, умений и навыков, позволяющей выявлять не только уровень учебных достижений, но и структуру знаний, степень ее отклонения от нормы по профилю ответов учащихся на тестовые задания. Тенденции усиления связи контроля и обучения приводят к переосмыслению роли контрольно–оценочной системы в образовании: контроль, оценка и обучение рассматриваются как взаимосвязанные и взаимопроникающие составляющие единого образовательного процесса. Если задания теста подобраны по нарастанию трудности и достаточно полно отображают планируемую содержательную структуру изучаемого и контролируемого материала, то возможно ранжировать школьников по уровням подготовленности: чем меньше пробелов в ответах ученика на тестовые задания, тем лучше структура его знаний; чем выше его тестовый балл, тем выше качество его подготовленности.
Вместе с тем результаты тестового контроля позволяют оценить и качество работы педагога: если тестовый балл в основном отражает способности и степень прилежания учащегося, то структура знаний в значительной степени характеризует особенности организации учебного процесса (умение преподавателя правильно выстроить программу обучения, доступно ее изложить, использовать приемы индивидуализации обучения и др.). Наиболее быстрыми для проверки и оценивания являются задания с выбором ответа из нескольких предложенных вариантов. Быстро выполнившим задания можно предложить дать более подробное обоснование выбора того или иного ответа. Важно выяснить, почему каждый учащийся выбрал именно этот ответ, в чем он был прав или ошибался, каких знаний ему не хватило для правильного ответа. В процессе такой работы знания учащихся углубляются, исчезает психологическое напряжение при работе с тестом, возникают потребность в добывании знаний, желание пройти следующее тестирование с достижением ожидаемого результата. При периодическом использовании различных видов такого контроля появляется возможность сопоставлять результаты, он может явиться основой динамического мониторинга учебных достижений школьников и индивидуализации обучения.
В условиях личностно ориентированной и развивающей педагогики входное тестирование помогает отказаться от ориентации на среднего обучаемого и ввести элементы индивидуализации в учебный процесс. Входные тесты предназначены для выявления уровня владения базовыми знаниями, необходимыми для усвоения нового материала, построения корректирующей программы педагогических воздействий для наиболее слабых учащихся, для тех, кто еще не готов изучать новый материал. Такие тесты обычно выстраиваются по логике критериально–ориентированного подхода, допускают развернутую содержательную интерпретацию результатов учащихся, позволяющую планировать индивидуальные корректирующие траектории обучения слабых учеников, нацелены на построение образовательных траекторий индивидуального обучения сильных.
Важность входных тестов трудно переоценить. Она подтверждается многочисленными теоретико–методологическими и опытно–экспериментальными исследованиями ученых и педагогов–новаторов, работавших в парадигме концепции развивающего обучения. Неоднократно показано, что обучение направляет и ускоряет развитие ребенка в том случае, если новизна и трудность материала обеспечивают возникновение положительной мотивации обучения [8, 31, 32, 34, 39, 85, 167, 185]. Входное тестирование лучше проводить в начале учебного года силами учителей или независимых центров с использованием итоговых тестов для аттестации предыдущего класса (например, аттестационные тесты 9–го класса для входного тестирования десятиклассников и т. д.). Лучше, если входной контроль проводится по стандартизированным тестам и технологиям, тогда он дает учащимся, родителям и учителям объективные сведения о стартовых показателях подготовленности учащихся, позволяет учителю целенаправленно корректировать программы обучения и образовательный процесс с учетом остаточных знаний как всего класса, так и отдельных школьников. Важно, чтобы тестирование проводилось в одинаковых условиях для всех субъектов образовательной единицы – класса, а в школе – для всех классов одновременно. Процедура тестирования, тестовые материалы, число заданий теста и время работы над ним задаются по нормам, близким к требованиям итогового контроля. При так называемом бланочном тестировании ответы учащимися заносятся в стандартизированный бланк ответов. Проверка может осуществляться вручную или автома–тизированно с выдачей дихотомической матрицы результатов (например, «+» для выполненных и «-» для невыполненных заданий каждого ученика), которая обеспечивает учителей детальной информацией об имеющихся знаниях. Для текущего контроля разрабатываются и используются корректирующие тесты, позволяющие выявить пробелы в изучаемом материале и внести своевременную коррекцию в учебный процесс. В ситуациях, когда затруднения обучаемого по какому–либо разделу учебного материала носят систематический характер, корректирующие тесты дополняются специальными диагностическими тестами.
Обучающее тестирование может широко использоваться учителями с применением авторских тестов наравне с традиционным опросом или при комбинированном опросе, а также при фронтальных экспресс–проверках по отдельным разделам учебных дисциплин для выявления степени усвоения содержания раздела или отдельной темы учебной дисциплины. Такое тестирование выполняет ряд функций: учащемуся дает информацию об уровне усвоения учебного материала и усиливает его мотивацию обучения; учителю предоставляет информацию о структурированности знаний учеников и развивает его навыки использования тестов в образовательной практике; создает более благоприятные и психологически комфортные условия при обучении и контроле.
Диагностическое тестирование предназначено для установления причин неправильного выполнения учащимися заданий корректирующего теста и отслеживания отдельных этапов их выполнения, выявления затруднений учащихся при изучении отдельных тем, разделов или основных положений изучаемой дисциплины. Диагностические тесты могут быть сконструированы учителями с учетом тех целей и задач, которые они ставят в учебном процессе. Повышению эффективности текущего контроля способствуют измерители, предназначенные для выявления пробелов в изучаемом материале и дополняемые специальными диагностическими тестами, позволяющими установить причину неправильного выполнения каждого задания теста. В том случае, если диагностические тесты сопровождаются системными средствами инструментального обеспечения процесса контроля, они превращаются в эффективное средство формирования практических навыков самоконтроля и самокоррекции у учеников. При диагностике центр внимания учителя смещается на обеспечение обратной связи от ученика к учителю. Однако на сегодняшний день в нашей стране практически нет готовых диагностических тестов, что существенно снижает эффективность работы педагога по индивидуализации учебного процесса в условиях массового обучения. Решение вопроса сопряжено с существованием ряда проблем использования педагогических измерений в образовательной практике: заданием предмета измерений, конструированием средств измерений, созданием шкалы и единиц измерения, нахождением нулевой точки отсчета результатов.
Тематическое независимое тестирование открывает новые возможности самоконтроля и может проводиться по заявкам учителей школ силами служб тестирования или региональных диагностических центров. Специально созданные тесты совместно с программно–инструментальными средствами, компьютерной технологией обработки результатов тестирования, научно обоснованными методами шкалирования и оценивания позволяют разгрузить преподавателей и обеспечить субъектов образовательного процесса возможностями самоконтроля. Такие тестовые материалы разрабатываются методистами центров тестирования совместно с учителями на основе имеющегося банка калиброванных по трудности тестовых заданий. За основу берутся тестовые задания по контролируемой теме. К таким контрольно–оценочным материалам предъявляются менее жесткие требования по точности измерений, чем для итоговой аттестации, а основной акцент делается на реализацию обучающей и развивающей функций контроля. Совместная работа учеников и педагогов по анализу результатов внешнего тестирования создает благоприятные условия для сотрудничества. Более того, тематическое тестирование в большей степени необходимо учителю для диагностики усвоения учащимися достаточно большого объема учебного материала, анализа собственной деятельности и корректировки своих квалиметрических навыков. При тематическом тестировании основные нормы, требования и технологии аттестационного тестирования должны максимально соблюдаться, так как использование одной и той же технологии способствует адаптации учащихся к контролю. Многократное применение одних и тех же технологий тестирования на всех этапах обучения помогает учащимся приобретать опыт для прохождения ЕГЭ.
Еще одной из форм подготовки учащихся к итоговой аттестации является репетиционное тестирование по стандартизированным тестам и технологиям. Оно, как правило, проводится по сигнальным образцам тестов текущего года, предоставляемым Центром тестирования в феврале—марте каждого года. Это необходимо для того, чтобы учащиеся смогли ознакомиться с уровнем трудности заданий, структурой тестов, особенностями используемых тестовых форм, объемом контролируемого содержания, освоили методику предъявления ответов на задания теста, получили навык работы при отсутствии учителя–предметника и др.
Итоговые тесты занимают особое место в контрольно–оценочных системах, потому что результаты итогового тестирования используются для принятия определенных управленческих решений, связанных с выставлением итоговых баллов, аттестацией либо с переводом учащихся на очередную ступень обучения. Целью итогового тестирования является оценка результатов учебной деятельности после освоения всей программы курса, когда устанавливается соответствие между уровнем учебных достижений и требованиями образовательных стандартов. Такое тестирование проводится стандартизированными тестами и процедурами, обладающими необходимыми свойствами педагогических измерителей: обоснованностью, объективностью и сопоставимостью результатов по единой шкале оценок. Обоснованность достигается репрезентативным отображением требований стандартов в содержании тестов за счет включения достаточно большого числа заданий. Объективность обусловлена одинаковыми условиями контроля для всех учащихся (одинаковые по содержанию и уровню трудности тесты; одинаковые время проведения и время работы; дистанцированность контроля от учителя–предметника; единые методы обработки бланков ответов, шкалирования и оценивания результатов). В таких условиях тестовые баллы всех участников обладают одними и теми же свойствами, а следовательно, сопоставимостью, являющейся одним из существенных преимуществ тестового контроля.
Введение технологий массового тестирования выводит обучающегося в открытое образовательное и контрольно–оценочное пространство. Тестирование по своей природе не может быть направлено против интересов личности, поскольку способствует объективности оценки результатов обучения, помогает ликвидировать обнаруженные пробелы в знаниях. Оно позволяет не только получить объективную информацию о качестве знаний и умений учащихся, но и определить наиболее слабо усвоенные разделы, темы, отдельные вопросы и своевременно скорректировать процесс обучения. При внешнем тестовом контроле каждый испытуемый получает дихотомический ряд, обозначающий выполненные и невыполненные задания теста по широкому спектру вопросов и предоставляющий возможность самим учащимся обнаружить пробелы в своих знаниях и принять меры для их устранения, анализировать свои ошибки и, исходя из индивидуальных ценностно–смысловых установок, самостоятельно определять для себя пути, способы и интенсивность самоподготовки. Тестирование создает условия для более гибкого обучения, отвечающего интересам каждой личности, и в то же время оно способно задать единый уровень требования для всех обучающихся.
С каждым годом все большее число учащихся самостоятельно определяют для себя различные формы и методы подготовки (подготовительные курсы, самоподготовку по методическим материалам вузовского и аттестационного тестирования, участие в пробных тестированиях, олимпиадах и др.).
Изменение контрольно–оценочной системы в общем образовании обусловливает изменение механизма взаимодействия и взаимосвязи субъектов образовательного процесса внутри школы, отношения учителя и ученика. Тестирование создает условия для сотрудничества, более гибкого обучения, отвечающего интересам каждой личности, и в то же время оно способно задать единый уровень требований для всех обучающихся и педагогов. Однако во многих случаях, как показывает опыт, наблюдается противоречие между стремлением школьников проверить свою подготовленность методами независимого тестирования и нежеланием учителей вместе с учащимися подвергать себя аттестации.
Вместе с тем практика показывает, что, используя тестирование, учителя также довольно быстро обнаруживают привлекательные для них особенности такого контроля и в большинстве своем становятся сторонниками этого направления. Так как структура всех вариантов теста одинакова (стандартизированна), то проверка может проводиться с выставлением «+» и «-» за выполненное и невыполненное задания. По результатам тестирования (входного, тематического, итогового, репетиционного и др.) строится матрица учебных достижений класса, по дихотомическим таблицам учитель получает детальную картину усвоения материала каждым учащимся. Если по результатам тестирования по всем темам регулярно вести учет выполненных и невыполненных заданий для каждого учащегося, создается достаточно наглядная картина учебных достижений и пробелов каждого ученика и класса в целом. Учитель может отслеживать как индивидуальную структуру знаний учащихся, так и собственные упущения. Построенная таким образом система тестирования способствует дифференцированному подходу к учащимся и эффективной организации коррекционных воздействий со стороны педагога в повседневном учебном процессе. Это обеспечивает индивидуализацию учебного процесса для каждого учащегося и оперативную корректировку программы обучения, а во время итоговой аттестации высвобождает время для итоговых отчетов и другой работы.
Важно, что тестовые технологии коренным образом изменяют роль учителя: от передачи знаний и проведения контроля он должен переходить к сотрудничеству с учащимися в педагогическом процессе и совместному прохождению итогового контроля. В этом случае учитель выступает консультантом и помощником в подготовке к аттестации, соучастником в прохождении внешнего тестирования. Учитель из контролера превращается в помощника, а ученик из пассивного потребителя информации превращается в самообучающегося субъекта, так как для учителя и ученика появляются одинаковые цели – успешно пройти итоговую аттестацию (в том числе единый государственный экзамен). Традиционная формула обучения учитель – учебник – ученик заменяется на новую: ученик – учитель – учебник – тестовый контроль – самоподготовка, в центр внимания учителя ставится личность ученика. Именно технологии сотрудничества в обучении и контроле позволяют обеспечить совершенствование всего учебного процесса.
Сравнение данных независимого тестирования с оценками учителей в большинстве случаев показывает, что сильные учащиеся, как правило, подтверждают свою репутацию, а слабые не справляются с заданиями. Однако количественные показатели тестирования и обычного оценивания чаще всего расходятся, результаты тестирования в большинсте случаев хуже оценок, выставляемых учителями. Вместе с тем не всегда деятельность учителя можно связывать с результатами одноразовых тестирований или олимпиад. Безусловно, некоторая зависимость здесь всегда имеется, но напрямую эти показатели не связаны, так как в подготовленности школьников значимое место занимает обучение на ранних этапах. Только при долговременном и периодическом использовании тестового контроля, последовательном накоплении и анализе результатов массового независимого тестирования можно получить объективную картину, сложившуюся в образовании и квалификации кадров. Объективной оценкой деятельности учителя может быть, например, приращение показателей учебных достижений учащихся при неоднократных последовательных тестированиях, основанных на строгих оценках педагогических измерений.
Среди принятых в зарубежной практике образования подходов к оценке качества учебных достижений наиболее перспективным является динамический. Оценка качества учебных достижений при таком подходе строится на выявлении тех изменений в подготовке обучаемых, которые идентифицируются как улучшение знаний и умений. Для этого необходимо прежде всего систематически отслеживать изменения в подготовке обучающихся. Реализация такого подхода невозможна без осуществления эффективного мониторинга учебных достижений. При этом глубинный смысл тестового контроля заключается не в одноразовых процедурах тестирования и получении индивидуальной оценки обучающимся, а в создании целостной системы обучения, развития и контроля, мониторинга и анализа качества образования, основанных на объективных результатах независимого контроля.
Важным является и тот факт, что именно тестовый контроль, проводимый независимо от тех, кто обучает школьников, рассматривается как научно обоснованная система внешних контрольно–оценочных процедур, обеспечивающих объективность результатов, выявление, измерение и оценку основных характеристик как обучающихся, так и факторов, обеспечивающих образовательный процесс. В этом случае открываются возможности на основе обобщения индивидуальных данных тестирования перейти к оценкам образовательных систем. Именно статистические методы анализа результатов массового тестирования дают возможность от оценок учащихся перейти к оценкам самой образовательной системы или подсистемы, оценивать ее состояние относительно нормы (например, среднестатистических показателей уровня учебных достижений всех школьников страны), зафиксировать адекватные состояния всей образовательной системы и ее подсистем на момент измерения. Массовое стандартизированное тестирование становится неотъемлемой составляющей образовательного процесса и управления его качеством, методом развития обучающихся в процессе обучения и контроля, фактором внешнего воздействия на образовательные системы.
Тестирование в настоящее время становится органической частью современного образовательного процесса, важнейшим средством установления обратной связи, благодаря которому обучение в полном смысле слова превращается в дифференцированный, личностно ориентированный процесс, обеспечивающий индивидуальный темп обучения, устранение субъективизма и авторитаризма в оценке уровня учебных достижений учащихся, средством объективизации экспертизы качества образовательного процесса и его индивидуализации.
Одним из положительных моментов использования тестового контроля является снятие конфликтных ситуаций в школе в результате устранения причин для неудовлетворенности оценочным процессом. Учащиеся с завышенной самооценкой, получая по результатам тестирования балл ниже ожидаемого (в одинаковых для всех тестируемых условиях), убеждаются в своей недостаточной подготовке, а учителя с субъективным отношением к ученику обнаруживают неточности в оценивании; независимое массовое тестирование разрешает конфликтные ситуации в обоих направлениях. То же самое можно сказать и о конфликтах учитель – родитель, учитель – администратор и администратор—управленец. Таким образом, при тестировании меняются не только средства и методы контроля, меняется весь процесс аттестации, в том числе и психологическая ситуация, меняются мотивация, готовность к деятельности и появляется индивидуально–личностный подход. А это значит, что сама концепция оценки качества образования начинает претерпевать заметные изменения: впредь она будет затрагивать не только учащихся и их достижения, но также образовательные учреждения, преподавателей и всю систему образования в целом.
Различные формы массового независимого тестирования имеют еще одно дидактическое преимущество по сравнению с другими способами контроля знаний и умений учащихся: для тестов установлены жесткие требования обязательной проверки качества как самих тестовых заданий, так и методики расчета результатов тестирования. К качеству итоговых тестов и достоверности получаемой с их помощью информации предъявляются высокие требования, объясняемые важностью принимаемых с их помощью решений. Основная цель итогового тестирования – обеспечение объективной оценки результатов обучения по завершении некоторого курса. В этой связи итоговые тесты должны разрабатываться с участием профессионалов–тестологов для стандартизации и тщательного обоснования качества тестов.
Само понятие «оценка» по отношению к итоговым результатам имеет два основных смысла, которые определяются целью создания теста и зависят от характера интерпретации результатов его выполнения. В одном случае оценка ориентирована на характеристику степени усвоения содержания курса (критериально–ориентированный подход), в другом – на дифференциацию обучаемых по результатам выполнения теста (нормативно–ориентированный подход при отборе абитуриентов для продолжения обучения). Каждый из этих видов тестов может иметь гомогенный (один предмет) или гетерогенный (межпредметный) характер в зависимости от количества измеряемых переменных, находящих соответствующее отражение в содержании заданий теста. Гетерогенные тесты, в свою очередь, делятся на полидисциплинарные и междистциплинарные, требующие многомерного шкалирования при оценивании результатов учащихся [197].
Результаты независимого тестирования могут учитываться при корректировке учебной деятельности и использоваться ровно настолько, чтобы помочь учащимся и учителям подготовиться к итоговой аттестации. Накопление данных внешнего независимого тестирования позволяет образовательному учреждению не только подготовить школьников к ЕГЭ, но и пройти аттестацию образовательного учреждения (когнитивной составляющей) по результатам динамического мониторинга. Органами управления образованием паспорта самоаттестации школ могут быть учтены при аттестации общеобразовательных учреждений [60].
Сообразно видам контроля выстраивается и типология тестов [197]. В соответствии с характером решаемых задач используются тот или иной вид тестов, вид контроля и метод интерпретации результатов контроля (рис. 4).
Рис. 4. Классификационная схема педагогических тестов
Один из новых видов измерителей, ориентированных на современный интегративный подход к оценке качества обучения с позиций прогнозирования дальнейших жизненных успехов учащихся, – компетентностные тесты [208]. Оценка уровня компетентности, распадающейся на спектр отдельных компетенций, достаточно сложна. В образовании компетенции представляют собой многоплановые и многоструктурные характеристики качества подготовленности обучающихся, которые вряд ли могут быть в полной мере стандартизованы. Они не поддаются опера–ционализации и измерениям. Трудность здесь видится в том, что компетентность нельзя трактовать как сумму предметных знаний и умений. Это приобретаемое в результате обучения новое качество, увязывающее знания и умения со спектром интегральных характеристик личности, в том числе и способностью находить решения в нестандартных ситуациях и применять полученные знания и умения в решении межпредметных практических задач. В этой связи возникает задача создания межпредметных (комплексных) тестов, требующих при оценке результатов учеников использования методов многомерного шкалирования и специальных методов интеграции оценок отдельных характеристик учащихся.
Периодически проводимое в течение учебного года независимое тестирование является наиболее эффективным, экономичным и информативным способом и инструментом, позволяющим одновременно решать ряд задач:
• позволяет учащимся проверить свои знания по широкому спектру вопросов и освоить технологии итоговой аттестации методами независимого тестирования или ЕГЭ;
• обеспечивает всем школьникам равные условия при контроле учебных достижений;
• исключает субъективизм в оценивании результатов;
• ставит учителя в позицию не контролера, а соучастника проверки;
• помогает учителю совершенствовать свои квалиметрические действия;
• облегчает труд учителя; предоставляет объективную статистически и графически оформленную образовательную информацию для составления отчетной документации;
• обеспечивает сопоставимость результатов нескольких классов или образовательных учреждений;
• органам управления образованием предоставляет объективную интегральную картину состояния образовательных систем.
В том случае, если тесты сопровождаются соответствующими системными средствами инструментального обеспечения процесса контроля, они превращаются в эффективное средство формирования практических навыков самоконтроля и самокоррекции у учеников и закладывают основу эффективной организации внут–ришкольной контрольно–оценочной системы. Системное проведение различных видов тестирования расширяет возможности практической реализации методов личностно ориентированного обучения, основанного на дифференциации уровней подготовленности школьников и информационной доступности результатов тестирования, в том числе и среднестатистических, сравнение с которыми обеспечивает условия самоанализа и самооценки, в результате чего у школьников складывается ценностно–смысловое отношение к полученному знанию, осуществляется интерпретация информации на индивидуально–личностном уровне, формируются общеучебные компетенции и развиваются способности универсально использовать и применять полученные знания и навыки, происходят латентные процессы изменений в самокоррекции, самовыражении и целеполагании.
Подчеркнем, что перечисленные выше формы тестового контроля не являются исчерпывающими, не должны в учебном процессе полностью заменять традиционные формы опроса, их виды и объемы должны органически дополнять традиционный контроль. Тестирование не отменяет и не заменяет педагогический опыт и индивидуальный вклад каждого педагога, а лишь помогает преподавателям эффективно организовать систематический, многоступенчатый контрольно–оценочный процесс и обеспечить таким путем условия для повышения качества контроля и образования. Разумное сочетание традиционного контроля и тестирования является одним из факторов активизации познавательной деятельности учеников и накопления данных для мониторинговых исследований качества образовательного процесса.
Однако, несмотря на развивающуюся практику массового тестирования, оно еще не стало необходимой составляющей образовательного процесса, а полное отсутствие курсов и спецкурсов по этому направлению приводит к тому, что педагогические вузы продолжают выпускать учителей, не готовых включаться в инновационный контрольно–оценочный процесс и активно участвовать в разработке, создании и использовании педагогических измерителей. Вместе с тем сегодня учителя получают возможность проверить свои квалиметрические подходы к оцениванию знаний и выработать объективные критерии оценки как собственной деятельности, так и знаний учащихся. Педагогический анализ результатов тестового контроля дает объективную образовательную информацию как ученику, так и учителю, работникам управления образованием и родителям.
Пока новые формы, методы и технологии массового тестирования только начинают входить в структуру сложившегося традиционного контроля знаний учащихся. Как часто, по каким объемам материала, на каких этапах, какими методами и видами тестирования следует пользоваться школе для оптимального контроля знаний учащихся и определения рейтингового места обучающегося и общеобразовательного учреждения в системе образования определяется той пользой, которую получат:
• обучающиеся – стимулирование интереса к учебе, обеспечение условий для самоподготовки, самоконтроля и самоаттестации;
• учителя – корректировка образовательного процесса и совершенствование собственных квалиметрических навыков при оценивании знаний школьников;
• руководители общеобразовательных учреждений и органов управления образованием – принятие объективных управленческих решений;
• родители, получающие информацию об учебных достижениях своих детей и определяющие пути их дальнейшего развития.
Общий подход: тестирование должно задавать единый стандарт требований к подготовке школьников на всем образовательном пространстве школы, конкретной территории, региона и страны. Однако оно не должно мешать основному учебному процессу, творчеству и новаторству учителя, деятельности основных звеньев образовательной системы [69].
На внешнем и внутреннем уровне функционирования контрольно–оценочной системы в качестве обобщенных критериев ее эффективности могут выступать:
• производительность, оцениваемая как объем полученной в процессе контроля информации о подготовленности обучаемых, количество проведенных контрольных испытаний, количество контролируемых учащихся и т. д.;
• экономичность, оцениваемая путем соотнесения затрат на функционирование контрольно–оценочной системы с конечными результатами;
• адаптивность, оцениваемая как способность содействовать приобретению знаний;
• дидактичность, понимаемая как способность системы выполнять обучающую функцию педагогического контроля, поддерживая режим обучения;
• оперативность принятия управленческих решений и выполнения корректирующей деятельности по результатам контроля в процессе обучения;
• надежность, оцениваемая как устойчивость и точность оценок [76, 77].
В последнее время для формирования успешной личности и прогнозирования ее развития усиливается необходимость оценивания не только знаний, умений и навыков, но и ряда других характеристик: креативности, степени личностного развития и сформированности различных компетенций, опыта практической и творческой деятельности, осуществления эмоционально–ценностных отношений, потенциальных способностей и профессиональной предрасположенности. Однако многие из перечисленных характеристик невозможно измерить и оценить по ряду причин: нет пока надежных измерителей даже для выявления знаний, тем более креативности, компетенций, потенциальных возможностей, навыков творчества и других способностей. Недостаточно развиты компьютерные технологии в контрольно–оценочной деятельности, не разработаны показатели и критерии оценки уровня развития личности, для оценивания свойств личности не разработаны формы и методы их выявления, основанные на сочетании количественных и качественных показателей контроля, не создана оптимальная структура накопления оценок, их анализа и интерпретации, не имеется достаточного числа подготовленных кадров для такой деятельности.
Тестовый контроль в последнее время занимает центральное место во всех школьных контрольно–оценочных системах, являющихся, в свою очередь, составляющими системы оценки качества. Вместе с тем для всей системы образования в целом наиболее важны контроль и оценка качества обучения в целях аттестации выпускников и отбора абитуриентов для профессиональных учебных заведений, оценки качества образовательного процесса и образовательных систем, а традиционные методы контроля для этого непригодны, так как они нацелены исключительно на получение качественных эквивалентов оцениваемых свойств учащихся. На практике педагоги, оценивая результат учебной деятельности обучающихся с помощью порядковой (качественной) пятибалльной шкалы, в большинстве случаев дают оценки, существенно различающиеся не только в разных образовательных учреждениях, но даже у учителей одной и той же школы [157].
Как показали исследования объективности оценивания у нас и за рубежом, разброс отметок в различных ситуациях за один и тот же ответ может быть от «2» до «5» [101]. Это естественно, так как при традиционных методах оценивания неизменно присутствует субъективный фактор. Хотя, без сомнения, в любом контрольно–оценочном процессе всегда присутствуют отдельные элементы педагогических измерений при оценке знаний учащихся. Однако такие оценки не являются сопоставимыми, их свойства различаются и не могут быть приведены к одной и той же шкале. Вместе с тем, чтобы при оценке качества и эффективности образовательных систем на всех иерархических уровнях управления образованием использовались результаты одного и того же свойства, определение качества образования должно базироваться на анализе статистических результатов, задаваемых в терминах измеряемых параметров: уровень трудности тестовых заданий и уровень учебных достижений, приведенных к одной и той же шкале оценок. Таким образом, квалитативизация оценивания качеств личности в первую очередь идет по когнитивной составляющей – уровню учебных достижений как объекту педагогических измерений, так как при всем многообразии показателей качеств личности наиболее значимыми по–прежнему остаются качество усвоенных знаний, развитие определенных навыков и приобретение требуемых умений на каждой стадии обучения, т.е. когнитивно–практический компонент образования.
Предполагается, что именно квалиметрический подход, базирующийся на концептуальных положениях теории педагогических измерений, массовости и независимости процедур тестирования, методах математической статистики и педагогического интерпретационного анализа, может обеспечить строгость, четкость и упорядоченность сведений о подготовленности и степени развития обучающихся. Расширяющиеся объемы независимого тестирования школьников и выпускников включают все большее число субъектов образования в новую контрольно–оценочную деятельность, создаются условия для контроля качества образования по определенным показателям, актуализируется проблема повышения эффективности использования материалов, технологий и результатов тестирования.
Направления более полного использования результатов педагогического тестирования связываются не только с необходимостью оценивания качества образования, но и с возможностью выявления характеристик личностного развития обучающихся, качества образовательного процесса и образовательных систем. Педагогическое тестирование, измеряя когнитивный компонент образования в количественных показателях, позволяет в какой то мере сравнивать и сопоставлять различных субъектов образования по отдельным качественным параметрам, оценивать некоторые характеристики обучающихся, такие, как гибкость мышления, упорство, собранность, целеустремленность, усидчивость, мобилизация на достижение результата, развитие компетенций, навыки самоорганизации, самоподготовки и целеполагания при обучении и аттестации.
Квалиметрический подход к контролю, в отличие от традиционного, позволяет извлекать максимум информации из количественных оценок и качественно оценивать состояние исследуемых объектов. Только использование научно обоснованных и взаимосвязанных методов и технологий обучения, контроля и информационного образовательного мониторинга может обеспечить достижение требуемого качества в образовании.
Важным является тот факт, что каждый более высокий уровень обобщения данных последовательно вбирает в себя результаты нижних уровней, обеспечивая для любой выборки испытуемых статистические характеристики одного и того же свойства (сроки проведения контроля, материалы и процедуры тестирования, методы шкалирования и оценивания). Возможность сравнения с данными генеральной выборки (всего массива испытуемых) в условиях массового тестирования позволяет всем субъектам образования выявлять реальные достижения собственной деятельности, оценивать их относительно других образовательных систем как по вертикали (учащийся, класс, школа, территория, регион, страна), так и по горизонтали в однотипном ряду (на уровне школьников, классов, общеобразовательных учреждений одного типа и т.д.). Системность и независимость различных видов обучающего и аттестационного тестирования создают условия для практической реализации принципов личностно ориентированного и развивающего образования на основе получения объективных оценок, дифференциации уровней подготовленности школьников и индивидуализации обучения. Именно статистические методы анализа результатов массового тестирования дают возможность от индивидуальных отметок учащихся перейти к оценкам самой образовательной системы или подсистемы, оценить ее состояние относительно статистических норм, зафиксировать адекватные состояния всей образовательной системы и ее отдельных подсистем на момент измерения.
Одним из методов, позволяющих получать объективную образовательную информацию, в последнее время является тестовый контроль. Структурные элементы такой системы оценки качества обучения представляют собой совокупность взаимодействующих объектов различной природы, обладающих явно выраженным системным свойством – ориентацией на измерения и измеримость. Осноганный на теории педагогических измерений тестовый контроль позволяет путем многофакторного и многомерного анализа статистических результатов учебных достижений выявить отражение качества процесса в качестве результата, дать количественные показатели качества результатов учебного труда не только обучающихся, но других субъектов образования (педагоги, управленцы и др.). Логика оценки при этом задается на основе использования математических моделей конструирования педагогических измерителей и использования методов статистической обработки результатов.
В последние годы массовое тестирование входит в систему российского образования как современная, самостоятельно функционирующая социально–педагогическая система, которую можно рассматривать как одну из ведущих технологий получения объективной и сопоставимой информации о качестве подготовленности выпускников и школьников для независимой экспертизы качества образования на всей территории страны. Такую систему можно отнести к деятельностной, представляющей собой «…совокупность объектов, взаимодействие которых способствует появлению новых интегральных качеств, не свойственных образующим эту систему частям и компонентам» [168]. Единство целого ряда взаимосвязанных структурно–функциональных компонентов этой системы, от разработки тестовых материалов до подготовки статистического отчета по результатам массового тестирования делает эту систему контроля всеобъемлющей, общедоступной и востребованной многочисленными категориями пользователей.
Деятельностный характер системы тестирования обусловлен активным взаимодействием как составляющих ее компонентов (разработчики тестов, ученые и педагоги, информационные службы, филиалы и представительства), так и спектром пользователей (учащиеся, родители, педагоги, руководители образовательных учреждений и др.). Современные информационные технологии позволяют в значительной степени автоматизировать контрольно–оценочные процедуры и проводить тестирование одновременно на всей территории страны. Новым качеством является массовый характер тестирования, обеспечивающий единство требований к уровню подготовленности учащихся и сопоставимость результатов одинакового свойства по любым выборкам испытуемых.
Высокая результативность и динамичность развития федеральной системы тестирования во многом определяются современными потребностями общества, стремящегося перейти в режим открытого образования в целом и открытости образовательной системы в сфере оценки качества учебных достижений. В свою очередь, потребность массового тестирования в качественной тестовой продукции стимулирует развитие тестологии, техники и технологии разработки новых педагогических измерителей. Интенсивно используются информационные технологии для обеспечения контрольно–оценочных процедур, развиваются коммуникационные связи, совершенствуется система управления качеством образования. Происходит изменение и внедрение в образовательную практику новых взаимодействий ученик – учитель, ученик – родитель, учитель – родитель, учитель – администратор, образовательное учреждение – орган управления образованием.
Независимое тестирование и единый государственный экзамен становятся важнейшими составляющими контрольно–оценочной системы, выполняющими в роли ведущей функцию экспертизы качества образования. При этом системообразующими и активно влияющими на образовательный процесс являются следующие факторы:
• проектировочный, ориентирующий на научно обоснованную формулировку целей деятельности системы, ее функций, конкретизацию ожидаемых результатов и сроков достижения цели, достижимости поставленных целей, определение величины затрачиваемых средств и времени;
• коммуникативный, включающий все иерархические уровни управления образовательной системой, стиль субъектно–объектных и субъектно–субъектных взаимоотношений;
• содержательно–организационный, стандартизирующий содержание, организацию, технологии и процедуры тестирования, задающий единство требований к качеству подготовки;
• аналитико–результативный, включающий способы получения, накопления, обобщения и анализа результатов, методы педагогической интерпретации, технику и технологию оформления и представления результатов, подведения итогов тестирования и обучения.
Как всякая система, независимое тестирование имеет свою организационную структуру, деятельность которой управляется и координируется центральным органом. Последний играет доминирующую роль в функционировании всей системы и имеет свои соподчиненные подсистемы, в том числе на этапе проведения ЕГЭ. Взаимосвязи целей, контрольно–оценочных средств и субъектов тестирования схематично приведены на рис. 5.
К перечисленным выше факторам необходимо добавить теоретико–концептуальный. Деятельность системы массового тестирования во многом обеспечивается уровнем развития всех его компонентов, точностью и научной обоснованностью концептуального аппарата. В процессе развития системы происходит непрерывное укрепление научно–теоретической и материально–технической базы, разрабатывается теория педагогических измерений и мониторинга, совершенствуются педагогические контрольно–измерительные материалы, техника и технология тестирования, подготовка обучающихся, методы обработки статистических данных, формы и способы их представления для пользователей, в контрольно–оценочный процесс включается все большее число общеобразовательных учреждений страны.
Рис. 5. Элементы стандартизированного тестирования
Эффективность функционирования и возможность развития этой системы во многом обусловливаются как раз степенью ее открытости и масштабами взаимодействия с российской социально–образовательной средой. Она включает в образовательный процесс не только образовательные учреждения, педагогов и обучающихся, но и всю общественность – родителей, прессу, органы управления и др. Система тестирования обладает высоким потенциалом саморазвития и самосовершенствования.
На рис. 6 отражены основные взаимосвязи между компонентами системы тестирования.
Условно в этой схеме можно выделить три основных организационно–функциональных модуля:
1. Научно–методический модуль, обеспечивающий идеологию конструирования контрольно–измерительных материалов и технологий независимого массового тестирования, разработку необходимых материалов и инструкций, формирование банка тестовых заданий и банка тестов, отбор и издание образцов тестов для широкого использования их учителями и учащимися при обучении и самоподготовке, подготовку и переподготовку тесто–логов и тестотехников, проведение научных конференций.
2. Сеть представительств или региональных центров оценки качества образования, обеспечивающих проведение и анализ результатов тестирования учащихся на всей территории России, способствующих распространению научно–методической культуры тестирования по всей стране.
Рис. 6. Организационно–функциональная схема федеральной системы тестирования
3. Информационно–аналитический модуль, обеспечивающий разработку и совершенствование современных технологий обработки и передачи информации, осуществляющий автоматизированную проверку материалов тестирования, подготовку оперативной и итоговой информации по результатам тестирования (StatInfo и другая статистическая отчетность), создающий основы для функционирования многоуровневого квалиметрического мониторинга в общем образовании.
Как открытая система, взаимодействующая с большим числом общеобразовательных учреждений, вузов и административных органов управления образованием, система тестирования осуществляет постоянный обмен образовательной информацией между другими системами разного уровня. Для обеспечения учащимся одинаковых условий при итоговой аттестации тестирование (аттестационное и абитуриентское) по всей стране проводится по принципу «один день – один экзамен».
Организационно и методически при такой форме итоговой аттестации достигается наибольшая формализация структуры тестовых материалов и процедур тестирования, проверки и обработки результатов, расчета и представления тестовых баллов. Завершается такая аттестация выдачей сертификатов (свидетельств) общероссийского образца и шкалы перевода тестовых баллов в школьную оценку.
Опыт проведения тестирования, в том числе и ЕГЭ, выявил его востребованность, стремительное развитие, динамизм, способность к включению в свою деятельность новых субъектов, расширение спектра образовательных услуг, способность к совершенствованию и развитию научно–теоретической базы.
Разумеется, независимое тестирование выявило ряд общих проблем как в системе образования, так и в системе итоговой аттестации. К ним относятся подготовка и переподготовка кадров, пересмотр приоритетов в содержании итоговой аттестации, развитие научной школы по проблемам педагогических измерений, изменение правил приема в вузы и ссузы, совершенствование контрольно–оценочных материалов и процедур. В целом перед Россией стоит проблема создания общенациональной системы оценки качества образования [57, 27].
В последнее время в практике диагностики качества общего образования получают распространение такие технологии, как тестирование, диагностика, экспертиза, мониторинг и педагогическая квалиметрия, ставящие целью объективизацию оценок [8, 9]. Становится все более очевидным, что только объективная, всеохватывающая, научно разработанная диагностика усвоенных, преобразованных и практически ориентированных знаний может не только стать индикатором качества подготовленности обучающихся, но и существовать как объективный показатель преимуществ или недостатков той или иной педагогической системы [3].
В этой связи современный тестовый контроль рассматривается как система контрольных измерительных материалов, процедур тестирования, технологий проверки и оценивания результатов учебной деятельности субъектов образовательного процесса. При целенаправленном подборе заданий, соответствующих по своим характеристикам зоне ближайшего развития обучаемого, творческое развитие обучающихся становится доминирующим, самоценным, способствуя активизации познавательной деятельности обучающихся и реализации ряда функций контроля: диагностической, контрольно–оценочной, обучающей, развивающей, мотивационно–побудительной, воспитательной, организационной, стандартизирующей, информационной, управленческой, демократизирующей, социально–экономической, гуманистической.
Диагностическая функция вытекает непосредственно из самой сути любого контроля, но при тестовом она проявляется еще и в том, что он задает требования к получению валидной информации о качестве знаний, умений и навыков, психологических качествах обучаемых; способствует дифференциации обучаемых по уровню подготовки, отделению знания от незнания, выявлению различных видов знаний: предлагаемых, приобретаемых, проверяемых, применяемых, устойчивых и забываемых; обеспечивает широкое использование образовательного мониторинга (педагогического и психологического) для оценки качества образования и возможности содержательного анализа усвоения всего учебного материала и отдельных тем; позволяет проводить экспертизу состояния образования на основе сопоставимости данных образовательной статистики. Благодаря содержательному анализу усвоения учебного материала педагогическая диагностика получает новый инструментарий для выявления индивидуальных затруднений, их причин и направлений корректировок образовательной деятельности учащихся и учителей.
Контрольно–оценочная функция обеспечивает подведение итогов обучения путем осуществления промежуточного или итогового контроля в форме тестов и позволяет количественно измерить показатели учебных достижений аттестуемых. Систематическое применение текущего контроля в образовательной практике приводит к позитивным тенденциям в развитии личности обучающегося, способствуя закреплению установок на самообразование и самоактуализацию. На современном уровне развития тестовых и компьютерных технологий целью текущего контроля становится не принуждение к обучению со стороны педагога, а самосовершенствование, характерное для развивающего обучения, в процессе которого активизируются развивающая и обучающая функции контроля.
Обучающая функция реализуется при проведении различных видов обучающего тестирования для освоения школьниками как учебного материала, так и технологии массового независимого тестирования, использовании заданий в тестовой форме для самоаттестации и самоподготовки; при использовании тестов проявляется взаимосвязь контролирующей и обучающей функций контроля, что в полной мере отвечает современным мировым тенденциям в переосмыслении роли контроля в образовании, когда контроль, оценка и обучение рассматриваются как взаимопроникающие составляющие единого образовательного процесса.
Развивающая функция проявляется в воздействии на испытуемого результатов тестирования при выявлении несовпадающих и правильных ответов на задания теста, развитии памяти, приобретении навыков применения знаний на практике, стремлении улучшить результат и приобрести более устойчивые знания к следующему тестированию, получении опыта подготовки ответа и переноса знаний из других образовательных областей. Формированию этих качеств способствуют и традиционные средства контроля. Однако развивающая функция внутришкольного контроля реализуется лишь при определенных условиях, когда в процессе контроля и самоконтроля у обучающихся возникает потребность в познавательной деятельности, самосовершенствовании и получении опыта творческой деятельности при выполнении учебных заданий. Существенным признаком, обусловливающим доминирование обучающей и развивающей функций тестового контроля, является оптимизация трудности контролирующих заданий применительно к уровню и качеству подготовленности каждого обучающегося.
Мотивационно–побудительная функция проявляется через воздействие тестирования на всех субъектов образовательного процесса. Во–первых, на учащихся: формирование уверенности в объективности оценок и возможности достижения более высоких результатов; повышение учебной мотивации и желания получить более высокий результат; создание атмосферы состязательности и повышение ответственности за результаты учебного труда; ориентация на сотрудничество с педагогом; самоорганизация и самоподготовка. Во–вторых, на учителей: повышение ответственности за результаты образовательной деятельности; совершенствование образовательных программ и использование дополнительной учебной литературы; создание более комфортных условий при обучении и психологической разгрузки при разборе результатов контроля.
Воспитательная функция тестового контроля обусловливает усиление интереса к знаниям, выработку усидчивости и способности работать систематически, приобретение навыков самоконтроля, самооценки и самокоррекции, появление потребности сотрудничать с учителем. Эта функция играет важную роль в формировании мотивационной основы деятельности обучающегося.
Организационная функция выражается в способности тестирования обеспечивать условия самостоятельной работы, самообучения, самоконтроля, индивидуализации обучения на основе разработки и использования новых образовательных технологий, изменение структуры учебного процесса и формы контроля.
Стандартизирующая функция проявляется в обеспечении одинаковых требований к уровню базовой подготовленности учащихся различных образовательных учреждений, что особенно важно при итоговой аттестации выпускников и отборе абитуриентов.
Информационная функция обусловлена широким распространением и развитием образовательных технологий, созданием открытого федерального банка образовательной статистики и формированием системы многоуровневого квалиметрического мониторинга качества образования, возможностью получения статистических норм качества учебных достижений и рейтинга образовательных учреждений по уровню достигнутого качества, доступностью интегральной образовательной информации широкому кругу пользователей.
Демократизирующая функция обеспечивает одинаковые условия прохождения аттестации для всех учащихся, добровольность участия в различных видах тестирования, право на ошибку, вариативность выбора учащимся форм аттестации.
Управленческая функция связана с получением и анализом квалиметрически выверенных результатов учебных достижений учащихся и обеспечением условий для принятия обоснованных решений на основе объективной и достоверной образовательной информации.
Социально–экономическая функция обеспечивает сокращение расходов и времени на проведение итоговых контрольно–оценочных процедур, предоставляет выпускникам возможности поступления в вузы без выезда из дому, с меньшими материальными затратами, частично решает вопросы трудоустройства определенной части педагогических кадров.
Гуманистическая функция проявляется в том, что тестовые технологии создают психологически более комфортные условия при контроле, обеспечивая сохранение здоровья в первую очередь на итоговой аттестации и вступительных испытаниях за счет снижения психологических нагрузок не только учащихся, но и учителей.
Реализация перечисленных выше функций зависит от форм и методов подготовки обучающихся к тестированию, а также от принципов его организации и проведения: научности, эффективности, объективности, валидности и надежности, системности использования в образовательной практике как отражения педагогической адекватности в единстве обучения и контроля.
Некоторые из этих принципов должны быть заложены уже при конструировании тестов как педагогических измерителей. Так, принцип научности как один из важнейших отражает обоснование критериев оценивания подготовленности учащихся за счет использования предварительно апробированных контрольно–оценочных материалов и процедур, повышения надежности и точности педагогического инструментария, достоверности оценок и их устойчивости. Чем качественнее тест, тем меньше ошибка измерения, точнее количественная оценка уровня учебных достижений и ее приближение к латентной характеристике испытуемого – подготовленности. Надежность средства измерения напрямую зависит от его валидности – пригодности измерять то, для чего данный тест создан. Если этот принцип нарушен, то полученные результаты не будут отражать истинного состояния исследуемого объекта, а их анализ может дать ошибочные выводы. Принципы систематичности и эффективности в какой–то степени противоречат друг другу, но их сочетание позволяет достичь обеспечения объективности оценок при минимальных затратах средств, времени и психологических усилий учащихся и педагогов. Наконец, педагогическая адекватность оценок тестового контроля достигается путем выбора из всех элементов контролируемого знания наиболее укрупненных, важных, наиболее полно охватывающих требования стандартов и репрезентативно отражающих содержание подготовки. Этот далеко не полный набор принципов тестового контроля достаточно четко указывает на то, что повышение качества обучения неразрывно связано с совершенствованием систем контроля и созданием условий более тесного сотрудничества учащихся и педагогов в образовательном процессе.
Вопросы обеспечения планируемого качества образования требуют использования современных подходов в деятельности общеобразовательной школы, введения образовательных стандартов, пересмотра организационно–технологических подходов к контролю. Несмотря на то что практически во всех регионах страны существуют аттестационно–диагностические центры, осуществляющие разработку средств для проверки качества знаний школьников и аттестации общеобразовательных учреждений, эти структуры, как правило, не имеют достаточного научно–методического и материально–технического обеспечения для объективного контроля и проведения научно обоснованных мониторинговых исследований. Работа этих организаций не координируется, отсутствует механизм обеспечения качества их работы (сертификации) в соответствии с современными требованиями, не ведется целенаправленная работа по освоению культуры тестового контроля. Как следствие при таких методах нет сопоставимости результатов контроля не только по стране или региону, но даже по одной и той же территории.
Одним из направлений развития современной педагогики становится технологический подход к обучению, контролю и оцениванию результатов учебной деятельности учащихся. Научно–педагогическое и методическое осмысление такого понятия, как «образовательная технология» обусловлено отражением использования новых возможностей информационных методов в образовании. В связи с потребностью повышения качества образования и широким использованием современной компьютерной техники и информационных технологий в учебном процессе идет разработки и внедрение новых технологий обучения и самообразования, а также форм контроля и самоконтроля. Постепенно в нашей стране создаются условия для выведения отдельных видов контрольно–оценочной деятельности за пределы образовательного учреждения.
В последнее время важнейшим требованием системного оценивания качества подготовленности обучающихся является ориентация не на использование отдельных элементов и процедур контроля, а на планомерное развитие национальной системы тестирования, отвечающей условиям организации и функционирования мониторинга качества образовательного процесса и образовательных систем, на основе использования объективной и сопоставимой образовательной информации в масштабах страны, регионов, муниципалитетов и др.
Этому способствуют:
• последовательное создание и развитие новых организационных структур по проведению тестирования, служб разработки, конструирования и параметризации педагогического измерительного инструментария;
• совершенствование техники и технологии сбора образовательной информации и методов статистической обработки результатов тестирования;
• активизация научной, научно–методической и учебной работы по развитию всех звеньев тестовых технологий.
Формирующаяся федеральная система массового тестирования создает новые возможности оценки и контроля, обеспечивая связующее и регулирующее звено между общеобразовательными и высшими учебными заведениями, задавая единые требования к содержанию и уровню подготовленности выпускников общеобразовательных учреждений и вступительных испытаний.
Задачами системы независимого тестирования являются:
• обеспечение объективности аттестации обучающихся и образовательных учреждений;
• повышение эффективности обучения и оценивания уровня подготовленности обучающихся, обеспечение доступности профессионального образования;
• разработка научно обоснованных контрольно–измерительных материалов, процедур, показателей и критериев оценок;
• стандартизация процедур тестирования, обработки, шкалирования, оценивания и представления результатов;
• подготовка кадров по вопросам тестирования путем создания специальной системы повышения квалификации;
• обеспечение преемственности требований в системе непрерывного общего и профессионального образования;
• мониторинг качества образования в стране и ее отдельных территориях;
• получение ценной информации об овладении школьниками и выпускниками содержанием учебного предмета, т.е. основными знаниями и умениями, отраженными в обязательном минимуме содержания и требованиях к уровню подготовки на разных стадиях обучения;
• корректировка образовательных стандартов, оценка реалистичности требований к уровню подготовки выпускников средней школы, обеспечение возможности измерения их достижений, создание условий для самоконтроля;
• совершенствование образовательного процесса и учебно–методического обеспечения предметных курсов.
В зависимости от поставленных целей и задач контроля могут быть использованы различные организационно–технологические формы тестирования – от массовых и наиболее высоких по качеству используемых контрольно–измерительных материалов до самого упрощенного контроля в отдельном классе по небольшой теме на основе авторских тестов, не подкрепленных статистическими характеристиками. Современные службы независимого тестирования представляют собой социально–педагогическую систему, обладающую такими характеристиками, как целостность, автономия, совместимость с другими образовательными системами любого уровня, стабильность, способность к адаптации и саморазвитию. Наиболее развитая система такого контроля – это система тестирования на стадии входа–выхода из общеобразовательной школы в высшую. Составляющими федеральной системы стандартизированного тестирования являются единый государственный экзамен, централизованное тестирование, компьютеризированные олимпиады, различные виды аттестационного тестирования. По технологическому обеспечению различают бланочный и компьютерный методы проведения тестирования.
ЕГЭ в образовании относится к высоким информационным технологиям, обеспечивающим внешний независимый итоговый контроль подготовленности выпускников, объективизацию оценок и возможность многофакторного анализа результатов по различным уровням их обобщения. С 2001 по 2005 г. проводился широкомасштабный эксперимент по введению единого государственного экзамена как формы итоговой аттестации учащихся общеобразовательных учреждений и одновременно вступительных испытаний для продолжения учебы на более высокой ступени. В 2006—2008 гг. планируется его поэтапное введение на всей территории страны. Но уже сегодня ЕГЭ – многоплановая структура, использующая большой кадровый потенциал различных специалистов для подготовки контрольно–измерительных материалов, организации и проведения единого экзамена, проверки ответов, шкалирования и оценивания результатов, их анализа и интерпретации, использования объективной образовательной информации для различных целей. Вместе с тем ЕГЭ – это сложный контрольно–оценочный процесс, который, развиваясь сам, инициирует развитие образовательных систем на федеральном, региональном и территориальном уровнях, обеспечивает ориентиры и динамизм процессу совершенствования всей системы образования, задавая единый уровень требований к содержанию образования на всей территории страны, предоставляя возможность участвовать в конкурсе в различные вузы страны, не выезжая из дому, позволяя в перспективе перейти к информационным технологиям аттестации выпускников.
Одной из составляющих нового контрольно–оценочного процесса является федеральная база свидетельств (ФБС) о результатах ЕГЭ, предназначенная для хранения всей информации о выданных свидетельствах ЕГЭ и подтверждения участия или неучастия абитуриента в ЕГЭ в текущем году. ФБС обеспечивает пользователям возможность проверки данных свидетельств ЕГЭ и информации о зачисленных абитуриентах в государственные образовательные учреждения профессионального образования. Пользователями ФБС являются федеральные министерства и ведомства, органы управления образованием субъектов Российской Федерации, региональные центры обработки информации ЕГЭ, вузы и ссузы, засчитывающие результаты ЕГЭ в качестве результатов вступительных испытаний. В последнее время новая система аттестации выпускников и ФБС становятся информационной основой для управления качеством обучения. Контрольно–оценочный процесс становится все более открытым, информационная система единого конкурсного приема (ЕКП) позволяет в режиме реального времени следить за тем, как происходит зачисление абитуриентов в тот или иной вуз. В полном смысле ЕГЭ – это пример вхождения системы образования в информационную эпоху развития общества.
В условиях введения ЕГЭ как у учащихся, так и у образовательных учреждений растет потребность в сравнении уровня своих учебных достижений с каким–либо объективным показателем. В итоговых отчетах массового тестирования движение образовательной информации идет от индивидуальных результатов испытуемых к достижениям всей системы образования и обратно, налицо процесс циркуляции образовательной информации и широкие возможности для анализа достижений всех субъектов образовательного процесса по различным показателям. Для анализа достижений каждой исследуемой выборки используется соответствующий уровень обобщения статистических данных. При этом весь массив испытуемых составляет так называемую генеральную выборку, а ее среднестатистические показатели (при репрезентативной выборке) служат статистической нормой для сравнения показателей любых других локальных выборок, позволяя оценивать достижения не только каждого отдельного учащегося по отдельным предметным областям, но и класса, школы, района, города, проводить сравнительный, дидактический или динамический анализ качества обучения.
Статистическая обработка результатов позволяет от количественных оценок когнитивной составляющей образования перейти к качественным оценкам личности, образовательного процесса и образовательной системы. А поэтому важно учитывать, что чем больше массив испытуемых, тем более сложные и важные решения принимаются по результатам контроля, тем выше должен быть уровень валидности педагогических измерений, так как из полученных результатов и возможной их интерпретации могут быть сделаны правильные или ложные выводы для принятия управленческих решений. Поэтому особенно остро встают вопросы обеспечения точности и надежности результатов для адекватного отражения качества учебной деятельности образовательных систем в качестве результатов учебных достижений выпускников.
Одним из важнейших требований становится обеспечение информационной безопасности материалов и результатов ЕГЭ на всех многочисленных этапах их движения от центра тестирования к выпускникам в аудитории и обратно. В основе ЕГЭ на первом этапе его проведения лежали только технологии бланочного тестирования с автоматизированной обработкой результатов – базовая технология. По этой технологии выпускники на экзамене получают тест–пакеты на бумажных носителях: экзаменационное задание – контрольный измерительный материал (КИМ) или тест, бланк регистрации, бланк ответов на тестовые задания и бланк для конструирования свободного ответа, черновик. КИМ может состоять из нескольких частей: «А» – тестовые задания закрытой формы или с выбором ответа из числа предложенных; «В» – задания, требующие свободного ответа; «С» – задания–эссе или со свободным конструированием развернутого ответа и др. Бланк регистрации содержит информацию о выпускнике, бланки ответов не содержат никакой информации об участнике и с бланком регистрации могут быть соединены только по штрихкодам в процессе автоматизированной обработки, что обеспечивает информационную безопасность такого контроля. Бланки «С» распечатываются в двух экземплярах с автоматическим проставлением индивидуальных номеров и сливанием одного и того же варианта в протокол проверки одному эксперту–предметнику без указания каких–либо данных об учащемся. Группируя схожие по выполнению работы в одну ведомость, система позволяет отслеживать нарушения информационного режима в пунктах проведения экзамена. По результатам анализа образовательной статистики можно выявить, в каких пунктах проведения экзамена могли быть нарушения. Федеральная образовательная статистика как показатель нормы и информационная база мониторинга итоговых отметок по классам позволяют получать средний тестовый балл по пункту, школе, классу, сравнивать оценки школы и ЕГЭ.
Получают развитие и другие модификации проведения ЕГЭ: автоматизированная информационная система (АИС) «Экзамен»; компьютерная система «Гуманитарные технологии». По технологии АИС «Экзамен» контрольно–измерительные материалы, как и при бланочной технологии, доставляются на бумажных носителях в пункты проведения ЕГЭ, а все необходимые бланки и инструкции распечатываются скоростными принтерами непосредственно в аудитории после рассаживания школьников. Комплекс средств автоматизации (КСА) при этой технологии опирается на базу данных. В режиме реального времени КСА позволяет проводить распределение организаторов по аудиториям и рассадку выпускников с выдачей варианта. В соответствии с номером рабочего места и вариантом контрольной работы распечатываются именные бланки ответов на задания «А—В» и «С», ведомость входа и рассаживания выпускников, ведомость экзамена, инструкции для участников и организаторов ЕГЭ, сопроводительные листы для оформления актов проведения экзамена и др.
Достоинство этой технологии заключается в том, что в аудитории могут отсутствовать преподаватели, все материалы и инструкции распечатываются и комплектуются на месте операторами, программа позволяет выпускнику самому отправить свой бланк на сканирование и провести распознавание его изображения, сверку регистрационных данных (верификацию) изображения бланка и меток ответов. В таком случае выпускник полностью уверен, что вся информация верна, запрос в конфликтную комиссию становится излишним. Однако для работы по этой технологии требуется достаточно много техники и хорошо подготовленных операторов, в каждой аудитории необходим комплект: компьютер, сканер, принтер.
Компьютерная программа «Гуманитарные технологии» требует проведения экзамена в компьютерных классах и рассадки выпускников по принципу: «один компьютер – один ученик». Допускается проведение множества сеансов, поэтому не все учащиеся тестируются в одно и то же время. Для выравнивания условий ЕГЭ контрольные работы, формируемые компьютером, приближены к бланочным тестам. Тест формируется компьютером индивидуально для каждого выпускника с сохранением структуры, содержания и возможных вариантов ответа, так же как и при базовой технологии. При входе в аудиторию учащемуся выдается только бланк «С» с номером варианта и штрихкодом. Набрав на компьютере свои Ф.И.О., он получает на экране всю область регистрации, которую может сверить, а если надо, исправить. После сверки области регистрации школьник вводит номер варианта и получает возможность приступить к выполнению работы. Время работы с тестом фиксируется, на экране последовательно появляются задания «А—В», которые можно все просмотреть и выполнять в любой последовательности. Допускается изменение метки предполагаемого ответа, но количество и последовательность замен фиксируются машиной. Пока не выполнены и не закрыты задания «А—В», машина не выдает выпускнику задания «С». После окончания работы с заданиями «А—В» компьютер выдает полную информацию бланка ответов и регистрации (возможно их распечатывание), выпускник самостоятельно верифицирует (проверяет правильность сканирования и распознавания) свою работу и подтверждает правильность данных. После этого машина сразу дает файлы данных регистрации и бланков ответов «А—В» в базу, которая в режиме реального времени передается на проверку. По окончании выполнения заданий «А—В» выпускнику выдаются задания «С». Он выполняет их на стандартизированном бланке со штрихкодами и дальше обрабатывает по базовой бланочной технологии с дальнейшей проверкой экспертами.
После того как эксперты проставят оценки ответов «С», протоколы экспертной проверки сканируются и передаются в Федеральный центр тестирования, где информация автоматически вводится в компьютер; результаты выполнения заданий «А», «В» и «С» объединяются и подсчитываются баллы для каждого учащегося. Результаты сохраняются в сводной общероссийской базе данных.
Таким образом, несмотря на некоторые различия, во всех модификациях технологий проведения ЕГЭ используется принцип тестирования при помощи стандартизированных КИМ, не лишенных недостатков. Одна из проблем стандартизированного тестирования заключается в том, что для его проведения требуется очень большое число вариантов тестов. Так, к примеру, по математике в 2004 г. было создано около 500 вариантов – более чем по сотне на каждый временной пояс. При всем желании разработчиков их выравнять они не равнозначны между собой по уровням трудности, более того, порой для территорий с разными временными поясами они различаются не только по уровням трудности, но и по структуре, что очень осложняет возможности мониторинга качества обучения в масштабах страны. Другая проблема стандартизированных КИМ заключается в том, что одинаковые тесты выполняют школьники с разным уровнем подготовленности, а это значит, что сильные выпускники, выполняя задания низкого уровня трудности, не могут в полной мере показать свои знания, а слабые школьники, не выполняя задания высокого уровня трудности, тоже не могут в полной мере раскрыть свои возможности. Таким образом, эффективность использования стандартизированного теста и надежность измерения при таком тестировании оставляют желать лучшего.
Более совершенной моделью педагогических измерений было бы проведение экзамена по компьютерным технологиям в режиме адаптивного тестирования [194]. Особенностью компьютеризированных форм контроля является использование адаптивного тестирования, при котором процесс формирования тестов и обработка результатов осуществляются автоматически, повышаются точность и надежность измерений, информационная защищенность, появляется возможность проведения многих сеансов на одном и том же оборудовании в течение некоторого временного интервала. Точность измерения уровня подготовленности испытуемого увеличивается за счет того, что компьютер сам методом случайной выборки подбирает тестовые задания непосредственно перед предъявлением их на экран монитора, так сказать, по ходу тестирования. Основной принцип его заключается в том, что измерение уровня подготовленности происходит тем точнее, чем большее число тестовых заданий соответствующего уровня трудности выполняет испытуемый. Компьютерная программа адаптирует, приспосабливает уровень трудности заданий к уровню подготовленности испытуемого, позволяет слабо подготовленным учащимся решать больше легких заданий, сильным – больше трудных (т.е. каждый участник работает с большим числом заданий такого уровня трудности, который соответствует его уровню подготовленности). Это позволяет более точно определить качество знаний и более тонко дифференцировать отметки на единой логистической шкале в зависимости от того, кто и какие по трудности задания выполнял. Благодаря большому числу заданий определенной трудности, предлагаемых при компьютерном тестировании, тесты оказываются достаточно надежным измерительным инструментом педагогического контроля.
Компьютерные технологии информационно защищены значительно надежнее, чем бланочные. В таких технологиях учитывается и фактор времени, и задания–ловушки, позволяющие отследить возможное вмешательство. Кроме того, у организаторов нет и не может быть теста в распечатанном виде. По истечении среднего времени на выполнение задания машина убирает задание и дает следующее, вернуться назад можно только на одно–два задания за фиксированное время. При наличии надежного банка калиброванных тестовых заданий в перспективе в школах возможен переход на адаптивные технологии и в процессе обучения. В информационном обществе именно такие технологии со временем станут преобладающими. В будущем предусматривается интенсифицировать и расширить возможности компьютерного адаптивного тестирования как одного из основных методов информационной технологии самоподготовки, самоконтроля и оценки учебных достижений обучающихся в XXI в.
1. В чем суть многоуровневого подхода к управлению качеством обучения?
2. Перечислите виды контрольно–оценочной деятельности.
3. Каковы отличительные особенности традиционного и тестового контроля?
4. В чем проявляется квалиметрический характер контроля?
5. Перечислите основные функции тестового контроля.
6. Какие из функций контроля совпадают при опросе и тестировании?
7. Какие функции контроля присущи только тестированию?
8. Какие функции контроля присущи только традиционному контролю?
9. В чем заключается особенность компьютерного адаптивного тестирования?