Квалиметрия образования и образовательных услуг
-
Введение
Описание методики
Квалиметрия образования
Квалиметрия образовательных услуг
Цели и задачи эксперимента
Результаты эксперимента
Вузы, представленные в рейтинге качества обучения
Выводы
Описание методики
Содержанием методики является проверка соответствия качества образования и образовательных услуг требованиям законов Российской Феде-рации «Об образовании», «О высшем и послевузовском профессиональном образовании», государственных образовательных стандартов и других нормативных документов. Она включает решение двух измерительных задач: квалиметрию образования и квалиметрию образовательных услуг.
Если во время внешней аттестационной экспертизы выясняется, что качество образования по какой-либо образовательной программе не соответствует предъявляемым требованиям, то такая образовательная программа не может быть аттестована. В противном случае решается вопрос о том, на сколько лет может быть аттестована эта образовательная программа? С этой целью измеряется качество образовательных услуг, предоставляемых образовательным учреждением.
Квалиметрия образования
Качество образования измерялось посредством выборочного статистического контроля знаний, умений и навыков студентов старших курсов по аттестуемой образовательной программе. Представительная (репрезентативная) выборка из генеральной совокупности студентов, представленных на аттестацию, формировалась с помощью генератора случайных чисел, программно организованного на компьютере. Предварительно, по согласованию с председателем аттестационной комиссии, из генеральной совокупности исключались студенты, отсутствовавшие по уважительным причинам. В дальнейшем замена студентов, попавших в выборку, не допускалась.
Объем выборки и приемочное число рассчитывались, исходя из требований к качеству образования и качеству решений, принимаемых аттестационной комиссией. В терминах теории выборочного статистического контроля к качеству образования предъявлялись следующие требования:
- приемочный уровень дефектности – 0,1;
- браковочный уровень дефектности – 0,5, что соответствует норме, установленной ч.1 ст.20 закона РФ «Об образовании».
Требования к качеству решений, принимаемых аттестационными комиссия-ми, до 20 декабря 2001 г. формулировались следующим образом:
- условная вероятность ошибки первого рода – 0,1;
- условная вероятность ошибки второго рода – 0,05.
Начиная с 20 декабря 2001 г. Государственная инспекции по аттестации учебных заведений России повысила требования к качеству решений, принимаемых аттестационными комиссиями, установив:
- условную вероятность ошибки первого рода равной 0,01;
- условную вероятность ошибки второго рода равной 0,001.
Измерения проводились экспертами государственных аттестационных комиссий по блокам учебных дисциплин государственных образовательных стандартов на все образовательные программы, проходившие аттестацию. Весовые коэффициенты блоков гуманитарной и социально-экономической подготовки (ГСЭ), математической и естественнонаучной подготовки (ЕН), общепрофессиональной подготовки (ОП) и подготовки по специальным дисциплинам (СД) устанавливались методическими советами и методическими комиссиями вузов по специальностям и направлениям подготовки. Эксперты были свободны в выборе способов формирования своего мнения о знаниях, умениях и навыках студентов, попавших в выборку. Они могли воспользоваться билетами, тестами, ограничиться групповым или индивидуальным собеседованием. Окончательно сформированное мнение они выражали по трехуровневой измерительной шкале порядка следующим образом:
- С – средний уровень;
- В – выше среднего;
- Н – ниже среднего.
Квалиметрическая таблица 1 иллюстрирует результаты измерения качества образования по одной из образовательных программ в вузе гуманитарного профиля. Свертка измерительной информации, представленной в не-числовой форме, по каждому блоку учебных дисциплин осуществлялась по формуле:
где |
– число мнений, обозначенных буквой Н;
– число мнений, обозначенных буквой С;
– общее число мнений, равное количеству студентов в выборке.
Числовое значение показателя качества образования каждого студента, попавшего в выборку, рассчитывалось с учетом весовых коэффициентов, приведенных в таблице:
где |
– весовой коэффициент i–го блока учебных дисциплин, знания,
– число мнений, обозначенных буквой С;
Таблица 1
 |
В квалиметрической таблице, составленной в программной оболочке Excel, результат измерения качества образования каждого студента, попавшего в выборку, получается автоматически на трехуровневой шкале порядка. Решение в отношении его может приниматься по правилам:
- «качество образования должно быть не ниже среднего»; в этом случае
при q ≥ 0,5 студент аттестуется,
при q < 0,5 студент не аттестуется; - «качество образования должно быть выше среднего»; в этом случае
при q > 0,5 студент аттестуется,
при q ≤ 0,5 студент не аттестуется.
Решение в отношении генеральной совокупности - всех студентов старших курсов, обучающихся по этой образовательной программе - принимается по правилу:
- если количество не аттестованных студентов в выборке не превышает приемочного числа Ас, качество образования всех студентов старших курсов, обучающихся по этой образовательной программе, признается удовлетворяющим предъявляемым требованиям, и значение коэффициента вето Vоб или V′об устанавливается равным 1;
- если количество не аттестованных студентов в выборке превышает приемочное число Ас, качество образования всех студентов старших курсов, обучающихся по этой образовательной программе, признается не удовлетворяющим предъявляемым требованиям, и значение коэффициента вето Vоб или V′об устанавливается равным 0.
Результат измерения качества образования по аттестуемой образовательной программе определяется следующим образом:
-
если Vоб = 1, V′об = 1, то качество образования выше среднего уровня;
если Vоб = 1, V′об = 0, то качество образования находится на среднем уровне;
если Vоб = 0, V′об = 0, то качество образования ниже среднего уровня.
