Школьные показатели по обеспечению объективности процедур оценки качества образования

Обновлено: 02.07.2024

Показатели, методы сбора информации

Показатели, используемые в муниципальной системе объективности процедур оценки качества и олимпиад школьников:

1) объективность оценки образовательных результатов в образовательных организациях:

количество оценочных процедур, в которых для данной ОО обнаружены признаки необъективности результатов (внешний индекс необъективности ОО)

процентная доля медалистов, которые получили результаты ЕГЭ существенно ниже, чем требуемые для подтверждения медали (индекс неподтверждения медалистов)

2) объективность проведения оценочных процедур и олимпиад школьников:

процентная доля участников этой оценочной процедуры, находящихся в зоне риска за счет того, что в их ОО обнаружены признаки необъективности результатов (индекс необъективности оценочной процедуры)

процентная доля участников каждой олимпиады, не подтвердивших свой результат в ЕГЭ (индекс необъективности олимпиады)

Источники данных, используемые для сбора информации в системе объективности процедур оценки качества и олимпиад школьников:

федеральная информационная система обеспечения проведения ГИА обучающихся, освоивших основные образовательные программы основного общего и среднего общего образования, и приема граждан в образовательные организации для получения среднего профессионального и высшего образования

региональная информационная система обеспечения проведения государственной итоговой аттестации обучающихся, освоивших основные образовательные программы основного общего и среднего общего образования

федеральная информационная система оценки качества образования (ФИС ОКО) (база результатов Всероссийских проверочных работ, база результатов Национальных исследований качества образования, база результатов общероссийской и региональной оценки по модели PISAбаза результатов международных сопоставительных исследований в сфере образования (PIRLS, TIMMS, PISA и др.), полученных от Федерального координатора)

автоматизированная система регионального мониторинга индивидуальных учебных достижений на уровне начального общего, основного общего и среднего общего образования

автоматизированная система регионального мониторинга индивидуальных учебных достижений обучающихся с ОВЗ по адаптированным основным общеобразовательным программам

база олимпиад школьников

открытые статистические данные, система региональной статистики, опрос ОО (контекстные данные образовательных организаций, муниципальных районов и городских округов Воронежской области)

Мониторинг

Мониторинг состояния муниципальной системы объективности процедур оценки качества и олимпиад направлен на получение информации об уровне объективности процедур оценки качества и олимпиад школьников по показателям:

1) объективность оценки образовательных результатов в образовательных организациях:

2) объективность проведения оценочных процедур и олимпиад школьников:

Анализ, адресные рекомендации

Адресные рекомендации направляются следующим субъектам образовательного процесса:

родителям (законным представителям)

педагогам образовательных организаций

образовательной организации (руководителям, заместителям руководителя)

Меры, управленческие решения

Комплекс мер, направленный на совершенствование муниципальной системы объективности процедур оценки качества и олимпиад на территории:

проведение мероприятий по обеспечению единых подходов к оценке образовательных результатов оценочных процедур оценки качества образования и олимпиад школьников

проведение мероприятий по анализу результатов оценочных процедур на предмет объективности

проведение мероприятий по формированию позитивного отношения к объективной оценке образовательных результатов

Управленческие решения, направленные на совершенствование муниципальной системы объективности процедур оценки качества и олимпиад на территории:

привлечение к дисциплинарной/административной ответственности лиц, допустивших нарушения при проведении оценочных процедур

Целью школьной системы оценки качества образования (далее - ШСОКО) является получение и распространение субъектами ШСОКО достоверной объективной информации о состоянии и результатах образовательной деятельности, тенденциях изменения качества общего образования, причинах, влияющих на его уровень, для формирования информационной основы при принятии управленческих решений.

ШСОКО в Нижнетуринском городском округе направлена на:

1) развитие системы муниципальных исследований качества общего образования (включая региональный и федеральный сегмент), позволяющий оценивать качество образования на уровнях общего образования, включая сбор контекстных данных;

2) создание (пополнение) фонда оценочных средств, для проведения процедур контроля и оценки общего образования на муниципальном уровне;

3) функционирование системы мониторинга оценки качества общего образования на муниципальном уровне;

4) формирование механизмов привлечения общественности к оценке качества общего образования на муниципальном уровне;

5) обеспечение единства и соотнесенности между собой (в соответствии с полномочиями) региональной, муниципальной и институциональных систем оценки качества общего образования (включая дошкольное, в том числе образование детей с ограниченными возможностями здоровья);

6) достижение обучающимися планируемых метапредметных и предметных результатов освоения основной образовательной программы начального общего, основного общего и среднего общего образования;

7) оценку результатов обучающихся по адаптированным основным общеобразовательным программам;

8) формирование функциональной грамотности, повышение уровня образовательных результатов в Нижнетуринском городском округе на основе анализа национальных исследований качества образования и международных сопоставительных исследований в сфере образования;

9) повышение качества образовательных результатов, отражающего региональные особенности (специфику) Свердловской области.

Основными задачами ШСОКО являются:

1) определение перечня критериев оценки качества образования с учетом социально-экономических особенностей Нижнетуринского городского округа;

2) осуществление оценки качества образования и образовательных достижений обучающихся по уровням общего образования, включая общественную и педагогическую экспертизу;

3) оценка результативности педагогической и управленческой деятельности в системе образования Нижнетуринского городского округа для повышения эффективности управления на основе системного (сравнительного) анализа;

4) формирование экспертного сообщества, участвующего в различных формах профессиональной и независимой оценки качества образования;

5) информационное, методическое и технологическое сопровождение процедур оценки качества образования;

6) информирование населения Нижнетуринского городского округа о качестве образования;

7) развитие системы повышения квалификации педагогических и руководящих работников системы образования Нижнетуринского городского округа;

8) расширение участия общественных организаций и объединений, социальных институтов в оценке качества образовательной деятельности образовательных организаций Нижнетуринского городского округа;

9) удовлетворение потребностей субъектов образования в объективной информации о состоянии и развитии системы образования Нижнетуринского городского округа.

2.4. Критерии качества и объективности проведения основного периода ЕГЭ и иных оценочных процедур в субъектах Российской Федерации в 2020 году. Письмо Федеральной службы по надзору в сфере образования и науки от 13.07.2020 года № 10-352.

3. Мониторинг

Система образования Пензенской области в цифрах и фактах[Сборник 2019] [Сборник 2020]

3.1. По объективности проведения процедур оценки качества образования в ОО

3.1.1 Аналитическая справка по оценке качества образования и государственных итоговых аттестации за 2018 год

3.2. По объективности проведения олимпиад школьников в ОО

4. Анализ, адресные рекомендации

4.1. По объективности проведения процедур оценки качества образования в ОО

4.1.3. Анализ результатов ЕГЭ-2019 и ОГЭ-2019

4.1.4. Рекомендации для учителей начальных классов по итогам выездных семинар-совещаний по вопросам проведения процедур, связанных с оценкой качества образования в общеобразовательных организациях Пензенской области

4.1.5. Использование результатов оценочных процедур образовательными организациями

4.1.7. Статистически материалы по результатам ГИА по образовательным программам основного общего образования за 2017-2019 годы

4.1.8. Статистические материалы по результатам диагностических работ в 2020 году

4.1.10. Методический анализ результатов ГИА-9 по учебным предметам за 2019 год [2]

4.2. По объективности проведения олимпиад школьников в ОО

4.2.1. Контакты ответственных лиц и указатели страниц сайтов, на которых размещена информация об организации и проведении школьного и муниципального этапов всероссийской олимпиады школьников

4.2.2. Методические рекомендации по организации и проведению школьного и муниципального этапов Всероссийской олимпиады школьников в 2019 учебном году

4.2.3. Методические рекомендации по организации и проведению муниципального этапа Всероссийской олимпиады школьников в 2019-2020 учебном году

4.2.4. Результаты регионального этапа ВсОШ в 2019 году

4.2.5. Аккредитация граждан в качестве общественных наблюдателей при проведении регионального этапа всероссийской олимпиады школьников на территории Пензенской области в 2020-2021 учебном году

4.3. Адресные рекомендации по результатам проведённого анализа

5. Меры, управленческие решения

5.1. Проведение мероприятий по обеспечению единых подходов к оценке образовательных результатов

5.1.1. График присутствия должностных лиц Управления по надзору и контролю в сфере образования в пунктах проведения Единого государственного экзамена (ППЭ ЕГЭ) в основной и досрочный периоды 2020 году [2]

5.1.2. Протокол № 6 от 02.12.2019 г. заседания ГЭК Пензенской области

5.1.3. План мероприятий по обеспечению объективности результатов оценочных процедур в Пензенской области

5.1.4. Обеспечение объективности процедуры общероссийской оценки по модели PISA

5.1.5. Обеспечение объективности процедуры исследования качества общеобразовательной подготовки обучающихся СПО в 2019 году

5.1.6. Протоколы семинар-совещаний в 2019-2020 учебном году

5.1.7. Корпус независимых наблюдателей в 2019 году

5.1.8. Информационное письмо по обеспечению объективности проведения ВПР-2019

5.1.9. План мероприятий (Дорожная карта) по организации проведения ВПР-2019 в Пензенской области

5.1.10. План мероприятий (Дорожная карта) по организации проведения ВПР-2020 в Пензенской области [2] [3]

5.1.11. Обеспечение объективности процедуры исследования качества образования в части достижения личностных и метапредметных результатов в 6 и 8 классах общеобразовательных организаций Пензенской области в 2020

5.1.12. План комплексных мероприятий по обеспечению объективности оценки образовательных результатов в Пензенской области на 2020-2021 учебный год

5.1.13. О проведении регионального этапа ВсОШ в 2020 году

5.1.14. О проведении регионального этапа ВсОШ в 2021 году

5.1.15. Требования к проведению регионального этапа всероссийской олимпиады школьников в 2020/21 учебном году

5.1.16. Требования к организации и проведению муниципального этапа всероссийской олимпиады школьников на территории Пензенской области в 2020/ 2021 учебном году

5.1.17 График присутствия должностных лиц Управления по надзору и контролю в сфере образования в общеобразовательных организациях в период проведения ВПР-2021

5.1.18 График проведения контрольных мероприятий в ППЭ на ЕГЭ

5.2. Проведение мероприятий по анализу результатов оценочной процедуры на предмет объективности

5.2.1. Муниципальные планы обеспечения объективности и качества

5.2.2. Организация выборочного проведения ВПР в 2020 году с контролем объективности результатов

5.3. Проведение мероприятий по формированию позитивного отношения к объективной оценке образовательных результатов

5.3.1. Письмо Министерства образования Пензенской области от 29.08.2019 № 3253 ин/01-15 о проведении методических семинаров-совещаний по проведению процедур, связанных с оценкой качества образования

5.3.2. План-график выездных методических семинар-совещаний по вопросам обеспечения качества образования в муниципальных районах и городских округах Пензенской области в 2019-2020 учебном году

5.3.4. План-график методических семинар-совещаний по вопросам обеспечения качества образования в муниципальных районах и городских округах Пензенской области в 2020-2021 учебном году

5.4.1. Протокол № 2 от 10.01.2020 г. заседания ГЭК Пензенской области

5.4.3. Об оказании методической помощи в отношении образовательных организаций с необъективными результатами оценки качества образования (ВПР-2019)

5.4.4. График выезда в образовательные организации специалистов Управления по надзору и контролю в сфере образования Министерства образования Пензенской области согласно графику проведения ВПР-2019

5.4.5. О проведении независимой оценки качества образования в общеобразовательных организациях Пензенской области, результаты которых содержат признаки необъективности по итогам ВПР

5.5. Принятие других управленческих решений по результатам проведённого анализа

ФЕДЕРАЛЬНАЯ СЛУЖБА ПО НАДЗОРУ В СФЕРЕ ОБРАЗОВАНИЯ И НАУКИ

от 16 марта 2018 года N 05-71

Федеральная служба по надзору в сфере образования и науки (Рособрнадзор) с целью повышения эффективности системы оценки качества образования путем формирования среди всех участников образовательных отношений устойчивых ориентиров на методы и инструменты объективной оценки образовательных результатов обучающихся направляет для использования в работе органов исполнительной власти субъектов Российской Федерации, осуществляющих государственное управление в сфере образования, а также органов исполнительной власти, осуществляющих переданные полномочия Российской Федерации в сфере образования, рекомендации по повышению объективности оценки образовательных результатов (далее - рекомендации).

Данные рекомендации могут быть использованы для формирования и совершенствования региональной стратегии развития образования, подготовки программ развития, планирования деятельности в области оценки качества образования, а также подготовки рекомендаций и других документов для муниципальных органов власти и для образовательных организаций общего образования.

Меры, указанные в настоящих рекомендациях, могут быть применены как при проведении оценочных процедур федерального уровня (например, всероссийских проверочных работ), так и при проведении оценочных процедур регионального и муниципального уровней, а также при проведении отдельных оценочных процедур на уровне образовательных организаций.

Рекомендации по повышению объективности оценки образовательных результатов

Общие положения

Целью настоящих методических рекомендаций является повышение эффективности системы оценки качества образования путем формирования среди всех участников образовательных отношений устойчивых ориентиров на методы и инструменты объективной оценки образовательных результатов обучающихся.

Повышение объективности оценки образовательных результатов может быть достигнуто только в результате согласованных действий на всех уровнях управления образованием: федеральном, региональном, муниципальном, а также на уровне образовательных организаций.

Данные рекомендации адресованы органам исполнительной власти субъектов Российской Федерации, осуществляющим государственное управление в сфере образования, а также органам исполнительной власти, осуществляющим переданные полномочия Российской Федерации в сфере образования, и могут быть использованы для формирования и совершенствования региональной стратегии развития образования, подготовки программ развития, планирования деятельности в области оценки качества образования, а также подготовки рекомендаций и других документов для муниципальных органов власти и для образовательных организаций.

Описание мер, направленных на повышение объективности оценки образовательных результатов

Основные подходы

Для повышения объективности оценки образовательных результатов рекомендуется организовать комплексные мероприятия по трем направлениям:

1. Обеспечение объективности образовательных результатов в рамках конкретной оценочной процедуры в образовательных организациях.

2. Выявление ОО с необъективными результатами и профилактическая работа с выявленными ОО.

3. Формирование у участников образовательных отношений позитивного отношения к объективной оценке образовательных результатов.

Наиболее эффективным является комплексное сочетание всех трех подходов и создание на их основе действенной системы, при которой все участники образовательных отношений заинтересованы в объективной оценке образовательных результатов, и одновременно принимаются всесторонние меры для обеспечения объективности результатов при проведении всех мероприятий по оценке качества образования.

Ниже представлено более детальное описание каждого подхода.

Подход 1: обеспечение объективности образовательных результатов в рамках конкретной оценочной процедуры в образовательных организациях

Для обеспечения возможности получения в рамках конкретной оценочной процедуры объективных результатов необходимо выполнение следующих условий.

1. Наличие описания оценочной процедуры, закрепляющего соответствие этой оценочной процедуры следующим принципам:

а. использование научно обоснованной концепции и качественных контрольных измерительных материалов;

б. применение единых организационно-технологических решений, мер защиты информации;

в. привлечение квалифицированных специалистов на всех этапах;

г. устранение конфликта интересов в отношении всех специалистов, привлеченных к проведению оценочной процедуры.

2. Организация на региональном и/или муниципальном уровнях контроля соблюдения всех положений и регламентов, приведенных в описании оценочной процедуры. Контроль может, в том числе, осуществляться посредством:

а. привлечения независимых, общественных наблюдателей;

б. выезда в пункты проведения представителей муниципальных и региональных ОИВ;

в. организации видеонаблюдения и т.п.

Условие отсутствия конфликта интересов означает, в том числе, что необходимо соблюдать следующие требования:

- в качестве наблюдателей не могут выступать родители учащихся класса, который принимает участие в оценочной процедуре;

- учитель, ведущий данный предмет и работающий в данном классе, не должен выступать организатором работы и участвовать в проверке работ;

- проверка работ должна проводиться по стандартизированным критериям с предварительным коллегиальным обсуждением подходов к оцениванию.

Более детально рекомендации по организации и проведению независимых процедур оценки качества образования представлены в приложении 1.

Указанные условия соблюдены при проведении единого государственного экзамена, национальных исследований качества образования (НИКО), международных сравнительных исследований.

При организации каждой оценочной процедуры регионального и/или муниципального уровней необходима разработка аналогичного описания на основании рекомендаций, содержащихся в приложении 1, а также контроль соблюдения всех положений и регламентов разработанного описания.

При организации всероссийских проверочных работ необходима разработка регионального регламента их проведения, типовых регламентов для ОО, касающихся вопросов проведения ВПР в ОО и обеспечения объективности результатов, а также контроль соблюдения всех принятых регламентов.

Примечание. Выполнение указанных условий для ВПР в части контроля является весьма ресурсоемким, поскольку требует направления в ОО независимых наблюдателей для проведения самих процедур и привлечения независимых экспертов для оценки работ участников ВПР. В связи с этим данный подход в рамках ВПР может быть применен только в ограниченном количестве ОО. В остальных ОО рекомендуется применять сочетание второго и третьего подходов, представленных ниже.

Подход 2: выявление ОО с необъективными результатами и профилактическая работа с выявленными ОО

Выявление ОО с необъективными результатами оценочной процедуры федерального или регионального уровня может осуществляться аналитическими методами, с использованием:

- оценки доверительного интервала среднего балла для ОО относительно группы ОО из данного региона;

- оценки доверительного интервала процента выполнения каждого задания по каждой ОО, участвовавшей в оценочной процедуре, относительно контрольной выборки ОО;

- сравнения результатов ОО с результатами ОО контрольной группы, с учетом контекстных данных об ОО;

- сравнения уровня результатов оценочной процедуры в ОО с уровнем результатов ЕГЭ с учетом контекстных данных об ОО;

Контрольная выборка ОО включает те ОО, в которых реализован первый подход или хотя бы обеспечено присутствие независимых наблюдателей на всех стадиях проведения оценочной процедуры. Поскольку контрольная выборка ОО должна быть достаточно большой (не менее 150 ОО), ее формирование возможно только в случае проведения массовых оценочных процедур, например, ВПР или региональных оценочных процедур с участием большинства ОО региона.

При использовании статистических методов выявления ОО с необъективными результатами может быть применен кластерный подход.

Признаком необъективности оценивания образовательных результатов в ОО может также служить наличие выпускников ОО, получивших золотые медали и имеющих низкие результаты ЕГЭ.

В случае обнаружения признаков недостоверности результатов в ОО рекомендуется:

- осуществить перепроверку результатов;

- в случае подтверждения недостоверности результатов выработать комплекс мер в отношении данной ОО.

Подход 3: формирование у участников образовательных отношений позитивного отношения к объективной оценке образовательных результатов

Для формирования у участников образовательных отношений позитивного отношения к объективной оценке образовательных результатов, рекомендуется применять следующие меры:

- реализовывать в приоритетном порядке программы помощи ОО с низкими результатами, программы помощи учителям, имеющим профессиональные проблемы и дефициты, руководителям ОО, в которых есть проблемы с организацией образовательного процесса и т.п.; во всех перечисленных случаях применять меры административного воздействия, только если программы помощи не приводят к позитивным сдвигам в результатах;

- использовать для оценки деятельности педагога результаты, показанные его учениками (в независимых оценочных процедурах, соответствующих рекомендациям приложения 1) только по желанию педагога;

- способствовать повышению заинтересованности ОО в использовании объективных результатов региональных и федеральных оценочных процедур;

- проводить разъяснительную работу с муниципальными органами управления образованием и руководителями ОО по вопросам повышения объективности оценки образовательных результатов и реализации перечисленных выше мер.

Важным механизмом обеспечения объективности оценивания является внутришкольная система оценки образовательных результатов, способствующая эффективному выполнению педагогами трудовой функции "по объективной оценке знаний обучающихся на основе тестирования и других методов контроля в соответствии с реальными учебными возможностями детей". Элементами такой системы в ОО являются, в том числе:

* Вероятно, ошибка оригинала. Следует читать "от 18.10.2013". - Примечание изготовителя базы данных.

- положение о внутренней системе оценки качества подготовки обучающихся;

- система регулярных независимых оценочных процедур, объективность результатов которых обеспечивает руководство ОО;

- принятые в ОО прозрачные критерии внутришкольного текущего и итогового оценивания, обеспечивающие справедливую непротиворечивую оценку образовательных результатов обучающихся;

- непрерывный процесс повышения квалификации учителей в области оценки результатов образования, включающий не только обучение на курсах повышения квалификации, но и внутришкольное обучение и самообразование;

- проведение учителями и методическими объединениями аналитической экспертной работы с результатами оценочных процедур.

Приложение 1

Рекомендации по организации и проведению независимых процедур оценки качества образования

Общие положения

Важнейшим условием эффективного использования результатов оценочной процедуры является обеспечение на всех стадиях разработки, подготовки и проведения оценочной процедуры определенных условий, в том числе, обеспечения валидности инструментария по отношению к тому, что оценивается, и надежности процедур (разработки инструментария, проведения самих процедур, обработки и анализа результатов). Другим важным условием, позволяющим проводить эффективный анализ результатов оценочных процедур, является наличие четкого описания этих процедур, позволяющего точно интерпретировать полученные результаты.

В методических рекомендациях изложены основные принципы, которым должны удовлетворять подготовка и проведение оценочных процедур, разработка инструментария для их проведения. Указанные принципы направлены на обеспечение объективности результатов оценочных процедур и эффективности их использования в целях принятия на их основе управленческих решений.

Настоящие рекомендации могут быть использованы при формировании системы оценки качества образования на уровне субъекта Российской Федерации, муниципалитета или на уровне образовательной организации.

Читайте также: