Приложение N 3. План-график проведения мероприятий по подготовке экспертов ПК и формированию ПК, подведение итогов работы ПК

Приложение N 3
к приказу Минобрнауки РД
от 6 марта 2024 г. N 05-02-2-240/24

План-график проведения мероприятий по подготовке экспертов ПК и формированию ПК, подведение итогов работы ПК

N п/п	Мероприятие	Срок
1.	Формирование ПК: проведение квалификационных испытаний, присвоение статуса экспертам ПК: - досрочного этапа - основного этапа	до 29 февраля 2024 г. до 20 апреля 2024 г.
2.	Предоставление в Рособрнадзор списков кандидатур председателей ПК, согласование Рособрнадзором кандидатур председателей ПК	Для ПК по всем учебным предметам в соответствии со сроками, установленными Рособрнадзором (ориентировочные сроки - январь - февраль 2024 года)
3.	Семинары ФИПИ для председателей (заместителей председателей) ПК	В соответствии с расписанием проведения, направляемым ФИПИ
4.	Вебинары ФИПИ для полных составов (всех экспертов) ПК субъектов Российской Федерации по согласованию подходов к оцениванию развернутых ответов	Май - июнь 2024 года в соответствии с единым расписанием проведения ГИА, по графику, направляемому ФИПИ
5.	Проведение семинара-согласования оценивания развернутых ответов в ПК	В день проведения экзамена после получения критериев оценивания (или на следующий день после экзамена) до начала проверки развернутых ответов
6.	Отбор ЭР участников экзаменов, вызвавших затруднения в оценивании, для включения в учебно-методические материалы для экспертов ПК	В процессе проверки ЭР
7.	Направление в ФИПИ информации об ЭР, вызвавших затруднения в оценивании	После окончания проверки ЭР резервных дней экзамена основного периода проведения ГИА (июль 2024 года), в соответствии с запросом ФИПИ
8.	Проведение анализа работы ПК	Июль-август 2024 года

Минимальный перечень направлений для анализа работы ПК

Анализ работы ПК проводится в целях оптимизации работы ПК по проверке развернутых ответов, ее максимальной объективности, выработке единых требований и подходов к оцениванию развернутых ответов, минимизирующих уровень субъективности проверяющих работу экспертов ПК.

При анализе работы ПК необходимо обратить внимание на следующие направления деятельности ПК:

1. Условия проведения проверки:

а) нахождение ПК в здания РЦОИ, количество зданий, помещений, где размещается ПК;

б) количество аудиторий при работе ПК;

в) проведение семинара-согласования в день получения критериев оценивания перед началом проверки (проводился ли, продолжительность, была ли потребность в проведении дополнительного согласования в процессе проверки);

г) работа консультирующих экспертов ПК, назначенных председателем ПК, их количество, принцип распределения по помещениям, сфера консультирования (консультация экспертов ПК, находящихся в одном помещении/аудитории; консультация по оцениванию ответов на определенные задания и т.п.), выполнение консультирующими экспертами ПК других работ в рамках задач, возложенных на ПК;

д) наличие специально оборудованного в помещениях работы ПК рабочего места с выходом в сеть "Интернет" для обеспечения возможности уточнения экспертами ПК изложенных в ответе участников экзаменов фактов; востребованность этого рабочего места;

е) прочее (в случае выявления условий, существенно влияющих на качество работы ПК).

2. Количество и доля экспертов ПК, имеющих статус ведущего эксперта ПК, старшего эксперта ПК, основного эксперта ПК, принцип присвоения статуса экспертов ПК и планирование изменения этих принципов в перспективе.

3. Квалификация экспертов ПК (соответствие требованиям Порядка, количество экспертов, квалификация которых не соответствует требованиям Порядка, причины включения в ПК таких экспертов).

4. Общее количество проверок, проведенных ПК (отдельно по первой, второй, третьей проверкам, по проверкам в рамках установления правильности оценивания развернутых ответов апеллянтов, по перепроверкам ЭР по решению Минобрнауки РД или ГЭК).

5. Общее количество экспертов ПК, задействованных при проверке развернутых ответов в разные периоды проведения ГИА (досрочный, основной и дополнительный).

6. Общее количество экспертов ПК, устанавливающих правильность оценивания развернутых ответов апеллянтов в рамках рассмотрения апелляций о несогласии с выставленными баллами. Принцип отбора экспертов ПК, устанавливающих правильность оценивания развернутых ответов апеллянтов в рамках рассмотрения апелляций о несогласии с выставленными баллами.

7. Статистика рассмотрения апелляций о несогласии с выставленными баллами (общее количество поданных апелляций, количество удовлетворенных апелляций в отношении изменения баллов за развернутые ответы, количество работ с пониженными/ повышенными на апелляции баллами, минимальное и максимальное изменение баллов, основные причины удовлетворения апелляций).

8. Общее количество экспертов ПК, осуществлявших третью проверку.

9. Доля ЭР, направленных на третью проверку после проверки в ПК, т.е. без учета пустых ЭР (средний показатель по всей комиссии).

10. Максимальное и минимальное значение индивидуальных показателей экспертов ПК "доля ЭР, направленных на третью проверку, от общего количества проверенных экспертом ПК работ".

11. Максимальное и минимальное количество ЭР, проверенных каждым экспертом ПК.

12. Перечень экспертов ПК, регулярно (более чем 5% проверяемых ЭР) допускающих в оценивании развернутых ответов значительные расхождения в баллах, выставленных другими экспертами ПК:

а) случаи существенной разницы между суммой баллов первого и второго экспертов ПК; анализ ситуации, выявленные причины, принятые решения (повышение квалификации, изменение функционала в рамках работы ПК, исключение из ПК, иное);

б) случаи существенной разницы в баллах, выставленных за каждую позицию оценивания; анализ ситуации, выявленные причины, принятые решения (повышение квалификации, изменение функционала в рамках работы ПК, исключение из ПК, иное);

в) случаи существенной разницы в баллах, выставленных за каждую позицию оценивания при установлении правильности оценивания развернутых ответов апеллянтов в рамках рассмотрения апелляций о несогласии с выставленными баллами; анализ ситуации, выявленные причины, принятые решения (повышение квалификации, изменение функционала в рамках работы ПК, исключение из ПК, иное).

13. Другие случаи рассогласованной работы экспертов ПК, их описание, количественные показатели; анализ ситуации, выявленные причины, принятые решения (повышение квалификации, изменение функционала в рамках работы ПК, исключение из ПК, иное).

14. Результаты выборочной экспертизы председателями ПК результатов оценивания развернутых ответов экспертами ПК, показавшими рассогласованную работу при проведении оценивания развернутых ответов или присутствующими в списках экспертов ПК, чья работа требует дополнительного анализа (списки в справке ФИЛИ с результатами анализа работы предметных комиссий субъектов Российской Федерации в предшествующем году).

15. Анализ установленного порядка подготовки экспертов и формирования ПК и формирование предложений по внесению изменений в него.

16. Плановое количество экспертов ПК в следующем году, плановое количество экспертов ПК, имеющих право осуществлять третью проверку, перепроверку, проверку в рамках установления правильности оценивания развернутых ответов апеллянтов в рамках рассмотрения апелляций о несогласии с выставленными баллами (экспертов, имеющих статус старшего эксперта ПК или ведущего эксперта ПК), предполагаемые показатели согласованности экспертов ПК для присвоения статуса при проведении квалификационных испытаний.

17. Планируемые изменения в организации процедуры оценивания развернутых ответов относительно предыдущего года.

18. Основные выводы.

Правила заполнения форм 3-РЦОИ, 3-РЦОИ-У, 4-РЦОИ-ГВЭ, 2-ПП

Формы 3-РЦОИ, 3-РЦОИ-У, 4-РЦОИ-ГВЭ, 2-ПП заполняются экспертом ПК гелевой или капиллярной ручкой с чернилами черного цвета.

Поля форм заполняются, цифрами, печатными заглавными буквами черной гелевой ручкой строго внутри полей формы.

Изображать каждую цифру в форме необходимо, тщательно копируя образец ее написания из строки с образцами написания символов, расположенными в верхней части формы.

Небрежное написание символов может привести к тому, что при автоматизированной обработке символ может быть распознан неправильно. Форма 4-РЦОИ-ГВЭ не является машиночитаемой и не подлежит автоматизированной обработке.

Каждое поле в форме заполняется, начиная с первой позиции (в том числе и поля для занесения фамилии, имени и отчества эксперта ПК).

Если эксперт ПК не имеет информации для заполнения какого-то конкретного поля, он должен оставить это поле пустым (не делать прочерков).

Категорически запрещается:

а) делать в полях, вне полей формы или в полях, заполненных типографским способом, какие-либо записи и (или) пометки, не относящиеся к содержанию полей формы;

б) использовать для заполнения протоколов цветные ручки вместо гелевой или капиллярной ручки с чернилами черного цвета, карандаш, средства для исправления внесенной в форму информации, корректирующую жидкость, ластик и др.

в) вносить исправления. При необходимости внесения изменений председатель ПК составляет акт о факте порчи формы и направляет руководителю РЦОИ служебную записку о необходимости уничтожения испорченной формы и распечатки новой.