Приложение N 2. Порядок проведения Национальных исследований качества образования по учебному предмету "Основы безопасности жизнедеятельности" в 8-х и 9-х классах на территории Республики Тыва в 2017 году

Приложение N 2
к приказу МОиН РТ
от 31 марта 2017 г. N 374-д

Порядок проведения Национальных исследований качества образования по учебному предмету "Основы безопасности жизнедеятельности" в 8-х и 9-х классах на территории Республики Тыва в 2017 году

Общие положения

Национальные исследования качества образования (НИКО) проводятся в целях развития единого образовательного пространства в Российской Федерации, совершенствования общероссийской системы оценки качества образования.

В рамках НИКО предусмотрено проведение в 2017 г. исследований:

- качества образования по ОБЖ в 8 и 9 классах (13 апреля 2017 г.);

Мероприятия НИКО проводятся на выборке образовательных организаций. Формирование выборки ОО осуществляет организация-координатор проведения исследований на основании специально разработанной методики.

Исследования проводятся анонимно, данные об участниках в рамках исследований собираются без привязки к Ф.И.О. ОО может принять решение о фиксации и хранении у себя результатов участников в привязке к Ф.И.О. для предоставления результатов родителям и выставления положительных отметок участникам, успешно справившимся с работой.

Результаты исследований могут быть использованы ОО, муниципальными и региональными органами исполнительной власти, осуществляющими государственное управление в сфере образования, для анализа текущего состояния системы образования и формирования программ ее развития.

Не предусмотрено использование результатов указанных исследований для оценки деятельности учителей, ОО, муниципальных и региональных органов исполнительной власти, осуществляющих государственное управление в с сфере образования.

Обсуждение результатов и перспективных направлений развития системы оценки качества образования проводится ежегодно в рамках межрегиональных конференций по оценке качества образования.

Организация процедур исследований

Для координации мероприятий в рамках НИКО Министерства образования и науки Республики Тыва, назначает специалиста, обеспечивающего координацию работ по проведению исследования на территории Республики Тыва.

Для проведения процедур исследования в каждом из ППИ, в котором проводится НИКО, должен быть назначен ответственный организатор ППИ (списки ответственных организаторов утверждаются Министерством образования и науки РТ).

Региональным координаторам НИКО и ответственным организаторам ППИ предоставляется доступ в персональный кабинет для обмана информацией с федеральным организатором НИКО. Учетная запись для входа в систему предоставляется на условиях сохранения конфиденциальности.

Во время проведения процедур исследования е каждой аудитории, в которой находятся участники исследования, должны присутствовать организатор и независимый наблюдатель. Желательно присутствие общественных наблюдателей, а также использование видеонаблюдения.

Если в рамках мероприятий НИКО проводятся диагностические работы, предполагающие выполнение участниками заданий с развернутыми ответами, то к проверке развернутых ответов привлекаются специалисты по соответствующему учебному предмету, прошедшие необходимый инструктаж и соответствующую аттестацию. По согласованию с Министерством образования и науки Республики Тыва к экспертному оцениванию развернутых ответов участников исследования могут быть привлечены специалисты Республики Тыва.

Результаты исследований направляются в Министерство образования и науки РТ для использования в работе, ОО, участвовавшим в исследовании, а также обсуждаются на конференции по оценке качества образования.

Технология проведения процедур, порядок и план-график организации каждого исследования в рамках НИКО определяется отдельным разделом настоящего Порядка. В рамках НИКО могут применяться технологии, основанные на использовании машиночитаемых бланков ответов, а также технологии компьютерного тестирования.

Технология
проведения исследования качества образования по ОБЖ в 8 и 9 классах

Общее описание технологии

Технология проведения исследования качества образования по ОБЖ в 8 и 9 классах основана на использовании бланков ответов. Машиночитаемыми на бланках являются только служебные технические элементы. Все ответы на задания проверяются экспертами.

Бланки с заданиями КИМ изготавливаются типографским способом и доставляются до ППИ в специальных защищенных от вскрытия номерных сейф-пакетах. В каждом сейф-пакете содержатся материалы, рассчитанные на одну аудиторию:

- 16 индивидуальных конвертов (в том числе 1 запасной), каждый из которых содержит бланки с заданиями и анкеты;

- бланк протокола проведения;

- доставочный пакет.

Кроме того, каждая ОО, участвующая в исследовании, предоставляет организаторам сведения о самой организации и обучающихся - участниках исследования (исключая персональные данные) путем заполнения и отправки электронных форм через информационную систему НИКО (http://www.eduniko.ru/).

В рамках исследования его участники выполняют диагностическую работу по ОБЖ в 8 и 9 классах, а также отвечают на вопросы анкеты.

Заполненные бланки с ответами на задания и с ответами на вопросы анкеты из каждой аудитории складываются в доставочный пакет. Заполненные доставочные пакеты из всех аудиторий ППИ отправляются в центр сканирования материалов. Материалы, не подлежащие дальнейшей централизованной обработке (пустые индивидуальные конверты, черновики), помещаются в ранее вскрытий сейф-пакет и сдаются ответственному организатору ППИ.

Сканирование материалов может осуществляться в РЦОИ РТ, но при соблюдении порядка сканирования и при выполнении технических требований к центру сканирования.

После сканирования полученные цифровые изображения материалов исследования через систему СГ-Коллектор передаются Федеральному организатору НИКО, который осуществляет обработку результатов, организует проверку развернутых ответов участников.

Проверка развернутых ответов участников исследования проводится дистанционно. В случае, если по согласованию с Министерством образования и науки РТ к проверке развернутых ответов участников привлекаются специалисты РТ, организаторы исследования обеспечивают возможность подключения специалистов к системе проверки, прохождения инструктажа и аттестации для допуска к выполнению проверки.

На заключительном этапе все заинтересованные стороны обеспечиваются итоговыми статистическими отчетами по результатам исследования.

Порядок подготовки исследования

Основные этапы подготовки исследования

Согласование выборки образовательных организаций, участвующих в исследовании;

назначение ответственных за проведение процедур исследования на уровне Министерства образования и науки РТ и на уровне ППИ;

обучение ответственных за проведение процедур исследования на уровне Министерства образования и науки РТ и на уровне ППИ;

доставка материалов в РЦОИ РТ;

доставка материалов из РЦОИ РТ в ППИ.

Назначение ответственных за проведение процедур исследования Министерство образования и науки Республики Тыва (далее Минобрнауки РТ) назначает для организации процедур исследования на территории Республики Тыва регионального координатора НИКО.

Кроме того, Минобрнауки РТ должен обеспечить назначение в каждом ППИ, участвующем в исследовании, ответственного организатора ППИ, организаторов в аудиториях и независимых наблюдателей, которые будут отправлены в другие ППИ. Организатором в аудитории назначается учитель данной ОО, не являющийся учителем ОБЖ. В ППИ направляются наблюдатели, не работающие в данной ОО.

Минобрнауки РТ также рекомендует федеральным организаторам экспертов по проверке развернутых ответов по ОБЖ из числа учителей, работающих в ОО Республики Тыва, но не обязательно в ОО, участвующих в исследованиях. Для участия в проверке развернутых ответов эксперты проходят инструктаж и аттестацию по результатам инструктажа, успешное прохождение которой является допуском к проверке работ участников исследования.

Эксперты по проверке заданий с развернутыми ответами:

- по ОБЖ - преподаватели-организаторы ОБЖ.

Согласование выборки образовательных организаций

Согласование выборки проводится региональным координатором в следующей последовательности:

получение от федеральных организаторов НИКО предварительного списка ОО;

согласование региональным координатором с руководителями ОО возможности участия ОО в исследовании;

предоставление организаторам НИКО сведений о количестве обучающихся в 8 и 9 классах в ОО, согласившихся принять участие в исследовании;

окончательное формирование федеральными организаторами НИКО списка ОО из числа согласованных и направление списка региональному координатору.

Обучение ответственных за проведение процедуры исследования на уровне Минобрнауки РТ и на уровне ППИ

Обучение ответственных за проведение процедуры исследования проводится дистанционно. Для записи специалистов на обучение региональному координатору и ответственному организатору ППИ необходимо через информационную систему СтатГрад получить приглашения для самостоятельной регистрации в системе дистанционного обучения на курсах по подготовке к проведению Национальных исследований качества образования (НИКО ОБЖ-2017).

Региональному координатору необходимо:

- выдать приглашения для входа в систему дистанционного обучения:

- независимым наблюдателям;

- экспертам по проверке заданий;

- специалистам центра сканирования;

- самому зарегистрироваться в системе дистанционного обучения.

Ответственному организатору ППИ необходимо:

- выдать приглашения для входа в систему дистанционного обучения:

- организаторам в аудиториях;

- техническим специалистам ППИ;

- самому зарегистрироваться в системе дистанционного обучения.

Каждый из указанных специалистов самостоятельно регистрируется в системе дистанционного обучения, следуя инструкции в приглашении. После этого он сможет приступить к обучению на соответствующем курсе.

От каждого региона должно быть заявлено:

ответственный организатор ППИ - по количеству ППИ, участвующих в проекте;

организатор в аудитории - по суммарному количеству аудиторий во всех ППИ, задействованных в проекте;

независимый наблюдатель - по суммарному количеству аудиторий во всех ППИ, задействованных в проекте;

специалист центра сканирования - не менее 1 чело зека;

технический специалист ППИ - по количеству ППИ, участвующих в проекте;

эксперты по проверке развернутых ответов - 2-3 человека.

Рекомендуется направить на обучение специалистов с учетом необходимого резерва.

Все специалисты ППИ, которым были выданы приглашения, получат доступ в систему дистанционного обучения Курситет https://kursitet.ru/project/niko/2017obzh/

Обучение экспертов по проверке заданий

Для выполнения проверки развернутых ответов участников исследования набирается группа экспертов (2-3 человека от региона). Региональный координатор скачивает в личном кабинете системы СтатГрад приглашения для самостоятельной регистрации экспертов по проверке развернутых ответов участников НИКО в системе дистанционного обучения Курситет https://kursitet.ru/project/niko/2017obzh/ и передает их экспертам.

Обучение экспертов проверке развернутых ответов также будет происходить через систему дистанционного обучения Курситет.

Обучение экспертов проводится с 13 по 20 апреля 2017 года. Курс включает модуль обучения работе с системой дистанционной проверки СГ-Эксперт, а также рекомендации по проверке заданий диагностических работ.

Доставка материалов в РЦОИ РТ

Материалы доставляются централизованно по адресу, указанному региональным координатором. Адрес указывается по электронной почте monitoring@mccme.ru.

Дата доставки согласовывается дополнительно, но не должна быть позже 06 апреля 2017 года.

КИМ изготавливаются централизованно типографским способом и доставляются до РЦОИ РТ в специальных защищенных от несанкционированного вскрытия номерных сейф-пакетах. В каждом сейф-пакете содержатся материалы, рассчитанные на одну аудиторию: 16 (включая 1 запасной) индивидуальных конвертов, каждый из которых содержит бланки с заданиями и анкеты, бланк протокола проведения, доставочный пакет.

Каждому участнику предназначен один индивидуальный конверт, помеченный уникальным идентификатором.

Доставка материалов из РЦОИ РТ в ППИ

Материалы, предназначенные для проведения процедур исследования в конкретном ППИ, должны быть доставлены в этот ППИ с соблюдением условий конфиденциальности не позднее 12 апреля 2017 года для 8 и 9 классов.

Порядок проведения процедур исследования

Этапы проведения процедур исследования:

- проведение диагностической работы и анкетирования участников;

- заполнение форм с контекстными данными об участниках в ППИ;

- сбор материалов для отправки в центр сканирования.

Проведение диагностических работ и анкетирования участников

Ответственный организатор ППИ формирует список сотрудников, которые будут назначены организаторами в аудиториях и рекомендованы в качестве независимых наблюдателей в других ППИ. Списки наблюдателей подаются региональному координатору. Все направленные сотрудники ОО проходят дистанционное обучение.

13 апреля назначенный ответственным организатором ППИ уполномоченный представитель ППИ получает в РЦОИ РТ материалы исследования для 8 и 9 классов. Также не позднее, чем за 12 часов до проведения процедур исследования ответственный организатор ППИ должен обеспечить организацию мест проведения исследования (аудиторий).

Составляется распределение участвующие в проведении исследования обучающихся по аудиториям:

участники распределяются по аудиториям из расчета по 15 человек (по одному за партой).

Дата проведения процедур исследования:

- 13 апреля 2017 года - 8 и 9 классы, диагностическая работа;

За 30 минут до начала исследования в ППИ прибывают направленные Минобрнауки РТ независимые наблюдатели. За 15-20 минут до начала исследования организаторам в аудиториях выдаются сейф-пакеты с материалами исследования. За 5 минут до начала исследования, после рассадки участников по аудиториям, в присутствии независимых наблюдателей организаторами вскрываются сейф-пакеты.

Диагностическая работа в 8 и 9 классах рассчитана на 45 минут.

Рекомендованное время для проведения процедуры исследования: на 2-3 или 3-4 уроках.

Распорядок во время проведения исследования:

инструктаж, выдача материалов - 5 минут;

выполнение диагностической работы - 35 минут;

анкетирование участников - 5 минут.

По окончании процедуры исследования организатор в аудитории упаковывает все бланки с работами и анкеты участников в доставочные пакеты для отправки материалов исследования в центр сканирования. Доставочные пакеты с материалами исследования сдаются ответственному организатору ППИ.

Также ответственному организатору передаются все остальные материалы:

невскрытые индивидуальные комплекты участнике в, вскрытые, но не использованные комплекты, испорченные комплекты;

пустые конверты от индивидуальных комплектов бланков и черновики участников, упакованные в сейф-пакеты, в которых были получены материалы;

заполненные протоколы проведения, полученные вместе с материалами для проведения исследования, в которых установлено соответствие между Ф.И.О. обучающихся и номерами выданных им комплектов.

По окончании процедуры исследования, в тот же день ответственный организатор ППИ заполняет электронный протокол проведения.

Доставочные пакеты отсылаются в РЦОИ РТ Невскрытые индивидуальные комплекты участников, вскрытые, но не использованные комплекты, и испорченные комплекты передаются в РЦОИ РТ или региональному координатору. Оставшиеся в ППИ материалы хранятся до окончания всей процедуры исследования (до получения результатов ОО).

Заполнение форм с контекстными данными

Форма для заполнения контекстных данных по ППИ передается в ППИ через систему СтатГрад.

В форму заранее вставлены идентификаторы участников процедур исследования.

Рядом с каждым идентификатором участии ка должны быть указаны:

- пол;

- отметка по русскому языку за последнюю четверть (триместр) текущего учебного года;

- отметка по математике за последнюю четверть (триместр) текущего учебного года;

- отметка по ОБЖ за последнюю четверть (триместр) текущего учебного года;

- отметка по физической культуре за последнюю четверть (триместр) текущего учебного года;

- класс (буква).

Направление материалов в центр сканирования

Заполненные бланки ответов и анкеты участников упаковываются в доставочные пакеты. Все предназначенные к отправке материалы из одной аудитории должны находиться в одном пакете. Недопустимо упаковывать материалы из разных аудиторий в один пакет. Недопустимо упаковывать материалы из одной аудитории в два и более пакетов. Нарушение порядка упаковки приведет к проблемам при сканировании и верификации бланков. Пакеты из одного ППИ доставляются в центр сканирования одновременно. Вместе с ними передается опись, формируемая автоматически из формы с контекстными данными.

Обработка материалов в центре сканирования

В центре сканирования все материалы, доставленные из ОО внутри доставочных конвертов, должны быть отсканированы в соответствии с техническими требованиями (2 стороны, режим - ч/б (b/w), разрешение 200dpi). Отсканированные материалы передаются в систему СГ-Коллектор в соответствии с руководством пользователя. Транспортом для передачи данных является бесплатный сервис Яндекс.Диск. Каждый центр сканирования должен иметь аккаунт в Яндекс.Диск и стабильное подключение к сети Интернет.

После загрузки сканов в систему СГ-Коллектор и обработки оператор центра сканирования производит проверку комплектности отсканированных материалов в соответствии с информацией о напечатанных бланках, информацией из описи и информацией из протоколов проведения, переданной вместе с пакетами. При необходимости, в центре сканирования происходит пересканирование или до сканирование.

Верифицированные комплекты участников исследования поступают на проверку в систему СГ-Эксперт.

Специалисты центра сканирования проходят дистанционное обучение в системе Курситет https://kursitet.ru/project/niko/2017obzh/.

Проверка заданий экспертами

Проверка заданий осуществляется удаленно через систему СГ-Эксперт в период с 20 апреля. Сроки проверки представлены в План i-графике проведения НИКО. Назначенные региональным координатором эксперты по проверке заданий направляются на дистанционное обучение работе с системой СГ-Эксперт (в системе Курситет). По окончании проведения процедур исследования происходит разбор всех заданий диагностических работ.

Прошедшие обучение эксперты получают доступ в систему СГ-Эксперт. Каждый эксперт проходит аттестацию на допуск к проверке развернутых ответов. Процедура аттестации заключается в том, что эксперт оценивает некоторое количество образцов ответов, заранее оцененных организаторами исследования (то есть получившими эталонные оценки). Если расхождение оценок эксперта с эталонными оценками находится в допустимых пределах (менее 10%), то эксперт получает доступ к проверке всех работ. Проверка заданий осуществляется удаленно через систему СГ-Эксперт.

Порядок подведения итогов исследования

По окончании процедур исследования проводится анализ результатов. Полученные статистические отчеты и аналитические материалы публикуются на сайте www.eduniko.ru

План-график проведения Национальных исследований качества образования но учебному предмету "Основы безопасности жизнедеятельности" в 8-х и 9-х классах на территории Республики Тыва в 2017 году

N п/п	Мероприятие	Срок	Ответственные
1.	Согласование выборки образовательных организаций, участвующих в проведении исследования качества образования по основам безопасности жизнедеятельности	до 22.03.2017	Федеральный организатор, ОИВ,
3.	Обучение специалистов, участвующих в проведении исследования качества образования по основам безопасности жизнедеятельности (дистанционно)	28.03.2017 - 10.04.2017	Федеральный организатор
4.	Доставка материалов в РЦОИ	06.04.2017	Федеральный организатор
5.	Обучение экспертов по проверке заданий с развернутыми ответами	13.04.2017 - 20.04.2017	Федеральный организатор
6.	Доставка материалов из РЦОИ в образовательные организации	12.04.2017	Региональный координатор, Муниципальный координатор
7.	Проведение диагностической работы по основам безопасности жизнедеятельности в 8 и 9 классах	13.04.2017	Муниципальный координатор, ОО
8.	Заполнение форм с контекстной информацией об ОО	3.04.2017	Муниципальный координатор, ОО
9.	Доставка материалов из образовательных организаций в РЦОИ, сканирование и отправка материалов на проверку	3.04.2017	Региональный координатор, Муниципальный координатор
10.	Проведение анкетирования организаторов процедур исследования в ОО, учителей, специалистов по проверке заданий с развернутым ответом	4.04. - 2.05.2017	Муниципальный координатор, ОО
11.	Проверка работ	20.04.2017 - 20.05.2017	Федеральный организатор
12.	Обработка результатов,	25.05.2017	Федеральный организатор
13.	Направление результатов исследования в субъекты Российской Федерации для использования в работе	26.05.2017	Федеральный организатор
14.	Анализ результатов исследования	10.07.2017	Федеральный организатор