Приложение. Регламент обработки открытых данных в автоматизированной информационной системе "Общегородская платформа открытых данных"

Приложение
к распоряжению Департамента
информационных технологий г. Москвы
от 19 сентября 2013 г. N 64-16-426/13-1

Регламент
обработки открытых данных в автоматизированной информационной системе "Общегородская платформа открытых данных"

I. Общие положения

1.1. Настоящий Регламент определяет порядок подготовки, публикации и обновления открытых данных в автоматизированной информационной системе "Общегородская платформа открытых данных" (далее - АИС ОПОД) (далее - Регламент). Регламент определяет порядок осуществления должностными лицами органов исполнительной власти города Москвы действий в рамках:

- оценки возможности раскрытия наборов данных;

- подготовки наборов данных к раскрытию;

- публикации наборов данных в АИС ОПОД;

- актуализации набора данных в АИС ОПОД;

- отзыва наборов данных из АИС ОПОД.

1.2. В настоящем Регламенте используются следующие основные понятия, термины и сокращения:

1.2.1. График публикации открытых данных - утверждаемый заместителем Мэра Москвы в Правительстве Москвы - руководителем Аппарата Мэра и Правительства Москвы единый календарный план публикации наборов данных.

1.2.2. Паспорт набора открытых данных - формализованное описание набора открытых данных.

1.2.3. Размещение набора открытых данных - передача набора открытых данных Поставщиком открытых данных и обеспечение технической возможности его размещения оператором в АИС ОПОД в соответствии с Графиком публикации открытых данных.

1.2.4. Структура набора данных - описание полей набора данных и их связей.

1.2.5. Отзыв данных - прекращение доступа к открытым данным посредством информационного портала в случае обнаружения ошибок оператором в опубликованном наборе открытых данных, файле набора данных или паспорте набора открытых данных.

1.3. Участниками взаимодействия при обработке и использовании открытых данных в АИС ОПОД являются:

1.3.1. Должностное лицо, назначаемое органом государственной власти города Москвы, подведомственной ему организацией, иной организацией, размещающей данные в АИС ОПОД на добровольной основе (далее - Поставщик открытых данных), и уполномоченное принимать решения о раскрытии наборов данных и представлять Поставщика открытых данных по вопросам раскрытия наборов данных (далее - Ответственное лицо).

1.3.2. Представители Оператора, обеспечивающие эксплуатацию АИС ОПОД на постоянной основе (далее - специалисты-операторы АИС ОПОД).

1.3.3. Представители Поставщика открытых данных, обеспечивающие подготовку набора открытых данных к публикации (далее - отраслевые специалисты).

1.3.4. Представители Поставщика открытых данных, осуществляющие взаимодействие со специалистами-операторами АИС ОПОД по техническим вопросам, связанным с публикацией, актуализацией и уточнением набора данных по результатам рассмотрения сообщений посредством обратной связи (далее - специалисты-операторы набора данных).

1.4. Процесс публикации наборов данных и последующего их обновления, приведенный в приложении 1 к настоящему Регламенту, включает следующие процедуры:

1) организационная подготовка деятельности Поставщика открытых данных;

2) выбор набора данных для публикации;

3) подготовка и согласование паспорта и структуры набора данных;

4) подготовка набора данных для публикации;

5) публикация набора данных;

6) обновление и уточнение набора данных.

II. Организационная подготовка деятельности Поставщика открытых данных

2.1. Руководитель органа исполнительной власти - Поставщика открытых данных определяет Ответственное лицо и несет персональную ответственность за его действия. Фамилия, имя, отчество (при наличии) и контактные данные Ответственного лица фиксируются в Графике публикации открытых данных.

Ответственное лицо организует деятельность по раскрытию наборов данных и взаимодействие Поставщика открытых данных с Департаментом информационных технологий города Москвы.

2.2. Ответственное лицо может самостоятельно вносить предложения по включению того или иного набора данных в График публикации открытых данных. При выборе набора данных для открытия, Ответственное лицо, в первую очередь, должно учитывать следующие критерии:

2.2.1. Набор данных содержит информацию, связанную с исполнением государственных функций или предоставлением государственных услуг.

2.2.2. Данные используются при осуществлении межведомственного взаимодействия.

2.2.3. Данные отражают ход реализации Государственных программ города Москвы (показатели, статистика и т.д.).

2.2.4. Раскрытие набора данных вызвано регулярными обращениями граждан.

2.3. Ответственное лицо Поставщика открытых данных назначает:

2.3.1. Отраслевого специалиста, который осуществляет подготовку выбранного набора к публикации (включая формирование содержательной структуры набора данных).

2.3.2. Специалиста, ответственного за юридическое сопровождение деятельности по раскрытию данных, который осуществляет подготовку заключения о наличии юридической возможности раскрытия набора данных.

2.3.3. Специалиста-оператора набора данных, ответственного за информационно-техническое сопровождение деятельности по раскрытию данных, который осуществляет:

- взаимодействие со специалистом-оператором АИС ОПОД по вопросам публикации, актуализации и уточнению набора данных по результатам рассмотрения сообщений посредством обратной связи;

- оценку необходимости создания автоматического сервиса по выгрузке данных из системы на АИС ОПОД;

- оценку финансовые издержки на создание такого сервиса.

2.4. Ответственное лицо готовит и направляет в Департамент информационных технологий города Москвы предложения по включению в График публикации открытых данных того или иного набора данных, только при условии соответствия набора данных всем критериям возможности раскрытия данных:

- формирование набора данных осуществляется силами Поставщика открытых данных или подведомственной ему организацией;

- публикация данных не противоречит положениям законодательства Российской Федерации, устанавливающим ограничения на доступ к информации;

- набор данных является полным, точным и достоверным.

Образец заполнения формы Графика публикации открытых данных приведен в приложении 2 к настоящему Регламенту.

III. Подготовка и согласование паспорта и структуры набора данных

3.1. Специалист - оператор набора данных, при участии отраслевого специалиста, готовит паспорт набора данных. Паспорт набора данных включает следующие обязательные к заполнению поля:

1) название набора данных;

2) тематическая категория;

3) описание набора данных;

4) владелец данных - Орган исполнительной власти города Москвы (далее - ОИВ);

5) код ОИВ, содержащийся в нормативно-справочной подсистеме автоматизированной системы "Единая система ведения и управления реестрами, регистрами, справочниками и классификаторами" (далее - НСИ АС УР);

6) периодичность предоставления/обновления данных (ежегодная, ежемесячная, еженедельная, ежедневная, по мере поступления), но не реже чем один раз в месяц;

7) информационная система ОИВ, в которой подготовлены данные (при наличии);

8) ключевые слова и словосочетания (не менее семи, через запятую);

9) начало отчетного периода опубликованного набора открытых данных;

10) конец отчетного периода опубликованного набора открытых данных;

11) наличие географической привязки данных;

12) режим публикации и обновления (ручной/автоматический).

Пример оформления паспорта набора данных приведен в приложении 3 к настоящему Регламенту.

3.2. Одновременно с подготовкой паспорта набора данных, специалист-оператор набора данных осуществляет подготовку структуры набора данных, которая должна предоставлять пользователям информацию о структуре набора, его модели содержания и типах данных. Пример описания структуры набора данных приведен в приложении 4 к настоящему Регламенту.

3.3. Публикация данных осуществляется преимущественно в формате CSV, в случае публикации данных в формате XML, к описанию структуры данных должен прилагаться файл с соответствующим описанием в виде схемы XSD.

3.4. Специалист-оператор набора данных согласует со специалистом-оператором АИС ОПОД паспорт и структуру набора данных.

3.5. Согласованный вариант паспорта набора данных в печатной форме заверяется подписью Ответственного лица Поставщика открытых данных и направляется в Департамент информационных технологий города Москвы.

3.6. Открытые данные должны быть представлены в форме одной плоской денормализованной таблицы, в которой не используются ссылки на данные других таблиц и массивов. Элементы данных в такой денормализованной таблице могут многократно дублироваться.

3.7. Наборы открытых данных готовятся к публикации Поставщиком открытых данных на портале открытых данных в форматах XML или CSV.

XML-документ должен содержать только один корневой элемент.

3.8. При формировании и размещении набора данных в формате CSV необходимо выполнение следующих требований:

- в первой строке должны быть указаны имена полей таблицы;

- запрещается использовать символы перевода строки;

- не допускается наличие полностью повторяющихся и пустых строк;

- в качестве разделителя должен использоваться символ "точка с запятой".

3.9. Значения, содержащие зарезервированный символ "точка с запятой", обрамляются кавычками ("). В случае, если в значении встречаются кавычки, они должны быть представлены в файле в виде двух кавычек подряд.

3.10. В целях снижения вероятности ошибок, наборы открытых данных должны предоставляться в полном объеме. Все используемые в данных коды справочников и классификаторов должны быть расшифрованы и представлены в отдельных графах.

3.11. Если данные содержат географическую привязку, то для всех объектов в наборе открытых данных она должна быть указана. В паспорте такого набора открытых данных должен быть заполнен признак наличия географической привязки. Данные, содержащие координаты объекта, должны быть отражены в формате WGS84 - трехмерной системы координат для географического позиционирования.

3.12. Данные, содержащие дату, должны быть приведены в формате ДД.ММ.ГГГГ.

IV. Порядок загрузки наборов данных

4.1. При первой загрузке набора данных для размещения специалист-оператор набора данных:

1) при необходимости переводит данные с бумажных носителей в электронный вид формата CSV, а также переводит данные из любых, отличных от CSV электронных форматов, в формат CSV;

2) направляет заявку на создание учетной записи, утвержденный паспорт, структуру и файл набора данных оператору АИС ОПОД;

3) получает от оператора АИС ОПОД уведомление о предоставлении доступа к работе с автоматизированной системой "Единая система ведения и управления реестрами, регистрами, справочниками и классификаторами" (далее - АС УР) или интегрированной автоматизированной информационной системой "Единое геоинформационное пространство города Москвы" (далее - ИАИС ЕГИП) в зависимости от способа публикации, указанного в паспорте набора данных, а также уведомление о создании структуры каталога набора данных;

4) осуществляет контроль наполнения созданного каталога набора данных посредством пользовательского интерфейса;

5) осуществляет подписание сформированного набора данных электронной цифровой подписью.

4.2. Обновление набора данных осуществляется в соответствии с периодичностью, указанной в паспорте набора данных, а также досрочно по решению Ответственного лица. Досрочное обновление не исключает обновления в соответствии с регулярностью, указанной в паспорте набора данных.

4.3. Обновление наборов данных в зависимости от способа хранения и формата данных может осуществляться одним из следующих способов:

1) в ручном режиме с использованием АС УР;

2) в автоматическом режиме с помощью АС УР;

3) в ручном режиме с помощью ИАИС ЕГИП;

4) в автоматическом режиме с помощью ИАИС ЕГИП.

4.4. При обновлении данных в ручном режиме с использованием АС УР специалист-оператор набора данных:

- готовит набор данных в соответствии с требованиями к формату;

- направляет файл набора данных оператору АИС ОПОД;

- осуществляет контроль наполнения созданного каталога набора данных посредством пользовательского интерфейса;

- осуществляет подписание сформированного набора данных.

4.5. При обновлении данных в автоматическом режиме с использованием АС УР специалист-оператор набора данных при первоначальной публикации набора данных:

- совместно с Департаментом информационных технологий города Москвы обеспечивает интеграцию информационной системы ОИВ с НСИ АС УР, с использованием соответствующих сервисов НСИ АС УР;

- при технической поддержке оператора АИС ОПОД проводит тестирование взаимодействия информационных систем с НСИ АС УР;

- переводит сервис в режим промышленной эксплуатации.

В последующем, в соответствии с периодичностью, указанной в паспорте набора данных, специалист-оператор набора данных:

- осуществляет контроль автоматического наполнения созданного каталога набора данных посредством пользовательского интерфейса НСИ АС УР;

- осуществляет подписание сформированного набора данных ЭЦП в НСИ АС УР.

4.6. При обновлении данных в ручном режиме с использованием ИАИС ЕГИП специалист-оператор набора данных:

- вносит измененные данные в предыдущую опубликованную версию набора данных с использованием сервиса прямого редактирования на карте;

- осуществляет контроль наполнения созданного каталога набора данных посредством пользовательского интерфейса, с помощью пользовательского интерфейса ИАИС ЕГИП;

- осуществляет подписание сформированного набора данных электронной цифровой подписью.

4.7. При обновлении данных в автоматическом режиме с использованием ИАИС ЕГИП специалист-оператор набора данных при первоначальной публикации набора данных:

- согласует с оператором АИС ОПОД технологический регламент публикации наборов данных;

- совместно с Департаментом информационных технологий города Москвы обеспечивает интеграцию информационной системы ОИВ с ИАИС ЕГИП с использованием соответствующих сервисов ИАИС ЕГИП;

- при технической поддержке оператора ИАИС ЕГИП проводит тестирование взаимодействия информационной системы ОИВ с ИАИС ЕГИП;

- переводит сервис в режим промышленной эксплуатации.

В последующем, в соответствии с периодичностью, указанной в паспорте набора данных, специалист-оператор набора данных:

- осуществляет контроль автоматического наполнения созданного каталога набора данных посредством пользовательского интерфейса ИАИС ЕГИП;

- осуществляет подписание сформированного набора данных электронной цифровой подписью в ИАИС ЕГИП.

V. Отзыв наборов открытых данных

5.1. В случае возникновения необходимости отзыва набора данных из АИС ОПОД (данные не готовы для размещения в публичном доступе; данные потеряли актуальность), специалист-оператор набора данных направляет письмо с просьбой о временном снятии набора с публикации с указанием даты размещения актуализированного набора на имя заместителя Мэра Москвы в Правительстве Москвы - руководителю Аппарата Мэра и Правительства Москвы.