Без рубрики
Об утверждении регламента обработки открытых данных в автоматизированной информационной системе "Общегородская платформа открытых данных"
Распоряжение Департамента информационных технологий г. Москвы от 26.04.2013 N 64-16-64/13
В целях реализации Положения об автоматизированной информационной системе "Общегородская платформа открытых данных", утвержденного постановлением Правительства Москвы от 2 апреля 2013 года N 187-ПП "Об автоматизированной информационной системе "Общегородская платформа открытых данных":
1. Утвердить:
1.1. Регламент обработки открытых данных в автоматизированной информационной системе "Общегородская платформа открытых данных" согласно приложению к настоящему распоряжению.
2. Контроль за выполнением настоящего распоряжения возложить на заместителя руководителя департамента Белозерова А.С.
Руководитель департамента А.В. Ермолаев
Приложение к распоряжению Департамента информационных технологий города Москвы от 26 апреля 2013 г. N 64-16-64/13
РЕГЛАМЕНТ ОБРАБОТКИ ОТКРЫТЫХ ДАННЫХ В АВТОМАТИЗИРОВАННОЙ ИНФОРМАЦИОННОЙ СИСТЕМЕ "ОБЩЕГОРОДСКАЯ ПЛАТФОРМА ОТКРЫТЫХ ДАННЫХ"
I. Общие положения
1.1. Настоящий Регламент определяет порядок подготовки, публикации и обновления открытых данных в автоматизированной информационной системе "Общегородская платформа открытых данных" (далее — АИС ОПОД) (далее — Регламент). Регламент определяет порядок осуществления должностными лицами органов исполнительной власти города Москвы действий в рамках:
— оценки возможности раскрытия наборов данных;
— подготовки наборов данных к раскрытию;
— публикации наборов данных в АИС ОПОД;
— актуализации набора данных в АИС ОПОД;
— отзыва наборов данных из АИС ОПОД.
1.2. В настоящем Регламенте используются следующие основные понятия, термины и сокращения:
1.2.1. График публикации открытых данных — утверждаемый заместителем Мэра Москвы в Правительстве Москвы — руководителем Аппарата Мэра и Правительства Москвы единый календарный план публикации наборов данных.
1.2.2. Паспорт набора открытых данных — формализованное описание набора открытых данных.
1.2.3. Размещение набора открытых данных — передача набора открытых данных Поставщиком открытых данных и обеспечение технической возможности его размещения оператором в АИС ОПОД в соответствии с Графиком публикации открытых данных.
1.2.4. Структура набора данных — описание полей набора данных и их связей.
1.2.5. Отзыв данных — прекращение доступа к открытым данным посредством информационного портала в случае обнаружения ошибок оператором в опубликованном наборе открытых данных, файле набора данных или паспорте набора открытых данных.
1.3. Участниками взаимодействия при обработке и использовании открытых данных в АИС ОПОД являются:
1.3.1. Должностное лицо, назначаемое органом государственной власти города Москвы, подведомственной ему организацией, иной организацией, размещающей данные в АИС ОПОД на добровольной основе (далее — Поставщик открытых данных), и уполномоченное принимать решения о раскрытии наборов данных и представлять Поставщика открытых данных по вопросам раскрытия наборов данных (далее — Ответственное лицо).
1.3.2. Представители Оператора, обеспечивающие эксплуатацию АИС ОПОД на постоянной основе (далее — специалисты-операторы АИС ОПОД).
1.3.3. Представители Поставщика открытых данных, обеспечивающие подготовку набора открытых данных к публикации (далее — отраслевые специалисты).
1.3.4. Представители Поставщика открытых данных, осуществляющие взаимодействие со специалистами-операторами АИС ОПОД по техническим вопросам, связанным с публикацией, актуализацией и уточнением набора данных по результатам рассмотрения сообщений посредством обратной связи (далее — специалисты-операторы набора данных).
1.4. Процесс публикации наборов данных и последующего их обновления, приведенный в приложении 1 к настоящему Регламенту, включает следующие процедуры:
1) организационная подготовка деятельности Поставщика открытых данных;
2) выбор набора данных для публикации;
3) подготовка и согласование паспорта и структуры набора данных;
4) подготовка набора данных для публикации;
5) публикация набора данных;
6) обновление и уточнение набора данных.
II. Организационная подготовка деятельности Поставщика открытых данных
2.1. Руководитель органа исполнительной власти — Поставщика открытых данных определяет Ответственное лицо и несет персональную ответственность за его действия. Фамилия, имя, отчество (при наличии) и контактные данные Ответственного лица фиксируются в Графике публикации открытых данных.
Ответственное лицо организует деятельность по раскрытию наборов данных и взаимодействие Поставщика открытых данных с Департаментом информационных технологий города Москвы.
2.2. Ответственное лицо может самостоятельно вносить предложения по включению того или иного набора данных в График публикации открытых данных. При выборе набора данных для открытия Ответственное лицо в первую очередь должно учитывать следующие критерии:
2.2.1. Набор данных содержит информацию, связанную с исполнением государственных функций или предоставлением государственных услуг.
2.2.2. Данные используются при осуществлении межведомственного взаимодействия.
2.2.3. Данные отражают ход реализации Государственных программ города Москвы (показатели, статистика и т.д.).
2.2.4. Раскрытие набора данных вызвано регулярными обращениями граждан.
2.3. Ответственное лицо Поставщика открытых данных назначает:
2.3.1. Отраслевого специалиста, который осуществляет подготовку выбранного набора к публикации (включая формирование содержательной структуры набора данных).
2.3.2. Специалиста, ответственного за юридическое сопровождение деятельности по раскрытию данных, который осуществляет подготовку заключения о наличии юридической возможности раскрытия набора данных.
2.3.3. Специалиста-оператора набора данных, ответственного за информационно-техническое сопровождение деятельности по раскрытию данных, который осуществляет:
— взаимодействие со специалистом-оператором АИС ОПОД по вопросам публикации, актуализации и уточнения набора данных по результатам рассмотрения сообщений посредством обратной связи;
— оценку необходимости создания автоматического сервиса по выгрузке данных из системы на АИС ОПОД;
— оценку финансовых издержек на создание такого сервиса.
2.4. Ответственное лицо готовит и направляет в Департамент информационных технологий города Москвы предложения по включению в График публикации открытых данных того или иного набора данных только при условии соответствия набора данных всем критериям возможности раскрытия данных:
— формирование набора данных осуществляется силами Поставщика открытых данных или подведомственной ему организации;
— публикация данных не противоречит положениям законодательства Российской Федерации, устанавливающим ограничения на доступ к информации;
— набор данных является полным, точным и достоверным.
Образец заполнения формы Графика публикации открытых данных приведен в приложении 2 к настоящему Регламенту.
III. Подготовка и согласование паспорта и структуры набора данных
3.1. Специалист-оператор набора данных при участии отраслевого специалиста готовит паспорт набора данных. Паспорт набора данных включает следующие обязательные к заполнению поля:
1) название набора данных;
2) тематическая категория;
3) описание набора данных;
4) владелец данных — Орган исполнительной власти города Москвы (далее — ОИВ);
5) код ОИВ, содержащийся в нормативно-справочной подсистеме автоматизированной системы "Единая система ведения и управления реестрами, регистрами, справочниками и классификаторами" (далее — НСИ АС УР);
6) периодичность предоставления/обновления данных (ежегодная, ежемесячная, еженедельная, ежедневная, по мере поступления), но не реже чем один раз в месяц;
7) информационная система ОИВ, в которой подготовлены данные (при наличии);
8) ключевые слова и словосочетания (не менее семи через запятую);
9) начало отчетного периода опубликованного набора открытых данных;
10) конец отчетного периода опубликованного набора открытых данных;
11) наличие географической привязки данных;
12) режим публикации и обновления (ручной/автоматический).
Пример оформления паспорта набора данных приведен в Приложении 3 к настоящему Регламенту.
3.2. Одновременно с подготовкой паспорта набора данных специалист-оператор набора данных осуществляет подготовку структуры набора данных, которая должна предоставлять пользователям информацию о структуре набора, его модели содержания и типах данных. Пример описания структуры набора данных приведен в приложении 4 к настоящему Регламенту.
3.3. Публикация данных осуществляется преимущественно в формате CSV, в случае публикации данных в формате XML к описанию структуры данных должен прилагаться файл с соответствующим описанием в виде схемы XSD.
3.4. Специалист-оператор набора данных согласует со специалистом-оператором АИС ОПОД паспорт и структуру набора данных.
3.5. Согласованный вариант паспорта набора данных в печатной форме заверяется подписью Ответственного лица Поставщика открытых данных и направляется в Департамент информационных технологий города Москвы.
3.6. Открытые данные должны быть представлены в форме одной плоской денормализованной таблицы, в которой не используются ссылки на данные других таблиц и массивов. Элементы данных в такой денормализованной таблице могут многократно дублироваться.
3.7. Наборы открытых данных готовятся к публикации Поставщиком открытых данных на портале открытых данных в форматах XML или CSV.
XML-документ должен содержать только один корневой элемент.
3.8. При формировании и размещении набора данных в формате CSV необходимо выполнение следующих требований:
— в первой строке должны быть указаны имена полей таблицы;
— запрещается использовать символы перевода строки;
— не допускается наличие полностью повторяющихся и пустых строк;
— в качестве разделителя должен использоваться символ "точка с запятой".
3.9. Значения, содержащие зарезервированный символ "точка с запятой", обрамляются кавычками ("). В случае если в значении встречаются кавычки, они должны быть представлены в файле в виде двух кавычек подряд.
3.10. В целях снижения вероятности ошибок наборы открытых данных должны предоставляться в полном объеме. Все используемые в данных коды справочников и классификаторов должны быть расшифрованы и представлены в отдельных графах.
3.11. Если данные содержат географическую привязку, то для всех объектов в наборе открытых данных она должна быть указана. В паспорте такого набора открытых данных должен быть заполнен признак наличия географической привязки. Данные, содержащие координаты объекта, должны быть отражены в формате WGS84 — трехмерной системы координат для географического позиционирования.
3.12. Данные, содержащие дату, должны быть приведены в формате ДД.ММ.ГГГГ.
IV. Порядок загрузки наборов данных
4.1. При первой загрузке набора данных для размещения специалист-оператор набора данных:
1) при необходимости переводит данные с бумажных носителей в электронный вид формата CSV, а также переводит данные из любых отличных от CSV электронных форматов в формат CSV;
2) направляет заявку на создание учетной записи, утвержденный паспорт, структуру и файл набора данных оператору АИС ОПОД;
3) получает от оператора АИС ОПОД уведомление о предоставлении доступа к работе с автоматизированной системой "Единая система ведения и управления реестрами, регистрами, справочниками и классификаторами" (далее — АС УР) или интегрированной автоматизированной информационной системой "Единое геоинформационное пространство города Москвы" (далее — ИАИС ЕГИП) в зависимости от способа публикации, указанного в паспорте набора данных, а также уведомление о создании структуры каталога набора данных;
4) осуществляет контроль наполнения созданного каталога набора данных посредством пользовательского интерфейса;
5) осуществляет подписание сформированного набора данных электронной цифровой подписью.
4.2. Обновление набора данных осуществляется в соответствии с периодичностью, указанной в паспорте набора данных, а также досрочно по решению Ответственного лица. Досрочное обновление не исключает обновления в соответствии с регулярностью, указанной в паспорте набора данных.
4.3. Обновление наборов данных в зависимости от способа хранения и формата данных может осуществляться одним из следующих способов:
1) в ручном режиме с использованием АС УР;
2) в автоматическом режиме с помощью АС УР;
3) в ручном режиме с помощью ИАИС ЕГИП;
4) в автоматическом режиме с помощью ИАИС ЕГИП.
4.4. При обновлении данных в ручном режиме с использованием АС УР специалист-оператор набора данных:
— готовит набор данных в соответствии с требованиями к формату;
— направляет файл набора данных оператору АИС ОПОД;
— осуществляет контроль наполнения созданного каталога набора данных посредством пользовательского интерфейса;
— осуществляет подписание сформированного набора данных.
4.5. При обновлении данных в автоматическом режиме с использованием АС УР специалист-оператор набора данных при первоначальной публикации набора данных:
— совместно с Департаментом информационных технологий города Москвы обеспечивает интеграцию информационной системы ОИВ с НСИ АС УР с использованием соответствующих сервисов НСИ АС УР;
— при технической поддержке оператора АИС ОПОД проводит тестирование взаимодействия информационных систем с НСИ АС УР;
— переводит сервис в режим промышленной эксплуатации.
В последующем в соответствии с периодичностью, указанной в паспорте набора данных, специалист-оператор набора данных:
— осуществляет контроль автоматического наполнения созданного каталога набора данных посредством пользовательского интерфейса НСИ АС УР;
— осуществляет подписание сформированного набора данных ЭЦП в НСИ АС УР.
4.6. При обновлении данных в ручном режиме с использованием ИАИС ЕГИП специалист-оператор набора данных:
— вносит измененные данные в предыдущую опубликованную версию набора данных с использованием сервиса прямого редактирования на карте;
— осуществляет контроль наполнения созданного каталога набора данных посредством пользовательского интерфейса с помощью пользовательского интерфейса ИАИС ЕГИП;
— осуществляет подписание сформированного набора данных электронной цифровой подписью.
4.7. При обновлении данных в автоматическом режиме с использованием ИАИС ЕГИП специалист-оператор набора данных при первоначальной публикации набора данных:
— согласует с оператором АИС ОПОД технологический регламент публикации наборов данных;
— совместно с Департаментом информационных технологий города Москвы обеспечивает интеграцию информационной системы ОИВ с ИАИС ЕГИП с использованием соответствующих сервисов ИАИС ЕГИП;
— при технической поддержке оператора ИАИС ЕГИП проводит тестирование взаимодействия информационной системы ОИВ с ИАИС ЕГИП;
— переводит сервис в режим промышленной эксплуатации.
В последующем в соответствии с периодичностью, указанной в паспорте набора данных, специалист-оператор набора данных:
— осуществляет контроль автоматического наполнения созданного каталога набора данных посредством пользовательского интерфейса ИАИС ЕГИП;
— осуществляет подписание сформированного набора данных электронной цифровой подписью в ИАИС ЕГИП.
V. Отзыв наборов открытых данных
5.1. В случае возникновения необходимости отзыва набора данных из АИС ОПОД (данные не готовы для размещения в публичном доступе; данные потеряли актуальность) специалист-оператор набора данных направляет письмо с просьбой о временном снятии набора с публикации с указанием даты размещения актуализированного набора на имя заместителя Мэра Москвы в Правительстве Москвы — руководителя Аппарата Мэра и Правительства Москвы.
Приложение 1 к Регламенту обработки открытых данных в автоматизированной информационной системе "Общегородская платформа открытых данных"
ПРОЦЕСС ПУБЛИКАЦИИ НАБОРОВ ДАННЫХ И ПОСЛЕДУЮЩЕГО ИХ ОБНОВЛЕНИЯ
┌──────────┐ ┌──────────┐│ОИВ │ ┌──────────────┐ │Совместное│ ┌───────┐ ┌─────────────┐ ┌─────────────┐│ │ │Выбирает │ │совещание │ ┌─>│Готовит│ ┌──>│Контроль │ │Регулярное ││ │ │наборы данных │ └─────┬────┘ │ │набор │ │ │содержания ├─┐ │обновление ││ │ │для публикации│ │ │ │данных │ Предвари- │ │и подпись ЭЦП│ │ │набора данных││ │ └─┬────────────┘ │ │ └────┬──┘ тельный │ └─────────────┘ │ └─────────────┘│ │ Предложения│ │ │ │Набор просмотр │ │ Набор /\│ │ для │ │ │ │данных, публикации│ │ размещен││ │ публикации │ │ ┌─────┴─────┐ │паспорт, │ │ ││ │ │ │ ┌───>│Согласуют и│ │структура │ │ │├──────────┼────────────┼────────────────────┼──────────┼────┤подписывают├─┤─────────────────────┼───────────────────┼───────────┼──────────│ДИТ │ │ │ │ │план-график│ │ │ │ ││ │ │ ┌─────────────┐ │ │ └───────────┘ │ ┌────────┴──────┐ │ ┌───────┴─────┐│ │ │ │Рассматривает│ │ │ │ │Подготовка │ │ │Окончательная││ │ ├───┤возможность ├─>│ Распо- │ │ │разделов, │ └──>│публикация ││ │ │ │публикации │ │ ряжение│ └───────────>│предварительная│ │в открытом ││ │ │ └─────────────┘ │ │ │публикация │ │доступе ││ │ │ │ │ └───────────────┘ └─────────────┘├──────────┼────────────┼────────────────────┼──────────┼───────────────────────────────────────────────────────────────────────────────────│Правитель-│ │ │ ││ство │ │ ┌─────────────┐ │ ┌────┴─────────┐│Москвы │ │ │Оценивает │ │ │Утверждает │ ┌──────────┐│ │ └───┤необходимость├─>└────>│перечень │ │КОНТРОЛЬ ││ │ │публикации │ │наборов данных│ │ИСПОЛНЕНИЯ││ │ └─────────────┘ │для публикации│ └──────────┘└──────────┘ └──────────────┘
Приложение 2 к Регламенту обработки открытых данных в автоматизированной информационной системе "Общегородская платформа открытых данных"
ОБРАЗЕЦ ЗАПОЛНЕНИЯ ФОРМЫ ГРАФИКА ПУБЛИКАЦИИ ОТКРЫТЫХ ДАННЫХ
N
|
Название реестра
|
Атрибут (наименование услуги)
|
Ответственный ОИВ
|
Этап I: размещение на сайте ДСЗН до 01.05.2013
|
Этап II: передача сведений для публикации на портале с 01.05.2013
|
Период актуализации
|
Исходный формат хранения
|
Способ передачи на data.mos.ru
|
||||||
Статус
|
ЧЧ
|
МЧ
|
Карта ЕГИП
|
Статус
|
ЧЧ
|
МЧ
|
Карта ЕГИП
|
|||||||
1
|
2
|
3
|
4
|
5
|
6
|
7
|
8
|
9
|
10
|
11
|
12
|
13
|
14
|
15
|
1
|
Банк данных объектов, доступных для инвалидов
|
Сведения о доступности объекта для различных категорий инвалидов (лица на креслах-колясках, с нарушением опорно-двигательного аппарата, зрения, слуха)
|
ДСЗН
|
Подготовка данных для размещения на сайте
|
01.05.2013
|
01.05.2013
|
01.05.2013
|
с 01.07.2013 по мере поступления данных
|
таблица Excel
|
АС УР
|
||||
ДИТ
|
—
|
—
|
—
|
Публикация
|
01.06.2013
|
01.06.2013
|
01.06.2013
|
Приложение 3 к Регламенту обработки открытых данных в автоматизированной информационной системе "Общегородская платформа открытых данных"
ПРИМЕР ПАСПОРТА НАБОРА ДАННЫХ
N п/п
|
Наименование атрибута
|
Обязательность заполнения
|
Пример заполнения
|
1.
|
Название набора данных
|
Да
|
Перечень выданных субсидий организациям промышленности, науки и инновационной инфраструктуры города
|
2.
|
Тематическая категория
|
Да
|
Субсидии
|
3.
|
Описание набора данных
|
Да
|
Перечень выданных субсидий организациям промышленности, науки и инновационной инфраструктуры города
|
4.
|
Владелец данных (ОИВ)
|
Да
|
Департамент науки, промышленной политики и предпринимательства города Москвы
|
5.
|
Код ОИВ (из НСИ АС УР)
|
Да
|
5204
|
6.
|
Периодичность предоставления/обновления данных (ежегодная, ежемесячная, еженедельная, ежедневная, по мере поступления)
|
Да
|
Ежемесячная
|
7.
|
Информационная система ОИВ, в которой подготовлены данные (если не имеется, то "данные подготовлены без использования ИС")
|
Да
|
Данные подготовлены без использования ИС
|
8.
|
Ключевые слова (теги) — не менее двух через запятую
|
Да
|
Субсидии, промышленность, наука, предприятия
|
9.
|
Начало отчетного периода опубликованного набора открытых данных
|
Нет
|
|
10.
|
Конец отчетного периода опубликованного набора открытых данных
|
Да
|
23.02.2013
|
11.
|
Наличие географической привязки
|
Да
|
Нет
|
12.
|
Режим публикации и обновления (ручной/автоматический)
|
Да
|
Автоматический режим с использованием АС УР
|
Приложение 4 к Регламенту обработки открытых данных в автоматизированной информационной системе "Общегородская платформа открытых данных"
СТРУКТУРА НАБОРА ДАННЫХ
N п/п
|
Имя поля (для отображения в файле CSV) — любые допустимые по требованиям символы (в том числе латиница и/или кириллица)
|
Наименование (для отображения в человекочитаемом представлении) на русском
|
Описание (для отображения в разделе "Для разработчиков")
|
Тип данных
|
Обязательность (true — для обязательного, false — для необязательного)
|
Уникальность (true — для уникального, false — для неуникального)
|
1.
|
Наименование организации
|
Наименование организации
|
Сокращенное наименование организации — получателя субсидии
|
String
|
true
|
false
|
2.
|
Название проекта
|
Название проекта
|
Название проекта, включая номер и дату начала
|
String
|
true
|
false
|
3.
|
Год предоставления финансовой поддержки
|
Год предоставления финансовой поддержки
|
Год начала предоставления финансовой поддержки
|
String
|
true
|
false
|
4.
|
Сумма субсидии, руб.
|
Сумма субсидии, руб.
|
Сумма субсидии в рублях
|
String
|
true
|
false
|
Требования к файлу — см. http://data.mos.ru/docs/tehtrebovaniya/.
Формат — CSV, кодировка — ANSI, разделитель — точка с запятой (;).