1Определение общего состава требований к технической части предоставления открытых данных и их передачи.
1.1Анализ опыта по проектам
1.1.1Data.gov (США)
На государственном портале открытых данных США Data.gov указано, что информация, доступная через data.gov, удовлетворяет требованиям, безопасности и доступности в соответствии со стандартом Federal Information Processing Standard (FIPS) 199, установленным National Institute of Standards and Technology (NIST).
Каждое агентство, размещающее информацию на сайте, подтверждает, что информация соответствует требованиям конфиденциальности, а также удовлетворяет условиям хранения данных и требованиям National Archives and Records Administration (NARA).
Каких-либо специальных регламентов и требований к технической части размещаемых данных на сайте data.gov не опубликовано.
Для того, чтобы предложить разместить ряд данных, которого нет на сайте, необходимо пройти процедуру регистрации.
Портал открытых данных
|
Критерии W3C (количество звёзд)
|
Число массивов данных
|
Публикуются ли приложения
|
Какая лицензия используется
|
data.gov (США)
|
5
|
378529
|
1602
|
Нет единой лицензии
|
1.1.2Data.gov.uk (Великобритания)
Требования к технической части предоставления данных и их передачи на сайте Data.gov.uk не описаны.
Портал открытых данных
|
Критерии W3C (количество звёзд)
|
Число массивов данных
|
Публикуются ли приложения
|
Какая лицензия используется
|
Data.gov.uk (Великобритания)
|
5
|
8664
|
7
|
UK Open Government Licence (OGL)
|
По адресу http://data.gov.uk/blog/local-spending-data-guidance расположен проект руководства для местных властей по открытой публикации всех финансовых транзакций свыше 500 фунтов с января 2011 в соответствии с распоряжением премьер-министра. В части 3 руководства сказано, что данные должны быть сохранены в формате CSV. Файлы Microsoft Excel должны быть конвертированы в CSV. В приложениях к проекту руководства детально описывается заполнение всех столбцов в файле CSV.
1.1.3Publicdata.eu (Европейский союз)
На сайте Europe's Public Data не размещены требования к публикуемым открытым рядам данных.
Портал открытых данных
|
Критерии W3C (количество звёзд)
|
Число массивов данных
|
Публикуются ли приложения
|
Какая лицензия используется
|
Publicdata.eu (Европейский союз)
|
3
|
2049
|
51
|
Не всегда присутствует открытая лицензия
|
1.1.4Data.gov.nz (Новая Зеландия)
На сайте data.govt.nz указано, что данные не принимаются в формате PDF. Чтобы разместить данные на сайте, необходимо заполнить стандартную типовую онлайн-форму включающую поля:
Название набора данных.
Ссылка на адрес в сети Интернет, откуда набор данных можно загрузить.
Описание данных.
В форме необходимо указать категорию данных, выбрав одну из следующих:
Искусство, Культура, Наследие;
Строительство;
Торговля;
Образование;
Занятость;
Охрана окружающей среды;
Финансы, налоги, экономика;
Здоровье;
Инфраструктура;
Земля;
Сельское, лесное, рыбное хозяйство;
Местные и региональные органы власти;
Миграция, население и общество;
Наука, научные исследования;
Госсектор;
Туризм, транспорт.
Необязательным полем являются ключевые слова, которые рекомендуется разделять запятыми.
Необходимо заполнить информацию о формате размещаемых данных, выбрав из имеющихся вариантов: CSV, Таблица, KML/SHP, XML-ATOM-RSS, API, ASCII, Datastream, База данных, Таблицы-HTML, Другие GEO, Другой формат.
Необходимо описать существующую лицензию, уже используемую в наборе данных.
Желательно указать дату создания и обновления размещаемого массива данных.
Обязательными для заполнения полями формы являются поля со сведениями о том, как часто будут обновляться данные и указанием ответственных за обновление агентств.
На последнем этапе заполняется контактная информация.
Портал открытых данных
|
Критерии W3C (количество звёзд)
|
Число массивов данных
|
Публикуются ли приложения
|
Какая лицензия используется
|
data.govt.nz (Новая Зеландия)
|
3
|
1947
|
Нет
|
Creative Commons Attribution 3.0 New Zealand licence
|
1.1.5Data.gov.au (Австралия)
В разделе http://data.gov.au/suggest/ расположена форма обратной связи, для желающих получить ещё не размещённый на сайте ряд данных. Форма состоит всего из 3 полей
Имя
e-mail
Какой ряд данных Вы бы хотели видеть на сайте?
Указано, что администрация сайта сделает всё от себя зависящее, чтобы связаться с агентством, которое может предоставить такой ряд данных.
Других требований по размещению информации на сайте нет.
Портал открытых данных
|
Критерии W3C (количество звёзд)
|
Число массивов данных
|
Публикуются ли приложения
|
Какая лицензия используется
|
Data.gov.au (Австралия)
|
3
|
1120
|
19
|
Creative Commons Attribution 3.0 Australia licence
|
1.1.6Data.worldbank.org (портал открытых данных Всемирного Банка)
Требования по технической части предоставления, передачи данных на портале открытых данных всемирного банка Data.worldbank.org не публикуются.
Портал открытых данных
|
Критерии W3C (количество звёзд)
|
Число массивов данных
|
Публикуются ли приложения
|
Какая лицензия используется
|
Data.worldbank.org (портал открытых данных Всемирного Банка)
|
3
|
1260
|
1
|
Не определено
|
1.1.7Data.un.org (портал открытых данных ООН)
На портале открытых данных ООН нет информации о регламентах передачи и предоставления данных.
Портал открытых данных
|
Критерии W3C (количество звёзд)
|
Число массивов данных
|
Публикуются ли приложения
|
Какая лицензия используется
|
Data.un.org (портал открытых данных ООН)
|
3
|
34
|
нет
|
Не определено
|
1.1.8Data.norge.no (Норвегия)
На портале открытых данных Норвегии расположены не требования по технической составляющей данных, а пожелания. Сказано, что если есть желание разместить данные, не нужно ждать, когда они станут «идеальными». Самое главное, что данные станут всем доступны.
На сайте Data.norge.no размещено краткое руководство по размещению данных. В руководстве описаны причины, по которым данные на сайте не будут опубликованы. Такими четырьмя ключевыми причинами являются:
Авторские права;
Конфиденциальные данные;
Коммерческие тайны;
Безопасность.
В руководстве рассмотрена пятизвёздочная шкала W3C. Также рассказывается о стандартизации данных. Для стандартизации рекомендуется в максимально возможной степени использовать установленные стандарты и включать официальные идентификаторы наборов данных, таких как номер, промышленные коды, коды услуг и т.д. Даётся совет избегать стандартизации, если при этом теряется информационная ценность, например, когда стандартизация не позволяет рассчитывать вернуться к исходному значению данных. Рекомендуется избегать округления данных в наборе.
В разделе API по ссылке http://data.norge.no/datahotell/api описаны процедуры предоставления и передачи рядов данных с примерами.
Пример загрузки всего набора данных:
Если хотите скачать список округов в формате JSON, я могу сделать это с этого адреса:
http://hotell.difi.no/api/json/difi/geo/fylke
Чтобы загрузить тот же список в формате CSV, я могу сделать это с этого адреса:
http://hotell.difi.no/api/csv/difi/geo/fylke
Примеры загрузки определённых полей:
Определения полей для набора данных можно скачать в формате JSON:
http://hotell.difi.no/api/json/difi/geo/fylke/fields
Или в XML:
http://hotell.difi.no/api/xml/difi/geo/fylke/fields
Техническое описание API в формате XML доступно по адресу:
http://hotell.difi.no/api/application.wadl
Портал открытых данных
|
Критерии W3C (количество звёзд)
|
Число массивов данных
|
Публикуются ли приложения
|
Какая лицензия используется
|
Data.norge.no (Норвегия)
|
3
|
34
|
13
|
Norwegian Licence for Open Government Data (NLOD)
|
1.1.9Dati.gov.it (Италия)
На государственном портале открытых данных Италии Dati.gov.it регламенты по размещению и передаче рядов данных не публикуются. Однако, в разделе http://www.dati.gov.it/content/voglio-capire расположено справочное руководство по открытым данным на итальянском языке, доступное для скачивания по ссылке: http://www.dati.gov.it/sites/default/files/VademecumOpenData.pdf
Часть II справочника, называющаяся «Как действовать, чтобы открыть данные». содержит описание технических, организационных и правовых аспектов открытия данных.
Если кто-то хочет разместить рад данных на портале Dati.gov.it, необходимо заполнить форму, размещённую по адресу http://www.dati.gov.it/node/add/dataset
В форме указываются следующие характеристики набора данных:
Название набора данных;
Описание данных;
URL страницы, на которой доступны данные;
Дата последнего обновления данных;
Начальная и конечная даты данных в наборе;
Имя подразделения или должностного лица, которое осуществляет надзор за данными;
Уровень административной единицы, размещающей данные;
Глава учреждения, размещающего данные;
Контактная информация – город, провинция, область, имя и e-mail автора.
Портал открытых данных
|
Критерии W3C (количество звёзд)
|
Число массивов данных
|
Публикуются ли приложения
|
Какая лицензия используется
|
Dati.gov.it (Италия)
|
4
|
300
|
119
|
IODL 2.0, CC BY
|
1.1.10Dados.gov.pt (Португалия)
На сайте государственных данных Португалии Dados.gov.pt отсутствуют регламенты и описания процедур передачи данных. Не опубликовано никаких технических требований к порядку предоставления данных.
В разделе FAQ по ссылке http://www.dados.gov.pt/PT/Info/PerguntasFrequentes.aspx сказано, что данные для сайта Dados.gov.pt предоставляются на добровольной основе различными органами государственного управления.
Портал открытых данных
|
Критерии W3C (количество звёзд)
|
Число массивов данных
|
Публикуются ли приложения
|
Какая лицензия используется
|
Dados.gov.pt (Португалия)
|
3
|
346
|
6
|
Не определено
|
1.1.11Data.gc.ca (Канада)
На официальном сайте открытых данных Канады Data.gc.ca информация о подана в довольно официозной манере (в сравнении с подобными порталами других стран). Вместе с тем, каких-либо регламентов по передаче данных, их хранению не размещено. Нет на сайте также инструкций и по предоставлению новых рядов данных и рекомендаций по форматам данных.
Портал открытых данных
|
Критерии W3C (количество звёзд)
|
Число массивов данных
|
Публикуются ли приложения
|
Какая лицензия используется
|
Data.gc.ca (Канада)
|
3
|
273352
|
нет
|
Open Data License 1.1, Crown Copyright
|
1.1.12Data.gouv.fr (Франция)
На государственном портале открытых данных Франции Data.gouv.fr не публикуются какие-либо рекомендации по размещению данных. Не описаны требования и регламенты по передаче и предоставлению данных. Также, отсутствует форма обратной связи для запроса новых рядов данных, которые пользователь хотел бы видеть на сайте. Требования к рекомендуемым форматам файлов не описываются.
Портал открытых данных
|
Критерии W3C (количество звёзд)
|
Число массивов данных
|
Публикуются ли приложения
|
Какая лицензия используется
|
Data.gouv.fr (Франция)
|
3
|
354927
|
нет
|
Open License
|
1.1.13Opendata.cz (Чехия)
На портале государственных открытых данных Чехии Opendata.cz не опубликованы регламенты предоставления, передачи и хранения данных. Однако для размещения новых рядов данных можно заполнить форму по адресу http://cz.ckan.net/dataset/new.
В форме необходимо заполнить следующие поля:
Заголовок;
URL;
Выбор лицензии;
Описание данных.
Технические требования к данным для публикации на портале Opendata.cz не описываются.
Портал открытых данных
|
Критерии W3C (количество звёзд)
|
Число массивов данных
|
Публикуются ли приложения
|
Какая лицензия используется
|
Opendata.cz (Чехия)
|
5
|
161
|
3
|
Creative Commons Attribution 3.0 Czech Republic
|
1.1.14Data.gov.sg (Сингапур)
На портале государственных открытых данных Республики Сингапур Data.gov.sg нет рекомендаций к форматам данных для публикации. Отсутствует регламентирующая информация по предоставлению и передаче рядов данных, а также по их хранению на сайте.
Портал открытых данных
|
Критерии W3C (количество звёзд)
|
Число массивов данных
|
Публикуются ли приложения
|
Какая лицензия используется
|
Data.gov.sg (Сингапур)
|
3
|
7418
|
103
|
Не определено
|
1.1.15Другие проекты
1.1.15.1Портал открытых данных Траффорда:
http://www.trafford.gov.uk/opendata/
Траффорд – район в Великобритании. Траффорд входит в состав графства Большой Манчестер. По площади Траффорд занимает территорию в 106 кв. км. По данным переписи населения 2007 года в районе проживает 212,8 тыс. человек. Район Траффорд возник 1 апреля 1974 года. Образован он на основании Закона о местном самоуправлении, принятом в 1972 году.
Портал открытых данных Траффорда является примером сайта, на котором (в отличие от большинства крупных государственных порталов открытых данных) детально расписываются применяемые стандарты файлов открытых данных. Размещённая информация отлично структурирована.
В ответ на призыв правительства публиковать данные по тратам выше 500 фунтов с начала 2011, Траффорд размещает не только эту информацию в файлах CSV, но и всю информацию по платежам с апреля 2011 на ежемесячной основе.
Открытые данные Траффорд публикует по множеству и других направлений. Отметим среди прочих некоторые:
Информация о расположении центров развлечений, детских центров, библиотек, парковках в формате XML;
Информация о границах (KML, KMZ);
Результаты местных выборов (RDF);
Зарплаты руководителей (CSV);
Информация о муниципальных сборах (XML, CSV);
Информация о 15000 деревьях, о которых заботится совет (XML);
Расположение 27000 уличных фонарей (XML).
1.1.15.2Городской совет города Манчестер.
http://www.manchester.gov.uk/info/500215/open_data/4840/manchester_city_council_open_data/2
В ответ на требование правительства для местных властей, о публикации данных по тратам, превышающим 500 фунтов, Совет города Манчестер размещает такие данные на ежемесячной основе с января 2011 года. Информация предоставляется в формате CSV по адресу: http://www.manchester.gov.uk/downloads/download/4260/open_data-spend_over_500
Также на странице http://www.manchester.gov.uk/info/500215/open_data доступны для скачивания данные по темам:
Картографические данные по избирательным округам (KML) и границам Манчестера (KMZ);
Данные о переработке отходов и мусора (CSV);
Данные о парковках и дорогах (CSV);
Экологические услуги (CSV);
Школы (CSV);
Данные о рождениях, браках, смертях (CSV);
Работа, карьера, обучение (CSV).
|