RU:Wikidata

Wikidata — это бесплатная база знаний, управляемая сообществом и размещённая на платформе Фонда Викимедиа. Помимо предоставления хранилища для связанных открытых данных, она направлена на поддержку Википедии и родственных ей проектов (таких как Википутешествие). Как и в случае с Википедией, любой может редактировать Wikidata. Как и в случае с Википедией, это скорее сборник цитат, чем оригинальный источник. Данные Wikidata предоставляются по лицензии CC0 («общественное достояние»). Обратите внимание, что импорт данных из Wikidata в OSM обычно невозможен из-за несовместимости авторских прав (подробнее см. в этом разделе).
![]() | Не копируйте информацию из Викиданных в OSM, не проверив её правовой статус. Много расхождений. |
Зачем ссылаться на Викиданные?
Сэр Тим Бернерс-Ли разработал концепцию «Пять звёзд открытых данных», пятый и самый высокий уровень связи в которой описывается так: «свяжите свои данные с другими данными, чтобы обеспечить понимание контекста». Добавляя идентификатор Wikidata (который программное обеспечение воспринимает как URI) в объект OSM, мы связываем его с объектом (называемым Q или «элементом», в оригинале item) в Wikidata, а оттуда, прямо или косвенно, со многими другими элементами Wikidata и объектами во многих других системах. Это делает OSM частью графа связанных открытых данных Linked Open Data graph, а не изолированной системой.
С практической точки зрения это позволяет любому пользователю OSM получать дополнительные данные и ссылки на другие базы данных, где упомянут объект OSM. Это может быть, например, численность населения города в настоящее время и в разные периоды его истории, или дата и место рождения архитектора здания, а также его портрет, или ссылка на систему, показывающую количество осадков за последнюю неделю в заповеднике. Со временем это может позволить выполнять более сложные запросы, например: «все научные статьи, написанные людьми, родившимися в этой деревне, отсортированы по количеству цитирований в других статьях». (Некоторые из этих сторонних данных имеют лицензию, совместимую с OSM, а некоторые — нет, и поэтому их не всегда можно использовать повторно. Caveat emptor - Будь бдителен!)
Возможность использования Викиданных в качестве "сосредоточия идентификаторов" должна предотвратить распространение тегов ref для множества внешних систем / баз данных на объектах OSM и снизить последующее бремя обслуживания. Часто возникают споры о том, являются ли ссылки конкретной системы достаточно значимыми, чтобы быть частью OSM, или же более уместно полагаться на Викиданные.
Включение тегов Wikidata в OSM означает, что объекты OSM могут быть получены и использованы другими системами, такими как выделенные информационные блоки в Wikimedia Commons и т. д. (см. раздел «Использование»).
Викиданные - это *не* Википедия
Викиданные содержат данные из множества источников, помимо Википедии, и хотя многие элементы Викиданных изначально были сгенерированы на страницах Википедии. Элементы Викиданных нередко получили другие названия, чем связанные с ними статьи Википедии, чтобы они больше походили на базу данных.
Элементы Викиданных указывают на статьи Википедии на нескольких языках, которые могут сильно отличаться друг от друга. Преимущество Викиданных заключается в том, что они содержат цитируемые данные, а не только ссылки на содержимое Википедии.
Ссылка из OSM на Викиданные

Объекты Викиданных можно связать с любым объектом OSM с помощью ключа wikidata=*. Ключ имеет формат «Qnnnnn» (например, Q936 — это объект Викиданных, представляющий OpenStreetMap). Объекты Викиданных не зависят от человеческого языка, они обычно содержат многоязычные именования, но ключи Викиданных вида Q* не предназначены для чтения человеком, в отличие от других элементов OSM.
Не всегда существует однозначное соответствие между OSM и Викиданными. Элемент Викиданных может относиться к нескольким разным объектам базы данных OSM, например: муниципалитет, административный район, город и остров могут иметь одно и то же название, но по-разному отображаться в OSM. В этом случае рассмотрите возможность разделения элемента Викиданных (или обратитесь за помощью, если не знаете, как это сделать). Некоторые элементы Викиданных представляют собой объекты, которые отображаются в OSM как последовательность из нескольких объектов (например, длинные улицы, реки, музей с двумя зданиями по разные стороны шоссе). В таких случаях элемент Викиданных можно связать с соответствующим отношением OSM.
Другой способ связать объекты — использовать wikipedia=*, однако разметка Wikidata гораздо более атомарна и похожа на базу данных, чем Wikipedia. Преимущество тега wikipedia=* в том, что он удобочитаем для человека, хотя различные инструменты OSM нередко отображают метку (языковое именование) связанного элемента Wikidata вместе с его непонятным QID.
В Викиданных могут обнаруживаться дубликаты, которые следует объядинять при уверенности, что нкиакой разницы нет. Один из них (обычно более новый) становится перенаправлением. OSM не должен указывать на объект перенаправления, так как это может привести к игнорированию ссылки в некоторых запросах; при обнаружении такой ссылки она должна быть обновлена.
В качестве квалификатора тега
- Основная статья: Key:wikidata#Secondary Wikidata links
- brand:wikidata=* используются для идентификации магазинов и т.д. Как части бренда, например "Burger King" Q177054. Он будет использоваться в дополнение к удобочитаемому бренду=Burger King. Указатель предложений по названию предлагает бренд: wikidata=* brand:wikidata=* среди других тегов и используется для настройки заготовок в iD, Vespucci, JOSM и других редакторах.
- operator:wikidata=* похож на бренд, но, возможно, является франчайзи..
- species:wikidata=* это машиночитаемая форма вида, species=* используемая в разметке растительных объектов: деревьев, лесов, посадок.
- network:wikidata=* это машиночитаемая форма network=*, используемая в сочетании с дорожными и велосипедными сетями, а также сетями проката велосипедов и банкоматами.
Инструменты
Связать викиданные с элементами OSM
wikidata=* элементы могут быть добавлены в OSM с помощью:
- ID редактор по вызову поля «Викиданные».
- JOSM открывает описание элемента Wikidata в браузере.
- JOSM/Plugins/Wikipedia – есть кнопка для запроса Викиданных и добавления тегов к выбранному элементу OSM из близлежащего объекта Викиданных.
- Обратите внимание, что координаты можно скопировать непосредственно из JOSM в элемент Викиданных; просто выберите соответствующий узел, нажмите Ctrl+⇧ Shift+C, а затем вставьте в поле «Географические координаты» элемента.
- JOSM/Plugins/Wikipedia – есть кнопка для запроса Викиданных и добавления тегов к выбранному элементу OSM из близлежащего объекта Викиданных.
- OSMgadget – гаджет Mediawiki для получения данных OSM при просмотре Википедии.
- OSM ↔ Wikidata (osm.wikidata.link) – определяет возможные совпадения и позволяет быстро добавлять их в OSM.
- https://map.osm.wikidata.link/ - улучшенная версия
- FOSDEM 2023 talk on this tool
- Wikipedia where in OSM (WIWOSM) это проект, который показывает в статьях Википедии геометрические объекты из OpenStreetMap.
Инструменты валидации (проверки совмещения)
- Sophox: Точка SPARQL запросов для OSM, позволяющая совмещать данные Wikidata и проверять сквозные ссылки через совмещённые запросы
- wdlocator: Картографическое окно для просмотра совмещённых данных OSM и Wikidata
- OSM-Wikidata Map: Картографическое окно для просмотра совмещённых данных OSM/OHM и Wikidata с опорой на проверку разной комбинации источников.
Гарантирование качества
- OpenStreetMap Wikidata Quality Checker Программа проверки качества данных OpenStreetMap в Викиданных ищет недействительные или неточные ссылки между OpenStreetMap и Викиданными, оценивая теги ВикиданныхWikidata tags. Об обнаруженных проблемах сообщается Osmose.
- OSM-wikipedia-tag-validator-reports – страница, на которой перечислены объекты OpenStreetMap, у которых есть теги Википедии / Викиданных с некоторыми проблемами. Ттакже существует версия проекта MapRoulette под названием «исправление неработающих тегов Википедии» "fix broken Wikipedia tags".
Пользовательские скрипты Викиданных, использующие связь с OSM
Несколько пользовательских скриптов в Wikidata позволяют запрашивать и отображать карту на основе OSM для конкретных элементов в Wikidata, соответствующих элементам OSM:
- GeoHack replacement script — Скрипт замены GeoHack — заменяет внешние ссылки на координаты в GeoHack на прямые ссылки на одного поставщика карт (например, на OSM).
- overpass — встраивает карту, отображающую объекты, помеченные текущим элементом в OpenStreetMap. Работает на Overpass Turbo
- ClaimMaps – — добавляет карты в раздел «Идентификатор отношения OpenStreetMap» (P402) или «Геоформа» (P3896)
- osm.js — добавляет ссылку на OSM в раздел «Инструменты» на странице элемента
Ссылка из Викиданных на OSM
- Коды отношений OSM Relation можно добавить в записи Wikidata с помощью свойства P402
- Коды линий OSM Way можно добавить в записи Викиданных с помощью свойства P10689
- Коды точек OSM Node можно добавить в записи Викиданных с помощью свойства P11693
Викиданные не считают линии и точки стабильными кодами, потому что, например, точка может быть удалена, а объект позднее будет добавлен заново в виде многоугольника. На практике так бывает не редко, но и не часто. Для решения этой проблемы была предложена концепция Permanent ID.
- Связанные c Wikidata отношения OSM можно просмотреть с помощью: Special:WhatLinksHere/Property:P402, их суммарное количество оценивается SPARQL запросом.
- Связанные c Wikidata линии OSM можно просмотреть с помощью: Special:WhatLinksHere/Property:P10689, их суммарное количество оценивается SPARQL запросом.
- Связанные c Wikidata линии OSM точки просмотреть с помощью: Special:WhatLinksHere/Property:P11693, их суммарное количество оценивается SPARQL запросом.
Свойства, связанные с OpenStreetMap, в Викиданных
Коды географических объектов
- Код отношения в OpenStreetap (P402)
- При использовании свойства P402 с маршрутами в Викиданных ожидается наличие одного отношения, связанного с концепцией Qid в Викиданных. Для маршрутов, которые поддерживают более одного типа, рекомендуется создавать надотношение для связанного объекта, поскольку элементы Викиданных обычно относятся к маршруту, а не к разрешению для каждого вида транспорта. См. создание надротношений.
- Код линии OpenStreetMap(P10689)
- Код точки OpenStreetMap(P11693)
Объект OSM (предлагался когда-то для создания ссылок на точки, линии и пр.)- Код отношения OpenHistoricalMap(P8424)
Прочее
- Тег или ключ OpenStreetMap(P1282)
- Масштаб OpenStreetMap в уровнях от 0 до 19..21(P6592)
- Name Suggestion Index identifier (P8253)
- Код пользователя OpenStreetMap как целое число(P8754)
- Код из проекта Humanitarian OpenStreetMap Tasking Manager(P8973)
- Код заполнителя текстового элемента (P9410) Придуман для систематизации маршрутной таблицы по США.
Теги и ключи OSM
Список эквивалентных тегов и ключей OSM в Викиданных см. в разделе список ссылок на Викиданные (12) в этой энциклопедии и спирсок ссылок на OpenStreetMap тег или ключ (P1282) на Викиданных.
Запрос SPARQL для поиска элементов этой энциклопедии OSM wiki, не приеделанных к Викиданным: элементы, к которым не приделана ссылка wikidata
Применение связей OSM и Викиданных
Фонд Викимедиа
Проекты Фонда Викимедиа, в том числе Википедия на разных языках, отображают карты с использованием данных OSM. Если объект в OSM помечен wikidata=*, его контур можно показать на карте. На данный момент поддержка POI отсутствует. Таким образом можно отображать только контуры и линии, см. w:mw:Help:Extension:Kartographer#External_data.
Области OSM (а не точки или линии) с wikidata=* выделяются в информационных блоках ВикиСклада и т. д.
Расширение Kartographer связывает объекты OSM с их статьями в Википедии, если у объекта есть wikidata=*, см., пример с картой в информационном окне.
Если код Wikidata, присвоенный объекту OSM, является ссылкой на перенаправление, то объект не будет выделен на картах Викимедиа.
UMap
- UMap wikidata — карта, показывающая результаты динамического запроса (через Overpass) элементов OSM, помеченных wikidata=*. Отставание обновления не более 30 секунд.
Резонатор (в оригинале другой смысл: Reasonator)
Reasonator, который предоставляет удобный интерфейс для работы с Викиданными, теперь показывает две ссылки для записей с геотегами ОСМ: TagInfo и Overpass turbo, запрашивающие эти теги.
Например, указанныая страница разонатора ссылается на:
Вы увидите ссылки прямо под изображениями карты.
Картограф
Элементы OSM, помеченные кодами элементов Викиданных, могут отображаться на страницах Википедии в виде наложений на карты на основе OSM с помощью расширения Картограф/Kartographer. О деталях см.Kartographer/OSM.
Эта энциклопедия (OSM wiki)
Шаблоны для создания ссылок на страницы Викиданных:
- [[d:|]] — отображение ссылки на элемент Викиданных по его уникальному (надеюсь, стабильному) идентификатору.
- {{{1}}} — отображение ссылки на свойство Викиданных по его уникальному (надеюсь, стабильному) идентификатору.
Запрос викиданных и OSM
Данные Wikidata можно получить несколькими способами, один из которых — SPARQL. Поскольку данные OSM также можно запрашивать с помощью SPARQL, Wikidata «объединяет» эти два ресурса, позволяя запрашивать их совместно. См. об объединённых/федеративных запросах.
Некоторые службы запросов на основе OSM, с которыми объединяются Викиданные:
- LinkedGeoData — см. подробнон описание LinkedGeoData в Викиданных.
- Sophox (примеры запросов)
- QLever (примеры запросов)
Импорт данных
Импорт данных из OSM в викиданные
![]() | Не копируйте никакую информацию из OSM в Викиданные. Правовой статус такого копирования порождает коллизию и нарушение лицензионных прав. |
Копирование данных из OSM в Викиданные (или даже из других проектов Викимедиа) *запрещено*, поскольку Викиданные используют лицензию Creative Commons CC0 в стиле общественного достояния, которая не содержит положений об указании авторской приндлежности или совместном использовании, которые являюится основой лицензии данных ОСМ. Недопустимость копирования очевидно не относится к исходным данным, которые вы создали самостоятельно, например, с помощью собственных осмотров, опросов, разметок. Такие данные вы имеете право распространять под любыми лицензиями.
Примечание: правовая группа фонда Викимедиа подтверждает, что для баз данных, физически размещаемых в юрисдиекции ЕС следует избегать использования ботов или других автоматизированных способов извлечения данных из-за запрета Директивы ЕС на «повторное и систематическое извлечение» даже незначительных объёмов данных. См. w:m:Wikilegal/Database Rights#Conclusion
Импорт данных из викиданных в OSM
![]() | Не копируйте информацию из Викиданных в OSM, не проверив её правовой статус. Много расхождений. |
Wikidata использует лицензию CC0, которая, на первый взгляд, позволяет импортировать данные в OSM. Однако OSM, как правило, не принимает данные из Wikidata из-за источников, которые часто используются для пополнения Wikidata. Значительная часть пространственных данных Wikidata была получена из Википедии, в которой, например, большинство координат получены из продуктов с лицензиями, конфликтующими с OSM. Списки Википутешествий также относятся к сомнительным и разнородным источникам для первичной разметки.
Обратите внимание, что лицензия CC0 «распространяется только на материалы, на которые у лицензиара действительно есть права, и, в частности, не содержит заявлений о статусе любых сторонних материалов, включенных в набор данных. Для использования в OpenStreetMap необходимо определить лицензии на все данные, включенные в набор данных, и проверить их совместимость.»[1]
Например, копирование из Google Maps в OpenStreetMap (включая транзитное или косвенное) недопустимо, как и копирование координат из Wikidata (которые были скопированы в Википедию из Google Maps). Обратите внимание, что Википедия разрешает и поощряет использование Google Maps для получения данных о координатах[2] и других источников, которые нельзя использовать в OSM[3].
То же самое относится и к любым другим данным, присутствующим в Викиданных.
Импорт разрешен только для содержимого Wikidata, которое было импортировано из источников, совместимых с OSM, что исключает, например, координаты, полученные из Википедии и не оцененные с точки зрения совместимомости их выявленного источника с ОСМ.
Данные ОСМ в лицензионном отношении ориентированы на наибольшую свододу применения и использования, они должны использоваться на законных основаниях в любой стране[4]. Поэтому ОСМ признаёт sui generis право на базу данных. В качестве вывода: импорт информации из Wikidata в OSM, как правило, не разрешён, поскольку Wikidata имеет более низкие стандарты в отношении авторских прав, чем OSM. Кроме того, Wikidata содержит некоторые данные из источников, которые нам запрещено использовать[5].
В редких случаях, когда можно убедиться, что данные имеют приемлемый статус авторских прав, можно использовать часть данных Викиданных.
Из истории вопроса
- 2013-09-12: предложение автоматически добавлять идентификаторы Викиданных к ряду объектов OSM.
- 2016-10-27: Mapbox предложил процедуру импорта, но пока не получил нужных отзывов сообщества и поэтому временно отказался от неё.
- 2016-11-17: По этому же образцу предложено массовое добавление данных , но оно также было отложено до дальнейшего обсуждения сообществом [1].
Научные статьи об OSM
В Викиданных есть информация научных статьях об OSM. Их можно посмотреть в Схолии / Scholia.
Примечания и ссылки
- ↑ https://wiki.osmfoundation.org/wiki/Licence/Licence_Compatibility#CC0
- ↑ w:Wikipedia:Obtaining geographic coordinates#Google Maps
- ↑ w:Wikipedia:Obtaining geographic coordinates#From printed maps
- ↑ https://lists.openstreetmap.org/pipermail/talk/2017-October/079065.html
- ↑ https://lists.openstreetmap.org/pipermail/talk/2017-October/079127.html
Иные ссылки
- OpenStreetMap – страница по организации совместной работы в Викиданных..
- Викиданные: Картографические данные
- Sophox: служба запросов SPARQL для OSM, позволяющая объединять данные из Wikidata и проверять ссылки с помощью федеративных запросов см.
- wdlocator: интерактивная карта, объединяющая данные OSM и Wikidata
- OSM-Wikidata Map: интерактивная карта, объединяющая данные OSM и Wikidata
- OSM ↔ Wikidata (https://osm.wikidata.link/) — внешний инструмент, редактор ОСМ, который обнаруживает возможные совпадения с Викиданными и позволяет быстро добавлять их в OSM.
- https://map.osm.wikidata.link/ — новая улучшенная версия с исправлениями проблем
- QRank — рейтинг объектов Викиданных по количеству просмотров страниц во всех проектах Викимедиа (Википедия, Wikitravel, Викивиды и т. д.) и на всех языках. Может быть полезен для рендеринга, геокодирования или определения приоритетности обслуживания данных в OSM.
- “Wikidata for relevance?” — запрос на GitHub для использования данных Викиданных для ранжирования в Nominatim, инструменте поиска названий объектов в OSM.
- Ключ wikimedia_commons=* в данных OpenStreetMap может указывать на соответствующий медиафайл, страницу галереи с описаниями или категорию на Викискладе.
- Метка на Медиавики для участников OpenStreetMap
- FactGrid — похож на Викиданные, но предназначен для оригинальных исследований без каких-либо критериев значимости.
|