Полезные ссылки про данные, технологии и не только:
- mnemiq - текст-в-SQL движок с открытым кодом и подробным рассказом почему его сделали, как он устроен и чем отличается от ранее существующих. Если кратко, то создатели сфокусировались на разных SQL диалектах и преодолении ограничения в 30 таблиц у движка Genie от Databricks. Полезно для всех кто работает с большими корпоративными хранилищами данными, сложно устроенными и с большим числом таблиц.
- Pandas Should Go Extinct текст где автор рассуждает о том что давно уже не надо использовать Pandas в разработке и аналитике потому что альтернативы Polars и DuckDB лучше настолько что непонятно почему ими не пользуются.
- Tau ещё один терминальный кодирующий агент, пока не могу сказать чем он лучше других, но он есть и его можно попробовать
- Cline Desktop настольное приложение для запуска моделей с открытыми весами. Обещают много разного полезного и есть версии для Mac и Windows. С открытым кодом
- OpenResearch параллельно работающие исследовательские агенты в локальном окружении. Приложение для Windows и Mac, с открытым кодом. По мне так в описании маловато кейсов описано
#opensource #ai #tools #data
- mnemiq - текст-в-SQL движок с открытым кодом и подробным рассказом почему его сделали, как он устроен и чем отличается от ранее существующих. Если кратко, то создатели сфокусировались на разных SQL диалектах и преодолении ограничения в 30 таблиц у движка Genie от Databricks. Полезно для всех кто работает с большими корпоративными хранилищами данными, сложно устроенными и с большим числом таблиц.
- Pandas Should Go Extinct текст где автор рассуждает о том что давно уже не надо использовать Pandas в разработке и аналитике потому что альтернативы Polars и DuckDB лучше настолько что непонятно почему ими не пользуются.
- Tau ещё один терминальный кодирующий агент, пока не могу сказать чем он лучше других, но он есть и его можно попробовать
- Cline Desktop настольное приложение для запуска моделей с открытыми весами. Обещают много разного полезного и есть версии для Mac и Windows. С открытым кодом
- OpenResearch параллельно работающие исследовательские агенты в локальном окружении. Приложение для Windows и Mac, с открытым кодом. По мне так в описании маловато кейсов описано
#opensource #ai #tools #data
Agentic Fabriq
mnemiq: text-to-SQL you can tune to your database — Agentic Fabriq
An open-source text-to-SQL engine that opens up the black box: change the model, retrieval, semantic layer and verifier, then benchmark those choices on your own database.
✍3🔥3❤1❤🔥1
В рубрике как это устроено у них Rwanda Data Sharing Platform платформа обмена данными Руанды, де-факто портал открытых данных страны. Содержит 265 наборов данных, в первую очередь статистических показателей и микроданных. Имеет весьма продуманный интерфейс с документированными схемами данных, прегенрированным кодом Python, Curl, JS и тд. для выгрузки данных, возможностью их предпросмотра, подробным описанием и так далее.
Из минусов:
- сейчас данные только одного ведомства, статслужбы, видимо оно функциональный заказчик у непосредственного заказчика разработки RISA - агентства информационного общества страны
- портал адаптирован под отображение табличных данных и там сейчас только плоские таблицы.
Видно что его заказывали статистики, он построен полностью вокруг таблиц и, тоже, по модели что один набор данных = один файл = одна таблица. Архитектурно - это ошибка, но если там будет только статистика то это допустимо. И это точно удобнее чем извлекать данных с сайта их статслужбы где, конечно, есть Excel файлы, но API завсегда удобнее когда актуально и обновляется.
Справочно: Руанда быстро развивающаяся восточноафриканская страна с 14 миллионами населения и 16 миллиардами USD ВВП.
#opendata #datacatalogs #rwanda #statistics
Из минусов:
- сейчас данные только одного ведомства, статслужбы, видимо оно функциональный заказчик у непосредственного заказчика разработки RISA - агентства информационного общества страны
- портал адаптирован под отображение табличных данных и там сейчас только плоские таблицы.
Видно что его заказывали статистики, он построен полностью вокруг таблиц и, тоже, по модели что один набор данных = один файл = одна таблица. Архитектурно - это ошибка, но если там будет только статистика то это допустимо. И это точно удобнее чем извлекать данных с сайта их статслужбы где, конечно, есть Excel файлы, но API завсегда удобнее когда актуально и обновляется.
Справочно: Руанда быстро развивающаяся восточноафриканская страна с 14 миллионами населения и 16 миллиардами USD ВВП.
#opendata #datacatalogs #rwanda #statistics
👍4✍1🔥1
🇬🇪 Открытые данные Грузии: где искать?
Разбираем экосистему грузинских каталогов данных — от национального портала до городских карт.
Вот главные источники:
📊 Data.gov.ge — национальный портал открытых данных Официальный портал, запущенный в рамках инициативы Open Government Partnership. Ведёт Агентство цифрового управления при Минюсте. Наборы данных госорганов, интерфейсы на грузинском и английском. 🔗 data.gov.ge
📈 GEOSTAT Data Catalog — статистика Грузии Официальная база Национального статистического управления (Geostat) на платформе PxWeb. Демография, экономика, сельское хозяйство, экология — многомерные таблицы с открытым API (PxWeb API). 🔗 https://pc-axis.geostat.ge/PXWeb/pxweb/ka/Database
🗺 NSDI.gov.ge — национальный геопортал Геопортал национальной инфраструктуры пространственных данных от Национального агентства публичного реестра (NAPR). Поиск, просмотр и скачивание геоданных, каталог метаданных. А рядом — интерактивная кадастровая карта maps.gov.ge с участками, адресами и ортофото.
🌲 Forest & Land Use Atlas — atlas.mepa.gov.ge Атлас лесов и землепользования Министерства экологии и сельского хозяйства на ArcGIS Hub.
🔬 OpenScience.ge — научный репозиторий Цифровой репозиторий грузинских научных работ (DSpace-CRIS) Национальной научной библиотеки: статьи, диссертации, научная продукция. Есть API и OAI-PMH.
💰 Тематические порталы:
▫️ opendata.spa.ge — госзакупки в формате Open Contracting Data Standard
▫️ sdg.gov.ge — мониторинг Целей устойчивого развития
▫️ budgetmonitor.ge — бюджетный монитор Счётной палаты
🏘 Городские геопорталы:
▫️ Тбилиси — архитектурная карта мэрии (mgis.tbilisi.gov.ge)
▫️ Батуми — карта аварийных зданий (maps.batumi.gov.ge)
▫️ Кутаиси — геопортал мэрии (map.kutaisi.gov.ge)
📉 Бонус:
Caucasus Barometer (caucasusbarometer.org) — ежегодные данные социологических опросов по Кавказу от CRRC.
#opendata #georgia #datacatalogs #data #datasets
Разбираем экосистему грузинских каталогов данных — от национального портала до городских карт.
Вот главные источники:
📊 Data.gov.ge — национальный портал открытых данных Официальный портал, запущенный в рамках инициативы Open Government Partnership. Ведёт Агентство цифрового управления при Минюсте. Наборы данных госорганов, интерфейсы на грузинском и английском. 🔗 data.gov.ge
📈 GEOSTAT Data Catalog — статистика Грузии Официальная база Национального статистического управления (Geostat) на платформе PxWeb. Демография, экономика, сельское хозяйство, экология — многомерные таблицы с открытым API (PxWeb API). 🔗 https://pc-axis.geostat.ge/PXWeb/pxweb/ka/Database
🗺 NSDI.gov.ge — национальный геопортал Геопортал национальной инфраструктуры пространственных данных от Национального агентства публичного реестра (NAPR). Поиск, просмотр и скачивание геоданных, каталог метаданных. А рядом — интерактивная кадастровая карта maps.gov.ge с участками, адресами и ортофото.
🌲 Forest & Land Use Atlas — atlas.mepa.gov.ge Атлас лесов и землепользования Министерства экологии и сельского хозяйства на ArcGIS Hub.
🔬 OpenScience.ge — научный репозиторий Цифровой репозиторий грузинских научных работ (DSpace-CRIS) Национальной научной библиотеки: статьи, диссертации, научная продукция. Есть API и OAI-PMH.
💰 Тематические порталы:
▫️ opendata.spa.ge — госзакупки в формате Open Contracting Data Standard
▫️ sdg.gov.ge — мониторинг Целей устойчивого развития
▫️ budgetmonitor.ge — бюджетный монитор Счётной палаты
🏘 Городские геопорталы:
▫️ Тбилиси — архитектурная карта мэрии (mgis.tbilisi.gov.ge)
▫️ Батуми — карта аварийных зданий (maps.batumi.gov.ge)
▫️ Кутаиси — геопортал мэрии (map.kutaisi.gov.ge)
📉 Бонус:
Caucasus Barometer (caucasusbarometer.org) — ежегодные данные социологических опросов по Кавказу от CRRC.
#opendata #georgia #datacatalogs #data #datasets
👍4🔥2✍1
Forwarded from Open Data Armenia
🇦🇲 Каталоги данных Армении: где искать цифры, карты и микроданные
У Армении нет официального государственного open data-портала. Зато есть сильная официальная статистика, живой гражданский CKAN и довольно зрелая геоинфраструктура. Ниже — что реально работает и куда идти в первую очередь.
📊 Официальная статистика — главная опора
Ядро публикует Statistical Committee (Armstat). Это классический «скандинавский» стек, а не витрина PDF.
• ArmStatBank — национальный банк таблиц на PxWeb: население, экономика, сельское хозяйство, транспорт, экология. Есть API (EN/HY).
https://statbank.armstat.am
• SDG Armenia — национальный OpenSDG. 306 индикаторов ЦУР, 85% уже выложены онлайн (261 из 306). Слабое место — цель 14 «жизнь под водой»: онлайн только 31%.
https://sdg.armstat.am
• NSDP — страница макропоказателей по стандарту МВФ SDDS, с выгрузками SDMX.
https://armstat.am/nsdp/
• ArmStat Microdata Library — 26 исследований в NADA: переписи, ILCS (условия жизни домохозяйств), DHS, сельхозперепись 2014, AGRIS. Часть файлов открыта, часть — по запросу или на внешних площадках вроде DHS Program.
https://microdata.armstat.am
Отдельно — статистика Центрального банка: денежный рынок, финансы, макроряды. https://www.cba.am/en/statistics
📂 Открытые данные: гражданский каталог вместо госпортала
Роль национального каталога фактически играет команда Open Data Armenia.
• data.opendata.am — CKAN, 823 набора. Агрегирует госданные, науку и НКО: 8 организаций, крупнейший паблишер — сама Open Data Armenia (404 датасета), далее WorldPop, REC Caucasus, горная сеть Caucasus. Есть полноценный CKAN API.
https://data.opendata.am
Рядом — прикладные источники, которых нет в «красивом каталоге»:
• ARMEPS — электронные закупки Минфина. В публичных отчётах — Excel по процедурам, заявкам и контрактам.
https://armeps.am
• AirQuality.am — гражданский портал качества воздуха: PM1/PM2.5/PM10, температура и влажность, в том числе сенсоры мэрии Еревана. Есть JSON API и массовые выгрузки.
https://airquality.am
• Armhydromet — гидрометеоцентр Минприроды: наблюдения сети станций, месячные данные, годовые сводки.
https://meteomonitoring.am
🗺 Геоданные: кадастр, Севан, леса, недра
Здесь картина богаче, чем у многих соседей.
• Национальный геопортал (Комитет кадастра) — кадастр, адреса, ортофото, границы, рельеф, гидрография, транспорт. Это официальный NSDI-узел страны.
https://geoportal.am
• EcoPortal Минприроды — слои по озеру Севан, гидрографии, землепокрову и климатическим рискам. Публикуется через GeoServer WMS.
https://ecoportal.am
• Forest Atlas — интерактивный лесной атлас (MapBuilder Global Forest Watch), лицензия CC BY 4.0.
https://forestatlas.am
• Геологический фонд — месторождения, паспорта шахт, лицензии на недра, интерактивная карта.
https://www.geo-fund.am
• GIS Еревана — муниципальный ArcGIS Enterprise.
https://gis.yerevan.am/portal
• Ecosystem Accounting of Armenia — NextGIS-каталог Центра сохранения биоразнообразия: землепокров, экосистемные услуги, слои InVEST.
https://bccarmenia.nextgis.com
🔬 Наука
• ArVO / Бюракан — виртуальная обсерватория: оцифрованные пластины First Byurakan Survey и спектры, доступ через IVOA TAP.
http://arvo-registry.sci.am/
• ArmLifeBank — биомедицина Института молекулярной биологии НАН: геномика, транскриптомика, клинические и мультиомные наборы на FAIRDOM-SEEK.
https://armlifebank.am/
• OpenAIRE NOAD — цифровая библиотека Института проблем информатики НАН, OAI-PMH.
https://noad.sci.am
⚠️ Что важно понимать
Госпортала открытых данных нет. Если нужен «единый вход» — это CKAN сообщества, а не data.gov.am.
Лучший официальный слой — Armstat + кадастр + Минприроды, не министерские витрины.
#opendata #armenia #datacatalogs #datasets
У Армении нет официального государственного open data-портала. Зато есть сильная официальная статистика, живой гражданский CKAN и довольно зрелая геоинфраструктура. Ниже — что реально работает и куда идти в первую очередь.
📊 Официальная статистика — главная опора
Ядро публикует Statistical Committee (Armstat). Это классический «скандинавский» стек, а не витрина PDF.
• ArmStatBank — национальный банк таблиц на PxWeb: население, экономика, сельское хозяйство, транспорт, экология. Есть API (EN/HY).
https://statbank.armstat.am
• SDG Armenia — национальный OpenSDG. 306 индикаторов ЦУР, 85% уже выложены онлайн (261 из 306). Слабое место — цель 14 «жизнь под водой»: онлайн только 31%.
https://sdg.armstat.am
• NSDP — страница макропоказателей по стандарту МВФ SDDS, с выгрузками SDMX.
https://armstat.am/nsdp/
• ArmStat Microdata Library — 26 исследований в NADA: переписи, ILCS (условия жизни домохозяйств), DHS, сельхозперепись 2014, AGRIS. Часть файлов открыта, часть — по запросу или на внешних площадках вроде DHS Program.
https://microdata.armstat.am
Отдельно — статистика Центрального банка: денежный рынок, финансы, макроряды. https://www.cba.am/en/statistics
📂 Открытые данные: гражданский каталог вместо госпортала
Роль национального каталога фактически играет команда Open Data Armenia.
• data.opendata.am — CKAN, 823 набора. Агрегирует госданные, науку и НКО: 8 организаций, крупнейший паблишер — сама Open Data Armenia (404 датасета), далее WorldPop, REC Caucasus, горная сеть Caucasus. Есть полноценный CKAN API.
https://data.opendata.am
Рядом — прикладные источники, которых нет в «красивом каталоге»:
• ARMEPS — электронные закупки Минфина. В публичных отчётах — Excel по процедурам, заявкам и контрактам.
https://armeps.am
• AirQuality.am — гражданский портал качества воздуха: PM1/PM2.5/PM10, температура и влажность, в том числе сенсоры мэрии Еревана. Есть JSON API и массовые выгрузки.
https://airquality.am
• Armhydromet — гидрометеоцентр Минприроды: наблюдения сети станций, месячные данные, годовые сводки.
https://meteomonitoring.am
🗺 Геоданные: кадастр, Севан, леса, недра
Здесь картина богаче, чем у многих соседей.
• Национальный геопортал (Комитет кадастра) — кадастр, адреса, ортофото, границы, рельеф, гидрография, транспорт. Это официальный NSDI-узел страны.
https://geoportal.am
• EcoPortal Минприроды — слои по озеру Севан, гидрографии, землепокрову и климатическим рискам. Публикуется через GeoServer WMS.
https://ecoportal.am
• Forest Atlas — интерактивный лесной атлас (MapBuilder Global Forest Watch), лицензия CC BY 4.0.
https://forestatlas.am
• Геологический фонд — месторождения, паспорта шахт, лицензии на недра, интерактивная карта.
https://www.geo-fund.am
• GIS Еревана — муниципальный ArcGIS Enterprise.
https://gis.yerevan.am/portal
• Ecosystem Accounting of Armenia — NextGIS-каталог Центра сохранения биоразнообразия: землепокров, экосистемные услуги, слои InVEST.
https://bccarmenia.nextgis.com
🔬 Наука
• ArVO / Бюракан — виртуальная обсерватория: оцифрованные пластины First Byurakan Survey и спектры, доступ через IVOA TAP.
http://arvo-registry.sci.am/
• ArmLifeBank — биомедицина Института молекулярной биологии НАН: геномика, транскриптомика, клинические и мультиомные наборы на FAIRDOM-SEEK.
https://armlifebank.am/
• OpenAIRE NOAD — цифровая библиотека Института проблем информатики НАН, OAI-PMH.
https://noad.sci.am
⚠️ Что важно понимать
Госпортала открытых данных нет. Если нужен «единый вход» — это CKAN сообщества, а не data.gov.am.
Лучший официальный слой — Armstat + кадастр + Минприроды, не министерские витрины.
#opendata #armenia #datacatalogs #datasets
🔥4❤2✍1
FAIRDOM-SEEK: каталоги научных данных, моделей и протоколов
FAIRDOM-SEEK — открытая платформа для описания, публикации и связывания научных активов: датасетов, моделей, SOP и вычислительных пайплайнов. Под капотом ISA-структура (investigation → study → assay), JSON API, DOI и форматы вроде RO-Crate. Сайт проекта: https://seek4science.org
Флагман сообщества — FAIRDOMHub: публичный хаб системной биологии, который ведут консорциум FAIRDOM и ELIXIR Germany. https://fairdomhub.org/
Рядом стоят специализированные инстансы того же стека:
• WorkflowHub — реестр вычислительных workflows (CWL и не только)
https://workflowhub.eu/
• DataHub (ELIXIR Belgium) — метаданные экспериментов и брокеринг в репозитории EBI
https://datahub.elixir-belgium.org/
• IBISBA Knowledge Hub — промышленная биотехнология
https://hub.ibisba.eu/
• LiSyM SEEK — системы медицины печени
https://seek.lisym.org/
• Leipzig Health Atlas — модели и клинические данные Лейпцига
https://www.health-atlas.de/
• ArmLifeBank — биомедицинские данные Армении (геномика, клиника, мультиомика)
https://armlifebank.am/
Отдельный пласт — Local Data Hub консорциума NFDI4Health: локальные SEEK-каталоги клиник и исследовательских центров Германии. Метаданные исследований можно публиковать в центральный Health Study Hub, а сами данные остаются у держателя.
Сейчас в этой сети, помимо Leipzig Health Atlas и MeDIZ.Rostock, открыты хабы:
• Stroke Unit Köln — https://ldh.stroke-koeln.imise.uni-leipzig.de/
• UK Erlangen — https://ldh.uker.imise.uni-leipzig.de/
• ZKS Leipzig — https://ldh.zks.uni-leipzig.de/
• DZKJ Göttingen — https://ldh-dzkj.vm.gwdguser.de/
• IMISE / Leipzig University — https://ldh.imise.uni-leipzig.de/
• UK Schleswig-Holstein — https://ldh.uksh.imise.uni-leipzig.de/
• UK Würzburg — https://ldh.uk-wuerzburg.imise.uni-leipzig.de/
• DIZ Greifswald — https://ldh.diz-umg.imise.uni-leipzig.de/
• LIR Mainz — https://ldh.lir-mainz.imise.uni-leipzig.de/
• DRFZ Berlin — https://ldh.drfz.imise.uni-leipzig.de/
• ZKS Freiburg — https://ldh.zks-freiburg.imise.uni-leipzig.de/
• ZKS Hannover (MHH) — https://ldh.zks-mhh.imise.uni-leipzig.de/
• ZKS Witten/Herdecke — https://ldh.zks-uwh.imise.uni-leipzig.de/
• MeDIZ.Rostock — https://ldh.mediz-rostock.imise.uni-leipzig.de/
Итого: один общий движок и очень разные роли — от общеевропейского реестра workflows до клинических LDH, где публикуют не столько сырые персональные данные, сколько FAIR-метаданные исследований, протоколы и связанные файлы.
#opendata #researchdata #datasets #datacatalogs
FAIRDOM-SEEK — открытая платформа для описания, публикации и связывания научных активов: датасетов, моделей, SOP и вычислительных пайплайнов. Под капотом ISA-структура (investigation → study → assay), JSON API, DOI и форматы вроде RO-Crate. Сайт проекта: https://seek4science.org
Флагман сообщества — FAIRDOMHub: публичный хаб системной биологии, который ведут консорциум FAIRDOM и ELIXIR Germany. https://fairdomhub.org/
Рядом стоят специализированные инстансы того же стека:
• WorkflowHub — реестр вычислительных workflows (CWL и не только)
https://workflowhub.eu/
• DataHub (ELIXIR Belgium) — метаданные экспериментов и брокеринг в репозитории EBI
https://datahub.elixir-belgium.org/
• IBISBA Knowledge Hub — промышленная биотехнология
https://hub.ibisba.eu/
• LiSyM SEEK — системы медицины печени
https://seek.lisym.org/
• Leipzig Health Atlas — модели и клинические данные Лейпцига
https://www.health-atlas.de/
• ArmLifeBank — биомедицинские данные Армении (геномика, клиника, мультиомика)
https://armlifebank.am/
Отдельный пласт — Local Data Hub консорциума NFDI4Health: локальные SEEK-каталоги клиник и исследовательских центров Германии. Метаданные исследований можно публиковать в центральный Health Study Hub, а сами данные остаются у держателя.
Сейчас в этой сети, помимо Leipzig Health Atlas и MeDIZ.Rostock, открыты хабы:
• Stroke Unit Köln — https://ldh.stroke-koeln.imise.uni-leipzig.de/
• UK Erlangen — https://ldh.uker.imise.uni-leipzig.de/
• ZKS Leipzig — https://ldh.zks.uni-leipzig.de/
• DZKJ Göttingen — https://ldh-dzkj.vm.gwdguser.de/
• IMISE / Leipzig University — https://ldh.imise.uni-leipzig.de/
• UK Schleswig-Holstein — https://ldh.uksh.imise.uni-leipzig.de/
• UK Würzburg — https://ldh.uk-wuerzburg.imise.uni-leipzig.de/
• DIZ Greifswald — https://ldh.diz-umg.imise.uni-leipzig.de/
• LIR Mainz — https://ldh.lir-mainz.imise.uni-leipzig.de/
• DRFZ Berlin — https://ldh.drfz.imise.uni-leipzig.de/
• ZKS Freiburg — https://ldh.zks-freiburg.imise.uni-leipzig.de/
• ZKS Hannover (MHH) — https://ldh.zks-mhh.imise.uni-leipzig.de/
• ZKS Witten/Herdecke — https://ldh.zks-uwh.imise.uni-leipzig.de/
• MeDIZ.Rostock — https://ldh.mediz-rostock.imise.uni-leipzig.de/
Итого: один общий движок и очень разные роли — от общеевропейского реестра workflows до клинических LDH, где публикуют не столько сырые персональные данные, сколько FAIR-метаданные исследований, протоколы и связанные файлы.
#opendata #researchdata #datasets #datacatalogs
seek4science.org
FAIRDOM-SEEK
Product website for the FAIRDOM-SEEK platform
✍2⚡1👍1🔥1
В рубрике как это устроено у них открытые данные города Sieam Reap в Камбоджа. Наборов данных там немного, всего 7 штук и это статистические данные которые ещё и отображаются в виде интерактивных визуализаций. Сайт позиционируется как портал данных умного города, каталог данных весьма экзотичен, отображает данные в виде таблиц и поддерживает экспорт в Excel формат. Плюс часть данных представлены в разделе карт, но без экспорта данных из слоев, но их можно скачать через недокументированное API.
И никаких упоминаний об условиях использования данных. В целом ничего невероятного, как пример портала данных можно рассматривать его скорее как делать не надо, но знать про него полезно. Что-то для пользователей может быть и полезно, например, визуализация.
#opendata #cambodia #datasets #datacatalogs
И никаких упоминаний об условиях использования данных. В целом ничего невероятного, как пример портала данных можно рассматривать его скорее как делать не надо, но знать про него полезно. Что-то для пользователей может быть и полезно, например, визуализация.
#opendata #cambodia #datasets #datacatalogs
💯1
В реестре каталогов данных Dateno, с которым я вожусь вот уже долгое время, больше всего порталов с геоданными. Что, в общем-то, только подтверждает тезис о том что геоданные в мире повсюду, что их больше всего количественно, хотя объёмно среди них велики только данные спутниковых снимков.
К этому можно добавить и огромное разнообразие продуктов на которых геопорталы создаются. Некоторые из них, созданные на базе Geonetwork, GeoNode, ArcGIS Hub - это полноценные каталоги данных имеющие все необходимые характеристики такого каталога: наличие возможности выгрузки, документиированное API, определенные лицензии на использование и поддержку стандартов DCAT, Schema.org и других.
Другие геопорталы - это множество продуктов большого числа вендоров, часто охватывающих от нескольких до сотен геопорталов местного значения. Например, e-mapa.net в Польше, охватывающий более сотни муниципалитетов.
Сейчас в реестре 248 программных продуктов используемых для геопорталов, значительная часть из которых - это SaaS продукты, особенно для муниципалитетов у которых мало ресурсов на развертывание собственных инсталляций.
Надо сказать что всё это на фоне того что в мире геоданных безусловным лидером является Esri с их облачными продуктами ArcGIS, как корпоративными, так и ArcGIS Hub, который позиционируется не совсем как только про геоданные, но и про любые данные в принципе (хотя для остальных типов данных используется он нечасто).
Параллельно существует очень много ПО с открытым кодом для геопорталов, обычно реализующее OGC интерфейсы. Если Вы выбираете ПО для геопортала то в реестре есть отдельный раздел с описанием каждого и файл выгрузки software.jsonl в котором все они собраны. По моим наблюдениям, в 99% случаев можно воспользоваться GeoNode и Geonetwork, но есть и другие варианты.
Скорее всего число видов ПО для каталогов данных будет расти, потому что чем дальше тем больше находится самых разных продуктов.
#opendata #geodata #datacatalogs #dateno
К этому можно добавить и огромное разнообразие продуктов на которых геопорталы создаются. Некоторые из них, созданные на базе Geonetwork, GeoNode, ArcGIS Hub - это полноценные каталоги данных имеющие все необходимые характеристики такого каталога: наличие возможности выгрузки, документиированное API, определенные лицензии на использование и поддержку стандартов DCAT, Schema.org и других.
Другие геопорталы - это множество продуктов большого числа вендоров, часто охватывающих от нескольких до сотен геопорталов местного значения. Например, e-mapa.net в Польше, охватывающий более сотни муниципалитетов.
Сейчас в реестре 248 программных продуктов используемых для геопорталов, значительная часть из которых - это SaaS продукты, особенно для муниципалитетов у которых мало ресурсов на развертывание собственных инсталляций.
Надо сказать что всё это на фоне того что в мире геоданных безусловным лидером является Esri с их облачными продуктами ArcGIS, как корпоративными, так и ArcGIS Hub, который позиционируется не совсем как только про геоданные, но и про любые данные в принципе (хотя для остальных типов данных используется он нечасто).
Параллельно существует очень много ПО с открытым кодом для геопорталов, обычно реализующее OGC интерфейсы. Если Вы выбираете ПО для геопортала то в реестре есть отдельный раздел с описанием каждого и файл выгрузки software.jsonl в котором все они собраны. По моим наблюдениям, в 99% случаев можно воспользоваться GeoNode и Geonetwork, но есть и другие варианты.
Скорее всего число видов ПО для каталогов данных будет расти, потому что чем дальше тем больше находится самых разных продуктов.
#opendata #geodata #datacatalogs #dateno
GitHub
GitHub - datenoio/dataportals-registry: Registry of data portals, catalogs, data repositories including data catalogs dataset and…
Registry of data portals, catalogs, data repositories including data catalogs dataset and catalog description standard - datenoio/dataportals-registry
❤3✍3🔥2❤🔥1
Какие данные по странам существуют в почти реальном времени? В Кении местное космическое агентство публикует данные погодных наблюдений через публичный экземпляр визуализации данных на базе Grafana который отображает на карте и в графиках данные с погодных станций по стране.
Тут надо отменить что Grafana - это продукт по визуализации данных с открытым кодом экземпляры которого редко публично и чаще используются для внутренних задач по отображению данных, например, ИТ инфраструктуры.
Но иногда его используют и для отображения данных публичных. Ещё один пример, это Saskatchewan Electricity Mix общественный проект собирающий ежесуточно данные с сайта компании SaskPower канадской провинции Саскачеван.
Таких примеров немного и вообще ежесуточных и более частотных данных не так много доступно, особенно по развивающимся странам.
#opendata #dataviz #statistics #data #datacatalogs
Тут надо отменить что Grafana - это продукт по визуализации данных с открытым кодом экземпляры которого редко публично и чаще используются для внутренних задач по отображению данных, например, ИТ инфраструктуры.
Но иногда его используют и для отображения данных публичных. Ещё один пример, это Saskatchewan Electricity Mix общественный проект собирающий ежесуточно данные с сайта компании SaskPower канадской провинции Саскачеван.
Таких примеров немного и вообще ежесуточных и более частотных данных не так много доступно, особенно по развивающимся странам.
#opendata #dataviz #statistics #data #datacatalogs
✍6👍1
Меня в последнее время не покидает соблазн сделать какой-нибудь небольшой пэт-проект с анализом и визуализацией данных что-то вроде "Армения в цифрах" или "[Какой-то другой регион] в цифрах" или каталог данных какой-нибудь экзотической страны в которой он никогда иначе бы не появился. Благо с помощью ИИ ассистентов делать такое стало очень просто и недолго.
Но слишком много текущих рабочих задач и много тех кто об этом мне напомнят обязательно.
В целом же я совсем не уверен что надо эти пэт-проекты делать самому. Как мне рядом говорят, стоит сфокусироваться на бизнес задачах, а все хобби вполне можно было бы организовать через конкурсы или хакатоны.
#thoughts
Но слишком много текущих рабочих задач и много тех кто об этом мне напомнят обязательно.
В целом же я совсем не уверен что надо эти пэт-проекты делать самому. Как мне рядом говорят, стоит сфокусироваться на бизнес задачах, а все хобби вполне можно было бы организовать через конкурсы или хакатоны.
#thoughts
🤔2✍1👍1
🇷🇺 Новые российские геопорталы в реестре: сентябрь 2026
За последние две недели в dataportals-registry добавлено 45 геопорталов из России — от спутниковых архивов ScanEx до районных карт Москвы. Это продолжение обзора от 9 сентября: здесь только то, что ещё не попадало в канал.
🛰 Семейство «Космоснимки» (ScanEx, платформа GeoMixer)
• Космоснимки — главный геопортал платформы: мозаики снимков, базовые карты, тематические слои и JS/REST API, на котором построены десятки сторонних карт. https://www.kosmosnimki.ru
• Каталоги ДЗЗ — поиск по архивам сверхвысокого разрешения: GeoEye, Ikonos, QuickBird, WorldView-1/2, Eros-A/B. Контуры сцен, метаданные съёмки, заказ онлайн. https://search.kosmosnimki.ru
• Kosmosnimki Fires — оперативный спутниковый мониторинг пожаров: термоточки, гари и пожарная погода почти в реальном времени. https://fires.ru
• WarFly — волонтёрская карта немецкой аэрофотосъёмки 1939–1945 гг. (оригиналы — в Национальном архиве США): привязанные кадры и каталог по городам. http://warfly.ru
🌲 Природа и ООПТ
• ГИС ООПТ РФ (проект huntmap.ru) — границы нацпарков, заповедников и заказников федерального и регионального значения. https://оопт.рф
• Центрально-Лесной заповедник — пожарный мониторинг, ветровалы, фотоловушки, зимние маршрутные учёты. https://cfnr.nextgis.com
• ГИС ИФМ СО РАН — леса Бурятии и Прибайкалья: дистанционное зондирование, ООПТ, данные для PolInSAR-исследований высоты леса. https://forest03.nextgis.com
🏙 Города
• Магнитогорск — InGeo-Web: генплан, ПЗЗ, участки, адреса, ортофото. https://gisportal.magnitogorsk.ru
• Иркутск — муниципальный геопортал с каталогом слоёв и ситуационной картой. https://map.admirk.ru
• Нижний Новгород — генплан, адресный план, топосъёмка, рекламные конструкции. http://geonn.grad-nn.ru
• Волгоград — картографический фонд: ПЗЗ, дороги, благоустройство, инвестплощадки, избирательные округа. https://volgmap.ru
• 3D Сургут — город на Cesium: рельеф, здания, участки, зонирование. https://maps3d.admsurgut.ru/map/
• ГИСОГД Мегиона и ГИСОГД Ленинградской области — градостроительные документы и слои. https://gisapps.admmegion.ru/pzz https://gisogd.lenobl.ru
• Москва, районный уровень — сразу 12 геопорталов на ActiveMap GIS (geofsm.ru): префектуры ВАО и СВАО, «Жилищники» Басманного, Аэропорта, Бибирева, Зюзино, Коптево, Котловки, Черёмушек, Дмитровского и Пресненского районов.
🛣 Дороги
• РОСДОРНИИ, Дальневосточный филиал (Хабаровск) — паспорта и диагностика дорог на платформе IndorRoad. https://gisdvrosdornii.ru
• Владупрадор — дороги Владимирской области, тот же стек. https://gis.corp.uprdor33.ru
• ГлавТатДорТранс — дорожная сеть Татарстана. https://gds.geofsm.ru
• VAD — геопортал дорожно-строительной компании на QGIS Web Client: геология, рельеф, инженерные сети. https://vadgis.ru
🗺 Ещё интересное
• RuMap — открытая карта России и СНГ от «Геоцентр-Консалтинг»: геокодер, маршруты, пробки, изохроны, импорт GeoJSON и Shapefile. https://rumap.ru
• МИС УЗОР — муниципальные слои Дубны и Костромы на GIS WebServer SE, открытые WMS/WFS. https://web.gisuzor.ru
• Гипрониигаз ZuluGIS Online — карты газораспределения: Новосибирская область, Тында. https://zulu.niigaz.ru/ZuluWeb/
• Инвесткарты: Амурская область и Забайкальский край — площадки, индустриальные парки, ТОР, недра. https://investmap.amurobl.ru https://www.zab-investportal.ru/ru/invest-map/
• Верхневолжье и Верхнее Подвинье в XVI–XVII вв. — историческая ГИС: Бежецкая пятина, Бельский уезд. https://belaya.nextgis.com
Заметное разнообразие платформ: GeoMixer, ActiveMap GIS, InGeo-Web, GIS WebServer SE, ZuluGIS, IndorRoad, Geometa, QGIS Web Client, Cesium, NextGIS.
Полный список — в реестре: github.com/commondataio/dataportals-registry (country=RU, type=Geoportal).
#geoportals #opendata #russia #datacatalogs
За последние две недели в dataportals-registry добавлено 45 геопорталов из России — от спутниковых архивов ScanEx до районных карт Москвы. Это продолжение обзора от 9 сентября: здесь только то, что ещё не попадало в канал.
🛰 Семейство «Космоснимки» (ScanEx, платформа GeoMixer)
• Космоснимки — главный геопортал платформы: мозаики снимков, базовые карты, тематические слои и JS/REST API, на котором построены десятки сторонних карт. https://www.kosmosnimki.ru
• Каталоги ДЗЗ — поиск по архивам сверхвысокого разрешения: GeoEye, Ikonos, QuickBird, WorldView-1/2, Eros-A/B. Контуры сцен, метаданные съёмки, заказ онлайн. https://search.kosmosnimki.ru
• Kosmosnimki Fires — оперативный спутниковый мониторинг пожаров: термоточки, гари и пожарная погода почти в реальном времени. https://fires.ru
• WarFly — волонтёрская карта немецкой аэрофотосъёмки 1939–1945 гг. (оригиналы — в Национальном архиве США): привязанные кадры и каталог по городам. http://warfly.ru
🌲 Природа и ООПТ
• ГИС ООПТ РФ (проект huntmap.ru) — границы нацпарков, заповедников и заказников федерального и регионального значения. https://оопт.рф
• Центрально-Лесной заповедник — пожарный мониторинг, ветровалы, фотоловушки, зимние маршрутные учёты. https://cfnr.nextgis.com
• ГИС ИФМ СО РАН — леса Бурятии и Прибайкалья: дистанционное зондирование, ООПТ, данные для PolInSAR-исследований высоты леса. https://forest03.nextgis.com
🏙 Города
• Магнитогорск — InGeo-Web: генплан, ПЗЗ, участки, адреса, ортофото. https://gisportal.magnitogorsk.ru
• Иркутск — муниципальный геопортал с каталогом слоёв и ситуационной картой. https://map.admirk.ru
• Нижний Новгород — генплан, адресный план, топосъёмка, рекламные конструкции. http://geonn.grad-nn.ru
• Волгоград — картографический фонд: ПЗЗ, дороги, благоустройство, инвестплощадки, избирательные округа. https://volgmap.ru
• 3D Сургут — город на Cesium: рельеф, здания, участки, зонирование. https://maps3d.admsurgut.ru/map/
• ГИСОГД Мегиона и ГИСОГД Ленинградской области — градостроительные документы и слои. https://gisapps.admmegion.ru/pzz https://gisogd.lenobl.ru
• Москва, районный уровень — сразу 12 геопорталов на ActiveMap GIS (geofsm.ru): префектуры ВАО и СВАО, «Жилищники» Басманного, Аэропорта, Бибирева, Зюзино, Коптево, Котловки, Черёмушек, Дмитровского и Пресненского районов.
🛣 Дороги
• РОСДОРНИИ, Дальневосточный филиал (Хабаровск) — паспорта и диагностика дорог на платформе IndorRoad. https://gisdvrosdornii.ru
• Владупрадор — дороги Владимирской области, тот же стек. https://gis.corp.uprdor33.ru
• ГлавТатДорТранс — дорожная сеть Татарстана. https://gds.geofsm.ru
• VAD — геопортал дорожно-строительной компании на QGIS Web Client: геология, рельеф, инженерные сети. https://vadgis.ru
🗺 Ещё интересное
• RuMap — открытая карта России и СНГ от «Геоцентр-Консалтинг»: геокодер, маршруты, пробки, изохроны, импорт GeoJSON и Shapefile. https://rumap.ru
• МИС УЗОР — муниципальные слои Дубны и Костромы на GIS WebServer SE, открытые WMS/WFS. https://web.gisuzor.ru
• Гипрониигаз ZuluGIS Online — карты газораспределения: Новосибирская область, Тында. https://zulu.niigaz.ru/ZuluWeb/
• Инвесткарты: Амурская область и Забайкальский край — площадки, индустриальные парки, ТОР, недра. https://investmap.amurobl.ru https://www.zab-investportal.ru/ru/invest-map/
• Верхневолжье и Верхнее Подвинье в XVI–XVII вв. — историческая ГИС: Бежецкая пятина, Бельский уезд. https://belaya.nextgis.com
Заметное разнообразие платформ: GeoMixer, ActiveMap GIS, InGeo-Web, GIS WebServer SE, ZuluGIS, IndorRoad, Geometa, QGIS Web Client, Cesium, NextGIS.
Полный список — в реестре: github.com/commondataio/dataportals-registry (country=RU, type=Geoportal).
#geoportals #opendata #russia #datacatalogs
❤6⚡3✍3🔥3
Я наверняка не единственный кто это подмечает, но одно из наблюдений за средами и приложениями вроде Cursor, Z.ai, Kimi, ChatGPT, Claude и многими другими остальными построенными вокруг работы с AI агентами - это непрерывность изменений и развития. Понятно что у их команд много ресурсов, финансовых, интеллектуальных, инфраструктурных, но тут ещё и явно культура разработки с помощи ИИ ассистентов (не путаем с вайб-кодингом).
Буквально в считанные месяцы и недели они эволюционируют из простых инструментов во всё более продвинутые, как с точки зрения управления множествами субагентов, так и способами представления промежуточных и итоговых результатов.
Для софтверной разработки - это новая планка качества, сильно контрастирующая со всеми предыдущими разнообразными подходами, не предполагающими частотных и даже сверхчастотных (ежесуточных) обновлений.
В удивительное время живём.
#thoughts #software #ai
Буквально в считанные месяцы и недели они эволюционируют из простых инструментов во всё более продвинутые, как с точки зрения управления множествами субагентов, так и способами представления промежуточных и итоговых результатов.
Для софтверной разработки - это новая планка качества, сильно контрастирующая со всеми предыдущими разнообразными подходами, не предполагающими частотных и даже сверхчастотных (ежесуточных) обновлений.
В удивительное время живём.
#thoughts #software #ai
❤9🤔4❤🔥2💯1
Свежая статья (ссылка на вариант без пэйволла) в The Economist о том что ИИ впервые выиграл Metaculus Cup, соревнование среди предсказателей событий. Причем в 2024 году результаты работы ИИ агентов были совсем слабые, а в 3-м квартале 2026 ИИ агенты обогнали почти всех людей участников.
Причем я так понимаю что в лидерах там стартап Mantic которые как раз параллельно (или по итогам?) подняли $25 миллионов венчурного финансирования на продукт по AI Forecasting.
Вспоминаются фильмы вроде Особое мнение и многочисленная литература о ИИ предсказывающем будущее на годы вперед.
Такие продукты могут повлиять не только на рынки предсказаний, фондовые рынки и тд., но и на прогнозирование многих глобальных и менее глобальных событий.
#ai #thoughts #forecasting
Причем я так понимаю что в лидерах там стартап Mantic которые как раз параллельно (или по итогам?) подняли $25 миллионов венчурного финансирования на продукт по AI Forecasting.
Вспоминаются фильмы вроде Особое мнение и многочисленная литература о ИИ предсказывающем будущее на годы вперед.
Такие продукты могут повлиять не только на рынки предсказаний, фондовые рынки и тд., но и на прогнозирование многих глобальных и менее глобальных событий.
#ai #thoughts #forecasting
✍5👍3🌚3❤1
На сайте экосистемы CKAN опубликовали дашборд с каталогом инсталляций CKAN в мире там есть 732 каталога данных, их текущий статус (живые или нет), версии и так далее.
Для тех кто не знает, CKAN - это один из наиболее популярных продуктов с открытым кодом для создания порталов открытых данных.
С одной стороны полезный список, а с другой...
Я довольно таки зол на сообщество и ребят которые этим занимаются потому что я постоянно тыкаю их носом в то что в реестре порталов данных Dateno есть информация о 2021 каталоге данных на базе CKAN и это почти в 3 раза больше чем то что ребята перечисляют на сайте экосистемы.
Но повторно использовать чужие наработки им не хочется, даже если они сильно более полные и под свободными лицензиями. Очень странные люди.
#opendata #datacatalogs
Для тех кто не знает, CKAN - это один из наиболее популярных продуктов с открытым кодом для создания порталов открытых данных.
С одной стороны полезный список, а с другой...
Я довольно таки зол на сообщество и ребят которые этим занимаются потому что я постоянно тыкаю их носом в то что в реестре порталов данных Dateno есть информация о 2021 каталоге данных на базе CKAN и это почти в 3 раза больше чем то что ребята перечисляют на сайте экосистемы.
Но повторно использовать чужие наработки им не хочется, даже если они сильно более полные и под свободными лицензиями. Очень странные люди.
#opendata #datacatalogs
💯6
Яндекс выпустил AliceAI-Foundation-80B-A3B-Base базовую языковую модель с открытыми весами и акцентом на лучшую поддержку русского языка.
Пишут что модель была обучена полностью с нуля и приводят множество результатов бенчмарков в сравнении с:
- Qwen3.5-35B-A3B-Base
- GLM-4.5-Air-Base (106B-A12B)
- Nemotron-3-Super-120B-A12B-Base
- DeepSeek-V4-Flash-Base (284B-A13B)
Это хорошая новость, больше открытых моделей, больше конкуренции!
Важно чтобы релизов было больше, потому что конкуренты работают очень быстро выпуская новые модели чуть ли не еженедельно.
#ai #opensource #yandex
Пишут что модель была обучена полностью с нуля и приводят множество результатов бенчмарков в сравнении с:
- Qwen3.5-35B-A3B-Base
- GLM-4.5-Air-Base (106B-A12B)
- Nemotron-3-Super-120B-A12B-Base
- DeepSeek-V4-Flash-Base (284B-A13B)
Это хорошая новость, больше открытых моделей, больше конкуренции!
Важно чтобы релизов было больше, потому что конкуренты работают очень быстро выпуская новые модели чуть ли не еженедельно.
#ai #opensource #yandex
huggingface.co
yandex/AliceAI-Foundation-80B-A3B-Base · Hugging Face
We’re on a journey to advance and democratize artificial intelligence through open source and open science.
❤9🤣8✍2⚡1👍1🔥1😁1
В рубрике как это устроено у них NeTEx стандарт Евросоюза по публикации данных о транспорте, расписании и инфраструре. Публикуется в таких каталогах данных как Open Data Portal for Belgian Public Transport наряду с данными в формате GTFS и другими. А также используемый в системах автоматизированного управления транспортом в Евросоюзе наряду со многими другими стандартами.
#opendata #eu #transport #datacatalogs #standards
#opendata #eu #transport #datacatalogs #standards
GitHub
GitHub - TransmodelEcosystem/NeTEx: NeTEx (Network Timetable Exchange) - CEN/TS 16614 series dedicated to the exchange of Public…
NeTEx (Network Timetable Exchange) - CEN/TS 16614 series dedicated to the exchange of Public transport static data - TransmodelEcosystem/NeTEx
✍3👍1🔥1
Каталоги данных о мобильности
В реестре dataportals-registry европейская тема Transport стоит у 2337 активных каталогов: 1537 геопорталов и 641 портал открытых данных. Большая часть - общие витрины, где дороги, остановки или ДТП оказываются одним из разделов.
Отдельный слой - специализированные каталоги mobility: национальные точки доступа, порталы операторов и глобальные сборники фидов. География темы перекошена в сторону США: 692 записи, в основном ArcGIS-хабы дорожных ведомств штатов.
Европейские точки доступа
National Access Point по директиве ITS в реестре делится на два типа данных.
Дорога и трафик, обычно DATEX II: немецкая Mobilithek, датский Dataudveksleren, финский каталог Digitraffic, испанский NAP DGT, хорватский promet-info.hr, словенский nap.si, румынский pna.cestrin.ro, бельгийский transportdata.be, кипрский traffic4cyprus.org.cy, чешский registr.dopravniinfo.cz, голландский NTM, норвежский Transportportal, шведский trafficdata.se, греческий data.nap.gov.gr.
Расписания и мультимодальные поездки, обычно NeTEx, GTFS и SIRI: французский transport.data.gouv.fr, австрийский mobilitydata.gv.at, испанский nap.transportes.gob.es (второй NAP Испании, рядом с DGT), финский FINAP, итальянский каталог CCISS, португальский nap-portugal.imt-ip.pt, латвийский transportdata.gov.lv.
Такая точка доступа публикует метаданные и адрес фида производителя. Сам файл часто лежит у оператора.
Операторы и города
Швейцария: федеральная платформа data.opentransportdata.swiss (CKAN, GTFS и realtime), отдельно SBB и женевский TPG.
Франция: Île-de-France Mobilités и API-портал PRIM, RATP, SNCF, сеть STAR в Ренне, каталог Navitia.
Германия: 10 марта 2024 Deutsche Bahn закрыла свой CKAN. Наборы переехали в Mobilithek, GovData и Open Data ÖPNV. API расписаний, станций и GBFS остались на developers.deutschebahn.com. Рядом земельная MobiData BW и портал RNV.
Дальше по карте: BKK в Будапеште (GTFS и GTFS-Realtime), японский ODPT, тайваньский TDX как национальный API-хаб, Transport for NSW и Transport Victoria, голландские данные RDW (транспортные средства и парковки), лиссабонские EMEL и геопортал TML, боготинская Secretaría de Movilidad, мадридский CRTM. Ирландский NTA вынес GTFS и realtime в портал разработчика: developer.nationaltransport.ie.
В российской части реестра отдельно стоит GeoServer «Московского транспорта»: transport.mos.ru/geoserver. Это публикация геослоёв WMS/WFS.
Мир и агрегаторы
Mobility Database — глобальный каталог GTFS, GTFS-Realtime и GBFS от MobilityData, со скачиваемым sources.csv.
Transport Data Commons — коалиционный CKAN по транспорту. Витрина OpenDataSoft: transport.opendatasoft.com. Digital Transport for Africa — GitLab-инвентарь городских GTFS для Африки и Латинской Америки. TUMI Data Hub собирает данные городской мобильности. Mobito — коммерческая витрина: каталог открыт без входа, покупка данных идёт через аккаунт.
Рядом исследовательские каталоги: немецкий FID move и Urban Mobility Observatory TU Delft. Статистика, а не фиды: корейская KTDB, американские data.transportation.gov и data.bts.gov.
Как собирать
Расписания ищите в NeTEx или GTFS у точки доступа и у оператора. Пробки и дорожные работы - в DATEX II у дорожного NAP. Шеринг - в GBFS. Один и тот же фид часто числится в национальном каталоге, у перевозчика и в агрегаторе: сверяйте канонический URL источника.
#opendata #transport #datacatalogs
В реестре dataportals-registry европейская тема Transport стоит у 2337 активных каталогов: 1537 геопорталов и 641 портал открытых данных. Большая часть - общие витрины, где дороги, остановки или ДТП оказываются одним из разделов.
Отдельный слой - специализированные каталоги mobility: национальные точки доступа, порталы операторов и глобальные сборники фидов. География темы перекошена в сторону США: 692 записи, в основном ArcGIS-хабы дорожных ведомств штатов.
Европейские точки доступа
National Access Point по директиве ITS в реестре делится на два типа данных.
Дорога и трафик, обычно DATEX II: немецкая Mobilithek, датский Dataudveksleren, финский каталог Digitraffic, испанский NAP DGT, хорватский promet-info.hr, словенский nap.si, румынский pna.cestrin.ro, бельгийский transportdata.be, кипрский traffic4cyprus.org.cy, чешский registr.dopravniinfo.cz, голландский NTM, норвежский Transportportal, шведский trafficdata.se, греческий data.nap.gov.gr.
Расписания и мультимодальные поездки, обычно NeTEx, GTFS и SIRI: французский transport.data.gouv.fr, австрийский mobilitydata.gv.at, испанский nap.transportes.gob.es (второй NAP Испании, рядом с DGT), финский FINAP, итальянский каталог CCISS, португальский nap-portugal.imt-ip.pt, латвийский transportdata.gov.lv.
Такая точка доступа публикует метаданные и адрес фида производителя. Сам файл часто лежит у оператора.
Операторы и города
Швейцария: федеральная платформа data.opentransportdata.swiss (CKAN, GTFS и realtime), отдельно SBB и женевский TPG.
Франция: Île-de-France Mobilités и API-портал PRIM, RATP, SNCF, сеть STAR в Ренне, каталог Navitia.
Германия: 10 марта 2024 Deutsche Bahn закрыла свой CKAN. Наборы переехали в Mobilithek, GovData и Open Data ÖPNV. API расписаний, станций и GBFS остались на developers.deutschebahn.com. Рядом земельная MobiData BW и портал RNV.
Дальше по карте: BKK в Будапеште (GTFS и GTFS-Realtime), японский ODPT, тайваньский TDX как национальный API-хаб, Transport for NSW и Transport Victoria, голландские данные RDW (транспортные средства и парковки), лиссабонские EMEL и геопортал TML, боготинская Secretaría de Movilidad, мадридский CRTM. Ирландский NTA вынес GTFS и realtime в портал разработчика: developer.nationaltransport.ie.
В российской части реестра отдельно стоит GeoServer «Московского транспорта»: transport.mos.ru/geoserver. Это публикация геослоёв WMS/WFS.
Мир и агрегаторы
Mobility Database — глобальный каталог GTFS, GTFS-Realtime и GBFS от MobilityData, со скачиваемым sources.csv.
Transport Data Commons — коалиционный CKAN по транспорту. Витрина OpenDataSoft: transport.opendatasoft.com. Digital Transport for Africa — GitLab-инвентарь городских GTFS для Африки и Латинской Америки. TUMI Data Hub собирает данные городской мобильности. Mobito — коммерческая витрина: каталог открыт без входа, покупка данных идёт через аккаунт.
Рядом исследовательские каталоги: немецкий FID move и Urban Mobility Observatory TU Delft. Статистика, а не фиды: корейская KTDB, американские data.transportation.gov и data.bts.gov.
Как собирать
Расписания ищите в NeTEx или GTFS у точки доступа и у оператора. Пробки и дорожные работы - в DATEX II у дорожного NAP. Шеринг - в GBFS. Один и тот же фид часто числится в национальном каталоге, у перевозчика и в агрегаторе: сверяйте канонический URL источника.
#opendata #transport #datacatalogs
⚡4❤4👍3✍2