Ivan Begtin
8.03K subscribers
1.75K photos
3 videos
101 files
4.45K links
I write about Open Data, Data Engineering, Government, Privacy, Digital Preservation and other gov related and tech stuff.

Founder of Dateno https://dateno.io

Telegram @ibegtin
Facebook - https://facebook.com/ibegtin
Secure contacts ivan@begtin.tech
Download Telegram
Я могу долго говорить про НСУД, но обращаю внимание на ключевое - открытых данных там нет.
Доклад Константина Носкова на заседании Правительства
http://government.ru/dep_news/36845/

О формировании национальной системы управления данными.
О инновациях в правоохранительной системе и современных технологиях у меня есть очень красивый и яркий пример в лице онлайн ресурсов МВД.

Для тех кто, возможно, не знает. У МВД России на специальной странице на сайте [1] есть сервис приёма сообщений. С виду удобная форма, а на практике в ней полностью не работает вставка текста, а по разговорам с несколькими людьми которые пытались через него оформить обращения - там и при редактировании текст не сохраняется и с обновлением страницы он теряется. Если он потерялся то можно только вбить его заново, скопировать откуда-либо нельзя.

Какие всё таки изобретательные люди в МВД РФ. Я бы, честно, никогда о таком бы не додумался

Ссылки:
[1] https://xn--b1aew.xn--p1ai/request_main

#мвд
Я обещал написать свои мысли про Национальную систему управления данными и пишу сейчас. Я считаю безусловно важным проводить работу по систематизации и анализу государственных информационных систем, и работа в этом направлении безусловно важна однако есть нюансы и вопросы без ответа, о которых не говорить нельзя.

1. Полная потеря открытых данных в повестке Минцифраза, большинства органов власти и председателя правительства лично. НСУД не решает проблем граждан и бизнеса с доступностью данных.

2. Единственная реальная область применения НСУД - это цифровой профиль. Фактически НСУД превращается в бэкэнд для цифрового профиля и превращается из концепции в государственную информационную систему.

3. НСУД системно не решает проблемы качества данных поскольку НСУД сейчас сводят не в набор правил и контроль за ними, а в агрегатор данных.

4. Разработчики НСУДа так и не представили системного видения будут ли там хранить персональные данные из других систем или же они там будут "только обрабатываться".

5. Бизнес так и не получил подтверждения что не будет принуждения к сдаче корп. данных в НСУД.

6. Граждане так и не получили подтверждения об этичном использовании их данных в НСУД. Даже на уровне этических деклараций.

7. Принятая концепция НСУД всё ещё остаётся очень сырой, во многом навязанной органам власти, с неразрешёнными рисками и проблемами.

8. Причины по которым ответственные силовые органы не выступили резко против НСУДа мне непонятны. Консолидация персональных данных в таком масштабе в цифровых профилях делает эту систему более критичной чем многие из тех где хранятся сведения по гостайне.

9. В НСУД полностью проигнорирована позиция региональных властей. По факту с представителями субъектов федерации не проводилось содержательного обсуждения НСУДа.

10. Разработка НСУД велась и ведётся Аналитическим центром при Правительстве. Структуре переведённой Пр-вом в статус АНО и вышедшей из под законов 44-ФЗ и 223-ФЗ о госзакупках и корп закупках, неконкурентным образом напрямую просубсидированное из федерального бюджета.

11. В текущей форме очень скоро НСУД окажется самым слабым звеном в нац. проекте цифровая экономика. Если умозрительно предположить что ответственные за нее сменятся через год или два, то старую команду будут 'прессовать' именно за НСУД. Вопрос - зачем так подставляться?

При этом я лично, повторюсь, считаю идеологически правильным
наличие сильной госполитики в регулировании госданных, но вижу это как стратегию и свод правил, а не как ИТ систему.

Иван Бегтин
О необходимости архивации данных и о том почему когда-то в Информационной культуре мы начали Национальный цифровой архив России (ruarxive.org).

На сайте Правительства более не публикуются сведения о государственных программах. Они всё ещё находятся через поисковики запросом: "site:government.ru/programs", но на странице "Госпрограммы" [1] их более нет, а ссылки с поисковиков теперь выдают ошибку 404. Ранее там были ссылки которые вели на новости по каждой из госпрограмм и подробности их реализации. Специальный портал госпрограмм [2] этих сведений не содержит, также как и остальные онлайн ресурсы.

Материалы о госпрограммах не были перемещены, заархивированы, перенесены на другой ресурс. Они были именно сняты с сайта правительства. Поэтому, даже не смотря на то что в целом Правительство является одной из немногих государственных структур которая официально [предполагается что] хранит архивные версии сайтов правительств прошлых составов [3] c 2008 года, тем не менее в рамках работы одного правительства материалы могу исчезать безвозвратно.

Ситуация усугубляется тем что, на самом деле, официальные архивы сайта Правительства также не дают гарантии сохранности материалов. Например, Архив сайта Правительства России 07.05.2008-07.05.2012 (archive.government.ru) [4] более недоступен и не открывается, архив сайта Правительства за 2012-2018 годы просто отсутствует, а сайты до 2008 года просто нигде не найти кроме как восстанавливая из общедоступных открытых сервисов Archive.org и CommonCrawl.

Гораздо хуже происходит с сайтами органов власти которые подвергаются реорганизации, таких как Минобрнауки РФ до его разделения. Их сайт минобрнауки.рф [5] более недоступен, материалы с него перенесены не все, его архивацию никто не проводил.

Отсутствие целевой госполитики в сохранении хотя бы официальных, государственных цифровых документов и материалов приводит к тому что каждая реорганизация органа власти всегда приводит к существенным потерям данных, знаний и информации. Исправить это можно только путём обязательного сохранения в цифровых архивах всех материалов являющихся результатом деятельности органов власти.

Ссылки:
[1] http://government.ru/programs/
[2] http://programs.gov.ru
[3] http://government.ru/archive/
[4] http://archive.government.ru/
[5] http://xn--80abucjiibhv9a.xn--p1ai/

#opengov #opendata #digitalpreservation #archives
Как пишут читатели, госпрограммы на сайте правительства остались и сейчас доступны по ссылке [1] и, возможно, проблема не в исчезновении данных, а в нарушении ссылочной целостности. Но во многих разделах сайта правительства до сих пор ссылка стоит на старый, ныне пустой раздел [2], он же указан в карте сайта [3], а к тому же как убедиться что перенесены все данные по ранее описанным госпрограммам? Разрушение ссылочной целостности - это не такая беда-беда, как полная потеря данных, но всё равно неприятно.

Ссылки:
[1] http://government.ru/rugovclassifier/section/2649/
[2] http://government.ru/programs/
[3] http://government.ru/sitemap/

#gov #opengov
Дмитрий Скугаревский и Денис Савельев из ИПП в колонке в Ведомостях [1] пишут о простоте и сложности закона о контроле. Это очень важно что вопрос о простоте не просто официальных, но и нормативных текстов выносится на первый план. В России ежегодно принимается почти 500 федеральных законов и тысячи постановлений правительства и приказов ФОИВов. Законодательная нагрузка на граждан, бизнес и госслужащих растёт год от года. Есть ли шанс успешно с ней бороться?

Ссылки:
[1] https://www.vedomosti.ru/opinion/articles/2019/05/30/802835-yazik-sovetskogo-zakona

#plainlang
В качестве редкого для моего канала оффтопика.

Сложно ли быть предпринимателем в России? Возможно ли? Когда ты занимаешься чем-то невидимым для тех кто "бдит и следит" - это, иногда возможно, иногда позволяет скрыться от реальности.

А когда это что-то понятное им, будь то кафе, магазин, ферма, недвижимость, то столкновение с объективной реальностью нашей любимой Родины оказывается неприятным.

Мои друзья Георгий Афанасьев (Georgy Afanasev) и Екатерина Аксенова (Ekaterina Aksenova) столкнулись с этим лично. Когда после запугиваний в стиле маски-шоу [1], а потом и забора в отделение без объяснения причин [2], районное МВД ведёт себя совсем не как правоохранительный орган, а как совсем другая организованная структура из 90-х.

В России сидят по экономическим статьям десятки тысяч предпринимателей, ещё десятки тысяч находят в ситуации подобной этой. О какой открытости МВД может идти речь когда до сих пор один за другим всплывают факты из которых можно говорить о этике, о тщётных попытках найти отличия между полицией и организованным бандитизмом, о беззащитности предпринимателей и о понимании что именно из таких отдельных фактов у многих складывается ощущение безнадёжности будущего в России.

Безусловно можно и нужно обращаться другие органы власти которые могут помочь в этой ситуации. Мой опыт однако говорит что мало что так помогает как обязательная публичность. Не репосты в фэйсбуке, а профессиональный журналист/коллектив кто написал бы об этом в федеральном издании помог бы больше, чем просто лайк или репост в социальных сетях, хотя и они важны. И если Вы можете такую помощь оказать - она будет неоценима.

Ссылки:
[1] https://www.facebook.com/permalink.php?story_fbid=2935032219844847&id=100000142935859
[2] https://www.facebook.com/ekaterina.aksenova.7/posts/2370130339674104

#police #mvd
Портал открытых данных data.mosreg.ru [1] более не существует. Согласно распоряжению N10-24-1/РВ от 25.03.2019 выпущенному Министерства государственного управления, информационных технологий и связи Московской области 29 марта 2019 года система АИСОД (data.mosreg.ru) официально выведена из эксплуатации.

Нюанс этой истории добавляет тот факт что это распоряжение подписано 25 марта, а опубликовано 31 мая 2019 года [2]. Никого не предупредили, решили за 4 дня, уничтожили и через 2 месяца опубликовали распоряжение.

К сожалению именно этот портал я заархивировать не успел. И он лишь один из тысяч примеров моментально исчезающих государственных ресурсов.

Мы, конечно, запросим архив этого сайта, но скорее всего ничего не получим.

Учитывая что у федерального портала data.gov.ru [3] уже давно нет финансирования, то скоро исчезнуть может и он.

Ссылки:
[1] https://data.mos.reg.ru
[2] http://mits.mosreg.ru/dokumenty/normotvorchestvo/normativnye-pravovye-akty-mingosupravleniya-m/31-05-2019-11-05-13-o-vyvode-iz-ekspluatatsii-avtomatizirovannoy-infor
[3] http://data.gov.ru

#opendata #digitalpreservation #archive
Для всех кто помнит про бот для телеграма по ретрансляции новостей в каналы [1], у меня, к сожалению, с новой работой остаётся очень мало времени на его поддержку, поэтому я его код полностью публикую на github'е [2].

Пишите там в issues если найдёте ошибки или смело их исправляйте. Клонируйте бот и используйте в личных задачах как Вам удобно.

Напомню что этот бот умеет выгружать новости из RSS каналов и веб-сайтов где есть страницы с новостями и отправлять их в телеграм каналы. Очень удобно для тех кому надо транслировать новости из своего сайта в телеграм канал автоматом или если кому-то надо настроить мониторинг новостей по теме.

С помощью этого бота работает канал Инфокультуры @infoculture и Правительственный дайджест @govdigest и новостной канал о Московском патриархате @mospatriarhia о котором мало кто знает.

Ссылки:
[1] https://begtin.tech/feedbot/
[2] https://github.com/datacoon/feedrebot

#news #opensource
В СМИ уже идут публикации на основе доклада по открытости который готовили мы в Инфокультуре в Центре перспективных управленческих решений, а теперь и в Счетной палате с момента моего туда выхода. Прочитать о докладе можно в РБК [1], в Российской газете [2] и в Коммерсанте [3]. А также Известия [4], телеканал 360 [5], Вести [6] и ТАСС [7]

В ближайшее время само исследование будет общедоступно для всех, а также о нём будет разговор 8-го июня на ПМЭФе [8]. Все подробности я уже буду рассказывать после ПМЭФа:) Сейчас лишь упомяну что этот доклад лишь начало работы, а её ещё предстоит много. Открытость находится в приоритете работы Счетной палаты и тем ФОИВам которые решили на неё "подзабить" за последние годы ещё не поздно исправить эту ошибку.

Ссылки:
[1] https://www.rbc.ru/economics/05/06/2019/5cf65bac9a7947c873d7fa90?from=from_main
[2] https://rg.ru/2019/06/05/schetnaia-palata-nazvala-samoe-zakrytoe-ministerstvo-rossii.html
[3] https://www.kommersant.ru/doc/3991634
[4] https://iz.ru/885558/2019-06-05/schetnaia-palata-nazvala-samoe-zakrytoe-ministerstvo-rossii
[5] https://360tv.ru/news/vlast/schetnaja-palata-nazvala-samye-otkrytye-ministerstva-rossii/
[6] https://www.vesti.ru/doc.html?id=3154726
[7] https://tass.ru/ekonomika/6508493
[8] https://www.forumspb.com/programme/71093/
#opengov #opendata #government
А вот и сам анонс доклада по открытости на сайте СП РФ [1] и текст доклада по ссылке [2]

Ссылки:
[1] http://audit.gov.ru/press_center/news/37248
[2] http://audit.gov.ru/about/document/%D0%9E%D1%82%D0%BA%D1%80%D1%8B%D1%82%D0%BE%D1%81%D1%82%D1%8C-%D0%B4%D0%BE%D0%BA%D0%BB%D0%B0%D0%B4.pdf

#opendata #opengov
Есть много оснований не считать эту новость хорошей, так как концепция весьма и весьма сыра. И в ней ничего нет про открытые данные
Утверждена Концепция создания и функционирования национальной системы управления данными
http://government.ru/docs/36940/

Распоряжение от 3 июня 2019 года №1189-р, постановление от 3 июня 2019 года
№710. Создание и функционирование национальной системы управления данными
приведёт к повышению эффективности принятия управленческих решений на основе
использования государственных информационных ресурсов в целях улучшения
качества и доступности для граждан государственных, муниципальных и
коммерческих услуг.
На ПМЭФ прошла сессия по открытости где мы: Счетная палата, Инфокультура и ЦПУР презентовали доклад по открытости.
Анонс доклада по открытости на сайте СП РФ [1] и текст доклада по ссылке [2], а на сайте ПМЭФа можно увидеть запись секции [3].

Много важных тем есть и в докладе и в обсуждалось на ПМЭФ. Важно то что открытость не является синонимом эффективности. Открытость данных должна доходить до муниципального уровня и ещё многое другое. Я чуть позже напишу подробнее, пока очень рекомендую прочитать доклад и посмотреть запись сессии.

Ссылки:
[1] http://audit.gov.ru/press_center/news/37248
[2] http://audit.gov.ru/about/document/%D0%9E%D1%82%D0%BA%D1%80%D1%8B%D1%82%D0%BE%D1%81%D1%82%D1%8C-%D0%B4%D0%BE%D0%BA%D0%BB%D0%B0%D0%B4.pdf
[3] https://www.forumspb.com/programme/71093/#broadcast

#opendata #opengov #sprf
Open Budgets India [1] общественный проект в Индии собирающий данные по бюджетам со всех штатов в Индии и от федерального пр-ва. Существует в формате визуализаций и портала открытых данных.

Это ныне какая-то устойчивая форма проектов на открытых данных когда создатели одновременно делают продукт для массовых потребителей и не забывают выложить все данные для аналитиков/программистов.

Ссылки:
[1] https://openbudgetsindia.org/

#opendata #opengov #openbudgets #budgets #india