Ivan Begtin
8.08K subscribers
1.45K photos
3 videos
98 files
4.19K links
I write about Open Data, Data Engineering, Government, Privacy and Data Preservation and other gov and tech stuff
Telegram @ibegtin
Facebook - https://facebook.com/ibegtin
Secure contacts ivan@begtin.tech

Contact @NMBabina for ads proposals
Download Telegram
О необходимости непрерывной архивации документов не только на сайтах госорганов, но и госпрограмм, нац проектов, подчинённых им учреждений и разного рода госАНО.

С сайта нацпроекта "Цифровая экономика" исчезли все документы по направлениям всем направлениям, например [1] [2]

Хочется надеяться что это "ошибка" тех кто ведёт сайт, а сознательное "заметание следов". Если документы неактуальны, то создаётся раздел архива на дату, а тут просто доки исчезают с сайта.

Ссылки:
[1] https://digital.ac.gov.ru/about/27/#docs
[2] https://digital.ac.gov.ru/about/7/#docs

#opendata #opengov
Официальные государственные сайты (органы власти, учреждения, госпроекты) вне зоны .ru, .рф:
- http://ombudsmanrf.org/ - уполномоченная по правам человека
- http://esimo.net/ - Единая государственная система информации об обстановке в Мировом океане (ЕСИМО)
- https://www.tarifkchr.net/ - главное управление по тарифам Карачаево-Черкесской республики
- http://uzags.com/ - Управление по архивам и ЗАГС Ульяновской области
- http://edu22.info - сайты образовательных организаций Алтайского края

и так ещё много.

Как Вы думаете у кого есть полный реестр госсайтов ? Правильно, у меня есть.

Как думаете кто никогда не проделывал исследований о структуре и состояния госвеба? Правильно, Минкомсвязи
В проекте международного интернет-архива Archive.org только что открыли National Emergency Library [1] с более чем 1,4 миллионом книг. Из них на английском около 1,3 миллиона книг, а также есть книги на китайском, французском, испанском и на русском языке. На русском языке около 3 тысяч книг, в основном из оцифрованных библиотек университетов в США.
Подробнее в их анонсе на сайте [2].

Напомню также что в России есть Российская электронная библиотека [3] где доступны более 1500 книг в онлайн доступе, а также библиотека Максима Мошкова [4] и множество других менее официальных и специализированных онлайн библиотек.

Ссылки:
[1] https://archive.org/details/nationalemergencylibrary
[2] https://blog.archive.org/2020/03/24/announcing-a-national-emergency-library-to-provide-digitized-books-to-students-and-the-public/
[3] https://rusneb.ru/
[4] http://lib.ru/

#openculture
Среди всякого странного не могу не отметить обилие бардака и дезорганизованности на сайте Правительства. Помимо того о чём я писал в колонке [1] в РБК что на сайте Правительства не указаны десятки учреждённых им НКО, так там ещё и документы публикуются с большими задержками, впрочем этому есть формальное объяснение в виде того как официальным сайтом публикации является pravo.gov.ru, но кроме того даже в таком раскладе документы публикуются с очень большой задержкой.

А вот ещё странность. В перечне документов на сайте есть только:
- Постановление Правительства Российской Федерации
- Распоряжение Правительства Российской Федерации
- Распоряжение Президента Российской Федерации
- Указ Президента Российской Федерации
- Федеральный закон
- Федеральный конституционный закон
- Кодекс

А в самих документах есть такие как: Распоряжение Министерства природных ресурсов и экологии Российской Федерации от 10.06.2010 г. № 21-р/68-рп, Правительства Санкт-Петербурга от 10.06.2010 г. № 21-р/68-рп [3]

Ни в одну из категорий документов выше не попадающие, не говоря уже о таких типах документов как:
- Распоряжение Правительства РСФСР
- Указ Президента РСФСР
- Распоряжение Президента РСФСР
- Постановление Правительства РСФСР
И это ещё не полный список.

И я ещё ничего не говорю про полноту базы опубликованных там НПА, она, скажем так, не подтверждена ничем.

Вопрос - зачем до сих пор Правительство держит у себя раздел "Документы" на сайте. Могли бы сразу заменить эту часть официального сайта на систему Минюста или ФСО.

В принципе, законы и другие нормативные документы - это главный продукт государства. Они должны быть открыты как открытые данные, они, в первую очередь, должны быть полны, достоверны и исчерпывающе опрозрачены.

P.S. Да, как вы наверняка догадались, я занимаюсь в том числе и тем что создаю набор данных нормативных документов для последующего исследования и сопоставления.

Ссылки:
[1] https://www.rbc.ru/opinions/politics/13/03/2020/5e69e70a9a7947737fc79cf3
[2] http://government.ru/docs/all/73495/
[3] http://government.ru/docs/all/73495/

#laws #npa #opengov
Перечень документов для поиска на сайте Пр-ва и пример документа к ним не относящегося и не находимого
Многочисленные коллеги троллят меня попаданием в рейтинг экспертов в цифровой экономике [1] Центра политической коньюнктуры где определили мне 4-е место в списке.

Я узнал об этом ещё полтора дня назад, но надо было вволю выматериться прежде чем писать взвешенное мнение.
Если сформулировать моё мнение коротко то звучит оно так что если составлять рейтинг наиболее идиотских рейтингов то этот рейтинг ЦПК будет на первом месте.

Если подробнее, то рейтинг в котором оценка идёт по популярности, в котором намешаны небольшое число реальных экспертов, большое число функционеров, некоторое число пиарщиков и какое-то количество вообще не пойми кого - это не рейтинг, это злое$&*ая хрень нужная ЦПК для самопиара. Мы узнали что в ЦПК ничего не понимают в цифровой экономике? Ну, ок, это не новость. Я знаю лично несколько десятков людей являющихся реальными экспертами.

Не читайте по утрам советских газет рейтинги ЦПК (с) и уж точно не верьте им.

Ссылки:
[1] http://cpkr.ru/analytics/reyting-ekspertov-v-sfere-cifrovoy-ekonomiki

#ratings
Только что вышел аналитический доклад «Оценка открытости государственных информационных систем в России» [1] подготовленный для Счетной палаты Российской Федерации совместно АНО Информационная культура и Центром перспективных управленческих решений

Это большой и обстоятельный доклад о котором уже успели написать Cnews [2], Tadviser [3] и ТАСС [4].

О чём этот доклад? О том что государство тратит огромные средства на государственные информационные системы, но данные оттуда как были так и остаются недоступными, а сам учёт систем и расходов на них, мягко скажем, несовершенен.

Мы не смогли тотально проверить на открытость всё, проверили только 50 наиболее востребованных ГИС и описали методику того как мы это делали.

А я дополню что мы только только подступили к анализу качества данных в этих ГИСах, что мы совсем не успели охватить региональные ГИС. А в регионах есть очень крутой опыт по их инвентаризации и Минкомсвязи есть у кого поучиться в субъектах федерации, особенно если перестать говорить с субъектами федерации свысока, и начать прозревать и понимать что кое-где организация работ выстроена очень неплохо. Иначе говоря работы осталось много и мы её продолжаем.

Надо отметить Министерство культуры которое у нас вышло лидером в оценке их информационных систем, совершенно заслуженно.

Спасибо всем кто нам помогал, отвечал на вопросы, помогал собирать материалы, оценивать, готовить итоговый доклад [5].

Ссылки:
[1] http://ach.gov.ru/news/tolko-16-gosudarstvennykh-informsistem-imeyut-vysokuyu-stepen-otkrytosti
[2] https://www.cnews.ru/news/top/2020-03-27_schetnaya_palata_raskritikovala
[3] http://www.tadviser.ru/index.php/Статья:ИТ_в_федеральных_ведомствах_России
[4] https://tass.ru/ekonomika/8092583
[5] http://ach.gov.ru/upload/pdf/%D0%9E%D1%86%D0%B5%D0%BD%D0%BA%D0%B0%20%D0%BE%D1%82%D0%BA%D1%80%D1%8B%D1%82%D0%BE%D1%81%D1%82%D0%B8%20%D0%B3%D0%BE%D1%81%D1%83%D0%B4%D0%B0%D1%80%D1%81%D1%82%D0%B2%D0%B5%D0%BD%D0%BD%D1%8B%D1%85%20%D0%B8%D0%BD%D1%84%D0%BE%D1%80%D0%BC%D0%B0%D1%86%D0%B8%D0%BE%D0%BD%D0%BD%D1%8B%D1%85%20%D1%81%D0%B8%D1%81%D1%82%D0%B5%D0%BC%20%D0%B2%20%D0%A0%D0%BE%D1%81%D1%81%D0%B8%D0%B8.pdf

#opendata #opengov #gis #data #it #government #govit
Тема совсем не про данные, но не менее актуальное. The Economist Intelligence Unit (EIU) опубликовали прогноз рецессии по странам G20 [1].

Прогноз неутешителен, падение ВВП везде, почти везде в отрицательные значения в прогнозе ВВП на год.

Особенно:
- Италия: -7%
- Германия: -6,8%
- Аргентина: -6.7%
- Бразилия: -5,5%
- Мексика: -5,4%

Несмотря на то что падение ВВП России ожидается в -2%, ничего хорошего ждать не стоит. Происходящее в экономике сейчас будет даже хуже чем сама эпидемия, из-за наложения многих факторов ситуация, во многом, не до конца поддаётся прогнозам.

Тем не менее, я повторюсь, сейчас не хватает не прогностических моделей распространения эпидемии, а систем оперативного мониторинга и прогнозирования экономики и мировой торговли. Хотя, казалось бы, самое что ни на есть практическое применение собираемым данным.

Ссылки:
[1] https://www.eiu.com/n/covid-19-to-send-almost-all-g20-countries-into-a-recession/

#economy #coronavirus
Как бы я не хотел не получается избежать темы коронавируса COVID-19.

Federation of American Scientists запустили проектов ответов на вопросы от учёных [1], где только проверенная информация

На Kaggle новый конкурс COVID-19 Dataset Award [2] и продолжаются ранее объявленные [3]

ВОЗ разрабатывает мобильное приложение [4] с открытым кодом по мониторингу пандемии.

О тайваньском опыте использования гражданских технологий (civic tech) в противодействии коронавирусу [5]

Ссылки:
[1] https://covid19.fas.org/l/en
[2] https://www.kaggle.com/data/139140
[3] https://www.kaggle.com/covid19
[4] https://github.com/WorldHealthOrganization/app
[5] https://www.foreignaffairs.com/articles/asia/2020-03-20/how-civic-technology-can-help-stop-pandemic

#opendata #data #coronavirus #covid19
Для тех кто вынужденно сидит дома, многочисленные напоминания, о том что делаю я и наша команда в Инфокультуре и в Счетной палате.

Инфокультура
- Видео с мероприятий Инфокультуры https://www.youtube.com/channel/UCve6269kQEJ1LW52HXKtTng/videos
- Рассылка Инфокультуры https://infoculture.us7.list-manage.com/subscribe?u=2e38b8af0d8a547b51427dc9b&id=dadb533f05
- Телеграм канал - https://t.me/infoculture
- Открытый код https://github.com/infoculture
- Открытые данные: https://data.world/infoculture, https://ngodata.ru и https://hubofdata.ru

Счетная палата
- Проект "Госрасходы" https://spending.gov.ru
- Открытый код, включая обучающие материалы - http://code.ach.gov.ru

Мои ресурсы
- Личный блог https://begtin.tech
- Телеграм канал - http://t.me/begtin
- Facebook - https://facebook.com/ibegtin

Список не полный, скорее иллюстративный для тех кто хочет чуть больше погрузиться в открытые данные и открытый код.

#opendata #opensource #opengov
Forwarded from Инфокультура
Сегодня Инфокультуре исполняется 8 лет! 🎉

Мы рады, что сообщество активистов открытых данных в нашей стране растет с каждым годом. Благодарим всех, кто участвует в наших проектах и помогает продвигать концепцию открытости.

В этом году мы отмечаем день рождения в эпоху неопределенности, черных лебедей, самоизоляции и онлайна. Мы искренне убеждены, что свободный обмен знаниями и данными помогает всем нам эффективнее решать общественные проблемы.

📚 Самый ценный вклад, который мы можем сейчас внести — это дать вам возможность узнавать новое, вдохновляться идеями и исследованиями других, чтобы совершенствовать собственные навыки. Хотим поделиться с вами накопленными знаниями и предлагаем вам посмотреть на происходящее с точки зрения данных. Собрали для вас тематическую подборку видео наших лекций:

- «COVID-19: Как смоделировать распространение коронавируса?» — Дмитрий Сергеев, Senior Data Scientist ŌURA, руководитель курса по машинному обучению OTUS: https://bit.ly/2Un6dcS
- «Раскрытие данных о заболеваниях россиян» — Дада Линделл, дата-журналист РБК: https://bit.ly/39tRQaJ
- «Влияние отключения интернета на экономику регионов» — Михаил Климарев, исполнительный директор Общества Защиты Интернета: https://bit.ly/2UmCiBo
- «Комфорт и безопасность в городе: что важно для жителей и что мы можем измерить при помощи данных?» — Юлия Апухтина, главный редактор Интернет-журнала «Другой город»: https://bit.ly/33TgwbI
- «Чему нас научили данные о получателях гуманитарной помощи» — Дарья Алексеева, директор фонда «Второе дыхание»: https://bit.ly/33Y2jKz

Внимание: к описанию видеозаписей прилагаются презентации.

Архив: https://www.youtube.com/infoculture.

🍩 Вы можете нас поздравить и выразить поддержку нашей деятельности с помощью доната: https://www.infoculture.ru/donation.
Наше исследование по открытости ГИСов мы начали сильно раньше коронавируса и многое в нём не учли. Но самое главное что мы не отразили и самое главное что актуально сейчас - это доступность статистики смертности по России. Не отразили поскольку эта система никогда не предполагала массового пользователя,

ЕГР ЗАГС не публикует статистику с середины 2018 года http://zags.nalog.ru/statistics/ да и тогда она публиковалась исключительно в виде 3-х картинок. Что очень удивительно для всех систем ФНС где качественная ведомственная статистика ведётся много лет.

Как анализировать статистику смертности, если эти сведения официально не публикуются?

Что делать с тем что статистика смертности по причинам смерти не публикуется?

#opendata #data
К сожалению (или к счастью для кого-то?) разработчики приложения социального мониторинга в Москве [1] более чем безграмотны. В канале @itsorm сразу много публикаций о том как безграмотно приложение подготовлено, использует HTTP вместо HTTPS и не только.

Лично я лишь удивляюсь почему в России тем что должна делать федеральная власть занимаются московские власти.

Ссылки:
[1] https://play.google.com/store/apps/details?id=com.askgps.personaltrackerround

#privacy #coronavirus
Forwarded from IT и СОРМ
Видимо, хост, на который отправляет данные приложение для слежки за жителями Москвы
Австралийское государственное приложение Coronavirus Australia [1] появилось в Google Play 29 марта [2] и у него уже 580 оценок и 3 звезды.
Российское государственное приложение Мэрии Москвы [3] появилось 25 марта [4] и к нему уже 631 отзыв и оценка в 1 звезду.

Пользователи активно минусуют попытки государства к внедрению всеобщего мониторинга. Но я хочу обратить внимание на другое. Московское приложение, помимо того что сделано "тяп ляп" [5] ещё и сливает статистику в Google Firebase [6] поскольку использует Google Firebase Analytics [7] в своей работе.

Если кто-то хочет задаться вопросом можно ли разрабатывать приложения для Android не сливая статистику и аналитику в Google, то ответ - да, можно. Почему это не было сделано? А вот это и есть важный вопрос, который, я уверен, журналисты найдут время и спросить ДИТ Москвы.

Ссылки:
[1] https://play.google.com/store/apps/details?id=au.gov.health.covid19
[2] https://www.abc.net.au/news/2020-03-29/federal-government-launches-coronavirus-australia-app/12100680
[3] https://play.google.com/store/apps/details?id=com.askgps.personaltrackerround&showAllReviews=true
[4] https://t.me/antidigital/2439
[5] https://t.me/begtin/1841
[6] https://reports.exodus-privacy.eu.org/en/reports/122620/
[7] https://firebase.google.com/

#privacy #coronavirus #moscow #mobile
А вот и ещё подробности уже на основе анализа приложения.
Forwarded from IT и СОРМ
Чтобы вы понимали: персональные данные россиян (фотографии!) из приложения ДИТа мэрии Москвы передаются на серверы в Эстонии (страна НАТО, на секундочку) и возвращаются обратно в виде их анализа.
Интересно, оштрафует ли мэрию Москвы Роскомнадзор?
Или возбудит уголовное дело Следственный Комитет?

То есть у условного ЦРУ есть вообще все рычаги для сбора массива данных о жителях Москвы. И все это богатство подарили западным спецслужбам ДИТ и Собянин.
Не в моих правилах частить с упоминанием какой-то темы, но тут какая то рукотворная катастрофа созданная руками: ДИТ Москвы -> ГБУ Информационный город -> компания "Гаспар" и итоговый продукт в виде мобильного приложения "Социальный мониторинг".

Я постараюсь уже завтра-послезавтра облечь это в текст в "большой форме".

#privacy